林麗丹 李娜

摘要:以2018年教育信息化2.0為起點(diǎn),未來(lái)是以數(shù)據(jù)為基礎(chǔ)的教育與信息化深度融合的數(shù)據(jù)應(yīng)用階段,高校在信息化校園的基礎(chǔ)上逐步開(kāi)展智慧校園建設(shè),以大數(shù)據(jù)技術(shù)為主要支撐技術(shù)之一,充分挖掘、應(yīng)用海量高校大數(shù)據(jù)的價(jià)值,為學(xué)校及師生提供智慧服務(wù)。文章結(jié)合智慧校園建設(shè)總體框架,高校大數(shù)據(jù)的特點(diǎn)及存在問(wèn)題,提出智慧校園的大數(shù)據(jù)處理平臺(tái)技術(shù)架構(gòu),并分析探討大數(shù)據(jù)技術(shù)在智慧校園中的實(shí)際應(yīng)用場(chǎng)景。
關(guān)鍵詞:智慧校園;大數(shù)據(jù)技術(shù);高校智慧校園建設(shè);高校信息化;教育信息化
中圖分類(lèi)號(hào):TP311 文獻(xiàn)標(biāo)識(shí)碼:A
文章編號(hào):1009-3044(2020)18-0036-03
開(kāi)放科學(xué)(資源服務(wù))標(biāo)識(shí)碼( OSID):
1 引言
隨著2018年教育信息化2.0的總體規(guī)劃要求及《智慧校園總體框架》國(guó)家標(biāo)準(zhǔn)的頒布,各大高校逐步開(kāi)展了智慧校園建設(shè)工作[1]。高校智慧校園是在信息化校園的基礎(chǔ)上,所構(gòu)建的智能化網(wǎng)絡(luò)服務(wù)評(píng)價(jià)架構(gòu),智慧校園的建設(shè)主要依賴(lài)于大數(shù)據(jù)、云計(jì)算、物聯(lián)網(wǎng)技術(shù)[2,3]。而高校信息化建設(shè)起步相對(duì)較早,其信息化系統(tǒng)中日常運(yùn)行所涉及的業(yè)務(wù)領(lǐng)域包括教學(xué)、科研、學(xué)工、校園一卡通、圖書(shū)館、后勤、人事等,這些領(lǐng)域會(huì)產(chǎn)生大量數(shù)據(jù)[4]。如何對(duì)這些數(shù)據(jù)進(jìn)行有效的治理、存儲(chǔ)、挖掘分析并運(yùn)用,來(lái)提高教學(xué)質(zhì)量、科研水平及工作效率,為學(xué)校管理提供新思路,為師生提供智慧服務(wù),是智慧校園建設(shè)中利用大數(shù)據(jù)技術(shù)重點(diǎn)要解決的問(wèn)題。本文將在智慧校園建設(shè)總體框架及高校大數(shù)據(jù)特點(diǎn)和內(nèi)在需求的基礎(chǔ)上,提出一種大數(shù)據(jù)處理平臺(tái)技術(shù)架構(gòu),分析大數(shù)據(jù)技術(shù)在高校中的實(shí)際應(yīng)用場(chǎng)景,為優(yōu)化智慧校園應(yīng)用層的建設(shè)提供參考。
2 高校智慧校園
2.1 智慧校園概述
智慧校園是以促進(jìn)現(xiàn)代信息技術(shù)與教育教學(xué)深度融合、提高學(xué)生學(xué)習(xí)、教師教學(xué)、科研效率為目的,以物聯(lián)網(wǎng)、云計(jì)算、大數(shù)據(jù)技術(shù)等為技術(shù)支撐,提供一種環(huán)境全面感知、數(shù)據(jù)化、網(wǎng)絡(luò)化、協(xié)作型一體化的教學(xué)、科研、管理和生活服務(wù),并能對(duì)教育教學(xué)、教學(xué)管理進(jìn)行整體分析和預(yù)測(cè)的智慧學(xué)習(xí)、工作、生活環(huán)境[5]。智慧校園的建設(shè)將為學(xué)校師生打造一個(gè)安全、穩(wěn)定、環(huán)保、節(jié)能的校園,同時(shí)也將為師生提供更加便捷、精準(zhǔn)的個(gè)性化服務(wù)。
2.2 智慧校園建設(shè)總體框架
《智慧校園總體框架》國(guó)家標(biāo)準(zhǔn)中指出智慧校園總體框架建議采用云計(jì)算架構(gòu)進(jìn)行部署,分為基礎(chǔ)設(shè)施層、支撐平臺(tái)層、應(yīng)用平臺(tái)層、應(yīng)用終端和信息安全體系等。不同層級(jí)分別負(fù)責(zé)基礎(chǔ)設(shè)施搭建、網(wǎng)絡(luò)通信、大數(shù)據(jù)處理、系統(tǒng)建設(shè)、服務(wù)提供等邏輯指令的執(zhí)行[6,7]。
1)基礎(chǔ)設(shè)施層。基礎(chǔ)設(shè)施層提供網(wǎng)絡(luò)搭建、網(wǎng)絡(luò)通信、感知設(shè)備和數(shù)據(jù)存儲(chǔ),主要包括數(shù)據(jù)庫(kù)、服務(wù)器、感知設(shè)備、校園基礎(chǔ)設(shè)施等,為校園環(huán)境及校園內(nèi)活動(dòng)的感知、檢測(cè),數(shù)據(jù)的采集存儲(chǔ),網(wǎng)絡(luò)的傳輸提供保障。
2)支撐平臺(tái)層。支撐平臺(tái)層是云計(jì)算、大數(shù)據(jù)業(yè)務(wù)的核心層,為應(yīng)用平臺(tái)層提供驅(qū)動(dòng)和支持,包括云計(jì)算,大數(shù)據(jù)處理等核心技術(shù)架構(gòu)。
3)應(yīng)用平臺(tái)層。應(yīng)用平臺(tái)層是智慧校園應(yīng)用與服務(wù)的內(nèi)容體現(xiàn),在支撐平臺(tái)層的基礎(chǔ)上,構(gòu)建服務(wù)于學(xué)生、教職工的各種應(yīng)用。
4)應(yīng)用終端。校園網(wǎng)的用戶(hù)屬于智慧校園建設(shè)的應(yīng)用終端層,智能手機(jī)、平板以各種瀏覽器及移動(dòng)端設(shè)備,可以隨時(shí)隨地應(yīng)用到校園環(huán)境中,共享各類(lèi)資源及服務(wù)。
5)信息安全體系。信息安全體系是貫穿整個(gè)智慧校園建設(shè)中的安全保障系統(tǒng),保障智慧校園系統(tǒng)的安全運(yùn)行及用戶(hù)的信息安全。
3 大數(shù)據(jù)技術(shù)在智慧校園建設(shè)中的應(yīng)用
3.1 高校大數(shù)據(jù)的特點(diǎn)及內(nèi)在需求分析
高校信息化建設(shè)中收集了大量數(shù)據(jù),高校大數(shù)據(jù)普遍存在一些共有的特點(diǎn)。(1)數(shù)據(jù)產(chǎn)生的用戶(hù)群體相對(duì)單一,主要是學(xué)生、教工。(2)數(shù)據(jù)來(lái)源豐富,包括感知設(shè)備數(shù)據(jù),如校園一卡通、門(mén)禁等;系統(tǒng)數(shù)據(jù),如教務(wù)系統(tǒng)、學(xué)工系統(tǒng)、招生系統(tǒng)、收費(fèi)系統(tǒng)、人事系統(tǒng)等;網(wǎng)絡(luò)日志數(shù)據(jù),如校園網(wǎng)、AP熱點(diǎn)等產(chǎn)生的大量日志數(shù)據(jù);社交數(shù)據(jù),如QQ、微信、抖音、貼吧、微博等。(3)數(shù)據(jù)量大。自高校信息化建設(shè)以來(lái),學(xué)校的學(xué)生、教職工的相關(guān)數(shù)據(jù)被采集存儲(chǔ),數(shù)據(jù)量非常大。(4)數(shù)據(jù)結(jié)構(gòu)多樣。不同數(shù)據(jù)源的數(shù)據(jù)類(lèi)型不同,包括結(jié)構(gòu)化、非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)。(5)數(shù)據(jù)質(zhì)量低。高校信息化建設(shè)中采集數(shù)據(jù)時(shí),并未對(duì)數(shù)據(jù)進(jìn)行清洗、治理,導(dǎo)致數(shù)據(jù)完整性、準(zhǔn)確性差,數(shù)據(jù)質(zhì)量低。(6)數(shù)據(jù)利用率低。大部分高校只對(duì)數(shù)據(jù)采集、存儲(chǔ),一段時(shí)間后由于存儲(chǔ)資源的壓力將數(shù)據(jù)丟棄,未采用有效的技術(shù)手段對(duì)數(shù)據(jù)進(jìn)行挖掘利用。(7)信息孤島現(xiàn)象。高校普遍存在信息孤島現(xiàn)象,教務(wù)、科研、學(xué)工、收費(fèi)、人事、財(cái)務(wù)、圖書(shū)館各自用自己的系統(tǒng)采集、存儲(chǔ)數(shù)據(jù),并未建立數(shù)據(jù)共享機(jī)制,導(dǎo)致數(shù)據(jù)重復(fù)采集,不能產(chǎn)生關(guān)聯(lián)性且重復(fù)部分過(guò)多占用存儲(chǔ)資源。
高校大數(shù)據(jù)資源價(jià)值的挖掘與應(yīng)用是高校智慧校園建設(shè)中的重要內(nèi)容,智慧校園中大數(shù)據(jù)處理平臺(tái)及數(shù)據(jù)共享平臺(tái)的搭建,可以解決高校大數(shù)據(jù)面臨的利用率低、信息孤島的問(wèn)題,實(shí)現(xiàn)數(shù)據(jù)資源共享、服務(wù)共享的目的。
3.2 大數(shù)據(jù)處理平臺(tái)技術(shù)架構(gòu)
高校智慧校園建設(shè)中需要充分挖掘海量數(shù)據(jù)的價(jià)值,這就需要在支撐平臺(tái)層構(gòu)建大數(shù)據(jù)處理平臺(tái),用于完成數(shù)據(jù)采集、清洗、存儲(chǔ),數(shù)據(jù)挖掘分析,數(shù)據(jù)可視化,最終給學(xué)校及師生提供智慧服務(wù)。結(jié)合高校智慧校園建設(shè)的實(shí)際需求、高校大數(shù)據(jù)特點(diǎn)及存在問(wèn)題和主流大數(shù)據(jù)技術(shù),本文提出一種大數(shù)據(jù)處理平臺(tái)技術(shù)架構(gòu)如圖1所示。首先是數(shù)據(jù)采集階段,根據(jù)數(shù)據(jù)源的不同選擇數(shù)據(jù)采集技術(shù)。如業(yè)務(wù)數(shù)據(jù)可以采用Sqoop工具采集,設(shè)備數(shù)據(jù)的主流采集技術(shù)為Flume、Kafka,而互聯(lián)網(wǎng)數(shù)據(jù)主要是通過(guò)爬蟲(chóng)來(lái)獲取,如Scrapy框架,第三方合作數(shù)據(jù)則可以通過(guò)HTTP/FTP方式共享。其次是數(shù)據(jù)存儲(chǔ),主要用到的有HDFS分布式文件系統(tǒng)、HBASE、ElasticSearch、Redis、MySql等技術(shù)存儲(chǔ)結(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)。然后是大數(shù)據(jù)挖掘分析階段,離線數(shù)據(jù)處理采用MapReduce、Hive等技術(shù),實(shí)時(shí)數(shù)據(jù)處理用Spark、SparkStream等,結(jié)合機(jī)器學(xué)習(xí)的庫(kù)如MLib,完成對(duì)數(shù)據(jù)的分析挖掘。最后根據(jù)學(xué)校領(lǐng)導(dǎo)、部門(mén)、院系、老師和學(xué)生關(guān)注業(yè)務(wù)的數(shù)據(jù)化、可視化需求,對(duì)數(shù)據(jù)進(jìn)一步分析后,提供數(shù)據(jù)服務(wù),包括數(shù)據(jù)可視化看板呈現(xiàn),數(shù)據(jù)開(kāi)發(fā)平臺(tái)及主數(shù)據(jù)共享平臺(tái)。其中數(shù)據(jù)開(kāi)放平臺(tái)為學(xué)校第三方合作提供數(shù)據(jù)支持,主數(shù)據(jù)共享平臺(tái)則主要解決校內(nèi)各部門(mén)之間存在的信息孤島問(wèn)題,實(shí)現(xiàn)校內(nèi)數(shù)據(jù)資源的共享[8]。
3.3 應(yīng)用場(chǎng)景分析
高校智慧校園的應(yīng)用平臺(tái)層包含多種應(yīng)用系統(tǒng),結(jié)合實(shí)際功能需求,將相關(guān)的信息服務(wù)整合至某一個(gè)應(yīng)用程序中,可以實(shí)現(xiàn)智能化工作及服務(wù)。為了讓學(xué)生、教工更好的使用智慧化服務(wù),高校中基于大數(shù)據(jù)技術(shù)的應(yīng)用程序開(kāi)發(fā)可以從以下幾個(gè)實(shí)際場(chǎng)景出發(fā)。
應(yīng)用場(chǎng)景一:學(xué)校各個(gè)部門(mén)業(yè)務(wù)的數(shù)據(jù)化、可視化展示及決策建議推送。根據(jù)角色的不同,可視化展示該角色應(yīng)關(guān)注的數(shù)據(jù)內(nèi)容及決策建議。如招生處展示招生情況、與往年相比今年招生情況,并給出如何改善生源情況的建議等。
應(yīng)用場(chǎng)景二:綜合預(yù)警,減少學(xué)生安全事故的發(fā)生。高校學(xué)生安全事故頻繁發(fā)生,如跳樓、自殺、網(wǎng)貸、抑郁等,通過(guò)使用大數(shù)據(jù)技術(shù)監(jiān)測(cè)學(xué)生行為,描述學(xué)生行為軌跡,對(duì)異常行為分析并給出相應(yīng)預(yù)警,如失聯(lián)預(yù)警、心理預(yù)警、逃課預(yù)警、夜不歸宿預(yù)警、網(wǎng)貸預(yù)警、傳染病預(yù)警、情感預(yù)警、邪教預(yù)警等,將預(yù)警消息及建議解決方案推送給負(fù)責(zé)老師,老師可以通過(guò)移動(dòng)設(shè)備或者PC端查看。
應(yīng)用場(chǎng)景三:教學(xué)管理及學(xué)情分析。通過(guò)大屏展示教學(xué)任務(wù)大數(shù)據(jù)、學(xué)生培養(yǎng)大數(shù)據(jù),讓學(xué)生實(shí)時(shí)、便捷掌握教學(xué)和學(xué)生培養(yǎng)核心工作進(jìn)展。結(jié)合教學(xué)任務(wù)大數(shù)據(jù)、學(xué)生培養(yǎng)大數(shù)據(jù)進(jìn)一步分析挖掘,進(jìn)行學(xué)情分析,對(duì)不同學(xué)習(xí)程度的學(xué)生學(xué)習(xí)情況深度分析,為老師優(yōu)化教學(xué)進(jìn)度、教學(xué)模式提供指導(dǎo)。
應(yīng)用場(chǎng)景四:師生全景數(shù)據(jù),描述學(xué)生畫(huà)像、教師畫(huà)像,為學(xué)校精準(zhǔn)化、個(gè)性化管理提供基礎(chǔ)。
應(yīng)用場(chǎng)景五:學(xué)工管理大數(shù)據(jù),讓學(xué)生管理更簡(jiǎn)單。包括心理健康、精準(zhǔn)扶貧、智慧查寢、思政分析、學(xué)生軌跡、學(xué)生誠(chéng)信等。
應(yīng)用場(chǎng)景六:網(wǎng)絡(luò)日志清洗及深度分析系統(tǒng)。校園網(wǎng)的日志數(shù)據(jù),包含了教師、學(xué)生在校的網(wǎng)上行為,對(duì)學(xué)生、教師的行為分析提供重要的數(shù)據(jù)資源。
4 結(jié)論
大數(shù)據(jù)技術(shù)為智慧校園建設(shè)的主要技術(shù),通過(guò)大數(shù)據(jù)采集技術(shù)、分布式文件系統(tǒng)、數(shù)據(jù)計(jì)算引擎、數(shù)據(jù)挖掘分析框架等構(gòu)建大數(shù)據(jù)處理平臺(tái),對(duì)采集到的海量高校數(shù)據(jù),進(jìn)行清洗、抽取、集成、挖掘分析,從而得到有價(jià)值的信息。結(jié)合高校的實(shí)際需求,整合信息至應(yīng)用程序中,為師生提供智慧化服務(wù)。
參考文獻(xiàn):
[1]沈華根,馮煒,褚寧琳,等.基于大數(shù)據(jù)的高校智慧校園云端化建設(shè)方案研究[Jl.無(wú)線互聯(lián)科技,2019(22):11-12.
[2]李銀超.大數(shù)據(jù)挖掘技術(shù)在高校智慧校園中的應(yīng)用[J].信息與電腦(理論版),2019(22):131-132,135.
[3]刁智剛.大數(shù)據(jù)下的高校智慧校園系統(tǒng)[J].計(jì)算機(jī)產(chǎn)品與流通,2019(12):172.
[4]李江靈.大數(shù)據(jù)挖掘在高職院校智慧校園建設(shè)中的應(yīng)用[Jl.電腦編程技巧與維護(hù),2019(12):116-117,131.
[5]宋佳.試析大數(shù)據(jù)背景下高職院校智慧校園建設(shè)[J].電腦編程技巧與維護(hù),2019(11):79-80,115.
[6]徐勇.大數(shù)據(jù)及云計(jì)算技術(shù)在智慧校園中的整合與應(yīng)用研究[J].電腦知識(shí)與技術(shù),2019,15(32):55-56,68.
[7]聶巍,大數(shù)據(jù)視角下高校智慧校園信息化建設(shè)創(chuàng)新研究[Jl.信息與電腦(理論版),2017(14):120-121.
[8]汪應(yīng).基于“人工智能+大數(shù)據(jù)”的智慧校園整體規(guī)劃和建設(shè)——以重慶工程職業(yè)技術(shù)學(xué)院為例[J].世界教育信息,2019,32(23):25-28,40.
【通聯(lián)編輯:唐一東】
作者簡(jiǎn)介:林麗丹(1989-),女,河南漯河人,助教,碩士,主要研究方向?yàn)橛?jì)算機(jī)應(yīng)用技術(shù)、大數(shù)據(jù)技木與應(yīng)用;李娜,副教授,碩士。