淺析重大公共衛生事件中大數據的應用開發要點

摘 ?要：2020年新冠肺炎病毒被列為全球重大公共衛生緊急事件，此前雖然大數據也在社會各領域獲廣泛應用，但短時間內，面對社會突發重大事件，相關科技企業能夠做哪些有效工作，又面臨哪些技術難點，這類研究內容較少。本文以一款具象化數據產品為例，詳細回答以上問題，并期為日后類似事件提供一定的參考價值。

關鍵詞：重大公共事件;大數據應用;數據開放;技術原理

中圖分類號：R126.4 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 文獻標識碼：A

本文著錄格式：苗志如.淺析重大公共衛生事件中大數據的應用開發要點——以清博大數據為例[J].中國傳媒科技，2020，03（03）：19-21.

2020年春節，新型冠狀病毒肺炎突然出現并迅速蔓延。中共中央政治局常務委員會2月3日召開會議強調：這次疫情是對我國治理體系和能力的一次大考。無論是對政府部門還是科研機構來說，重大公共衛生事件中的溝通與傳播都是全球性難題。

隨著疫情的發展，數據和分析的價值迅速體現出來。此前著名的管理和咨詢公司麥肯錫（McKinsey）就說過：“大數據已經滲透到工業和商業領域的各個方面，成為影響生產的一個重要因素。”[1]大數據是“從海量數據中對其規律實施尋找的技術。數據挖掘能夠為與之對應的決策提供更具有價值的參考依據。”[2]

此次疫情大數據不僅關注輿情走向和宏觀決策，對個體用戶行為的信息查詢和分析也更精準細致。通過“大數據算法+應用”，各大媒體、互聯網平臺、科技公司和科研機構聯手研發多種抗疫救災的數據產品，協同創新推動大數據應用，全網新聞、社交、地圖、救援、辟謠、外賣等數據挖掘工作在此次疫情中發揮了重要作用。下面以清博大數據為例來解讀大數據在疫情期間的有效應用。

2月10日，清博大數據研發的疫情防護公益產品“疫情查”正式上線運行。該產品集合了疫情防護的“查、測、防、援、購、宣、辟、保”等八大關鍵環節。2003年美國紐約健康和心理衛生局通訊聯絡處長桑德拉·穆林曾在《從西尼羅病毒到SARS，紐約市的溝通歷經磨難與考驗》一文里提出以下五個觀點：迅速把消息傳出去;公眾對風險的看法與我們希望的大相徑庭;要承認并理解公眾的擔憂;在危機的早期階段充分溝通;為下一次危機作好準備。[3]結合桑德拉·穆林的觀點，“疫情查”產品功能設置在快速應對、打通政務、科研部門與民眾的溝通方面都起到了積極作用。

1.準確發現民眾需求，快速完成技術攻關

1月24日起，全國多地城市陸續啟動重大突發公共衛生事件一級響應。疫情前期，由于此時的民眾對于疫情的認知還很匱乏，因此很容易出現各種猜疑和恐慌情緒;[4]并且全國各地醫療機構、藥房及商超均面臨著防護用品緊缺的情況。事件爆發突然，快速明確需求、快速上線對應數據產品才能有效抓住溝通先機。

據此，在1月28日明確產品需求后，清博大數據“疫情查”開發團隊便迅速開始了技術攻關，1月30日，短短三天時間內，快速上線了【防護用品企業查詢】、【確診患者同程查詢】、【防疫知識問答】三款產品。除了技術人員的日夜鏖戰，高效率的背后與系列前沿技術的應用密不可分。本次開發主要應用了以下方法：

1.1分布式云服務集群系統，為大數據算法提供助力

在數以千萬億的公開數據庫中調取意向的“防護用品企業”、“疫情全網傳播”等數據，對存儲空間和運算能力都提出了更高的要求。清博團隊采用可擴展分布式云服務集群，通過軟硬件技術整合了多臺服務器，從而有效實現了數據儲存的負載均衡。在數據分析過程中，“智能任務優先級調度系統”的運用，對數據自動構建了任務優先級，與傳統架構相比大大提高了資源分配和運行的效率。

1.2應用simHash算法，讓海量千萬級的數據去重更高效

過了海量數據的收錄關，疫情查產品中的數據還要進入到下一步的關鍵處理即：去重。在千億級數據中尋找到重復的信息，與在十三億中國人中找到你想找的人，其難度相差無異。此次查重工作中，清博團隊運用SimHash算法為每一條數據賦予了一個唯一認證，大大降低了查詢的難度。舉個通俗點的例子，一篇若干數量的文本內容，經過simHash降維后，可能僅僅得到一個長度為32或64位的二進制由01組成的字符串，這一點非常相似我們的身份證。[5]

1.3多方核查去偽，讓信息準確度更有保障

對于疫情查中的“防護用品生產企業查詢”、“謠言粉碎機”、“確診患者同程查詢”等產品，信息的真偽辨別是重中之重的工作。隨著疫情逐步發展，不同地區、不同時間，信息實時在變化。及時、準確的數據更新對于終端用戶的使用影響巨大。以“防護用品生產企業查詢”為例，為了核實生產企業的信息真偽及最新情況，運營人員在十天的時間里打了7000多通核實電話。除了技術的廣泛應用，在一些工作中，人力的投入依舊很大。

2.第一時間開放對外接口，助力產品普及更廣泛

為發揮產品的最大化效用，開發團隊在產品上線的第一時間便明確了免費、開放的原則，為全國各地區各組織機構提供技術支持。截止到發稿，已有全國260余家組織機構企業自發加入公益推廣計劃。其中【蔬菜合作社查詢】產品獲國務院客戶端微信小程序采用，影響力擴大至全國范圍，為更多蔬菜采購商、經紀人帶去便利。

3.多維度功能設置，全方位服務大眾

清博大數據將全國各地區與疫情相關的各類信息進行大數據分析與研判，從各角度給予疫情防控部門全面智能的決策支持，通過各維度服務廣大人民群眾的切實需求。

3.1查：“全國疫情實時數據”實時顯示疫區最新動態

該功能提供實時數據、疫情地圖、疫情趨勢等信息，同時可設置“本地疫情”，顯示所在地或所關心地區的具體情況。多維度、直觀的向用戶展現疫情的發展態勢。

3.2測：“防疫知識問答”強化防護知識科普

通過做題的模式，增強群眾對新型肺炎了解認知及防控知識，滿足群眾和社會對科普知識不斷變化的新需要。

3.3防：“確診患者同程查詢”有效降低新冠病毒二次傳播

通過綜合媒體報道確診病例曾乘坐的交通工具及曾去過的部分公共場所等信息，可實現根據日期、車次和地區快速查詢，快速找出與確診患者有過接觸的人群，幫助縮短疫情發現周期。

3.4援：“雷火救助快線”為新冠肺炎求助者增設一條求助渠道

由于醫療物資、人員緊張，武漢地區仍然有很多疑似病例未能得到醫院收治，雷火求助快線在詳細了解記錄到患者的有關信息后，會第一時間轉交給相關部門，避免求助信息在浩瀚網絡中被淹沒，幫助患者大大提高獲得援助的機會。

3.5購：“防護用品查詢”和“蔬菜合作社查詢”鏈接重要物資采購

這兩個功能能夠為口罩、防護服、護目鏡等防護用品生產廠家和蔬菜合作社的查詢提供一個線上入口，方便群眾和戰斗在防疫一線的工作者快速聯系到生產商，進行物資的采購。有效緩解因物資緊缺帶來的救助阻礙。以“蔬菜合作社查詢”為例，目前該查詢產品的數據庫幾乎覆蓋了全國各大蔬菜生產合作社，可直觀查看每家合作社的所在省份、供應能力、蔬菜品種、聯系地址與方式等有效信息。通過“省份”和“蔬菜名稱”兩種查詢方式，即可快速高效找到意向供應商，從而保障了蔬菜種類和數量的供應充足。

3.6宣：“衛健委公號發布”和“疫情全網傳播”梳理重點信息及全網傳播分析

“衛健委公號發布”可即時查看全國衛健委公號發布的內容，并可具體定位到每一個市，及時為民眾提供準確科普信息;“疫情全網傳播”版塊則通過可視化圖表的形式呈現“新冠肺炎”相關信息在全網各平臺的傳播走勢、發布情況，幫助用戶把握疫情信息傳播的整體態勢。

3.7辟：“防疫謠言粉碎機”有效降低負面信息危害

綜合各大媒體和專業機構以及專業人士已辟謠的相關信息，該功能可有效為群眾提供謠言查詢，穩定群眾情緒，減少群眾恐慌焦慮等負面情緒。

3.8保：“新冠肺炎無憂保”和“合同法律診斷室”為民眾安全和法律權益提供一份保障

“新冠肺炎無憂保”版塊為當前未被醫院確診，且未被確認為疑似病例的用戶免費提供輕癥、重癥和身故三類“無憂保”，填寫信息即可領取;“合同法律診斷室”版塊由清博聯合Welaw電子合同平臺設立，針對疫情期間合同履行無法依約完成這一難題提供便捷的在線診斷公益服務，幫助企業主答疑解惑，減少損失。

4.保持數據實時更新，及時補充上線新功能

隨著疫情的快速發展，疫情相關的信息也以幾何倍速快速增長，對此開發團隊必須對對其及時進行更新，才能為大眾提供更為實用的信息。對于需要人工二次核查的信息也要同步加快人手的投入。 作為一款數據產品，疫情查不僅承擔著信息的傳遞科普功能，在雷火熱線中還是一個關鍵的信息參與者，對信息的更新和反饋提出了更高的要求。對于疫情中層出不窮新出現的社會問題、科普內容等還要及時把握好新功能的開發節奏。從這個角度講，這場對抗疫情的戰役也是普及大數據、研究大數據、學習大數據的實戰大課堂。

大數據行業在中國興起、發展已經數十年，此次疫情中大數據表現出更強的決策力、洞察發現力和流程優化能力，讓我們看到大數據應用的更多可能。隨著人工智能、云計算、5G等技術不斷發展與完善，相信在未來的工作生活中，小到衣食住行，大到國家治理，大數據技術將進一步滲透到社會的方方面面。

[1]于施洋，王建東，童楠楠.國內外政務大數據應用發展述評：方向與問題[J].電子政務，2016（1）.

[2]何春.大數據時代背景下處理技術研究[J].科技經濟導刊，2019，27（31）.

[3]桑德拉·穆林，胡珉琦，譯.重大公共衛生事件如何向公眾“說”[J].中國科學報，2020，2（13）：5.

[4]新型冠狀病毒肺炎大眾防護與心理疏導[M].中南大學出版社，2020（2）.

[5]Google.Detecting Near-Duplicates for Web Crawling，2007.

作者簡介：苗志如（1991-），女，河北衡水，品牌策劃，清博大數據，大數據在產業、融媒體和輿論傳播方面的應用。