大數(shù)據(jù)技術(shù)在廣播電視監(jiān)測(cè)中的應(yīng)用方法

山西廣播電視無線管理中心 李曉光

大數(shù)據(jù)技術(shù)在廣播電視監(jiān)測(cè)中的應(yīng)用方法

山西廣播電視無線管理中心 李曉光

豐富多樣的廣播電視播放形式不斷的推動(dòng)了廣播電視監(jiān)測(cè)系統(tǒng)領(lǐng)域的發(fā)展，同時(shí)需要檢測(cè)的數(shù)據(jù)信息量也明顯的增加，而當(dāng)前的廣播電視監(jiān)控的重中之重就是在龐大的檢測(cè)數(shù)據(jù)的體系中獲得有效的信息。文中對(duì)大數(shù)據(jù)的特點(diǎn)及將來的發(fā)展應(yīng)用進(jìn)行了講述，對(duì)分析監(jiān)測(cè)數(shù)據(jù)有很好的參考作用。

大數(shù)據(jù)技術(shù)；廣播電視監(jiān)測(cè)；應(yīng)用

伴隨著高速發(fā)展的廣播電視業(yè)務(wù)，形成了多元化的監(jiān)測(cè)播出形式，同時(shí)涉及的領(lǐng)域和規(guī)模也不斷擴(kuò)大，對(duì)于廣播電視監(jiān)測(cè)工作者而言，在大量的數(shù)據(jù)中得到有效的信息是當(dāng)前行業(yè)面臨的最重要的問題，將信息量龐大的數(shù)據(jù)進(jìn)行處理及應(yīng)用被稱為大數(shù)據(jù)。當(dāng)前的監(jiān)測(cè)工作雖不屬于大數(shù)據(jù)時(shí)期，但正在逐步趨向于大數(shù)據(jù)時(shí)代。

1 大數(shù)據(jù)關(guān)鍵技術(shù)

1.1 數(shù)據(jù)預(yù)處理技術(shù)

通常用到的數(shù)據(jù)預(yù)處理的方法是將數(shù)據(jù)進(jìn)行抽取和清洗。數(shù)據(jù)的抽取過程即數(shù)據(jù)集成，是將結(jié)構(gòu)化的數(shù)據(jù)或者形式復(fù)雜的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行同質(zhì)化，對(duì)后期的數(shù)據(jù)分析起到了很好的作用。數(shù)據(jù)的清洗指的是將將那些可有可無的數(shù)據(jù)清除掉，將有用的數(shù)據(jù)留下。當(dāng)前社會(huì)，行業(yè)中起到主導(dǎo)地位的是Datastage和Powercenter兩款，可以依照數(shù)據(jù)結(jié)構(gòu)由易到難對(duì)大量數(shù)據(jù)進(jìn)行收集、變換、分發(fā)等操作，從而做到有效的處理大數(shù)據(jù)。

1.2 數(shù)據(jù)存儲(chǔ)與數(shù)據(jù)管理

數(shù)據(jù)管理是指利用計(jì)算機(jī)的硬件和軟件將數(shù)據(jù)采集、儲(chǔ)存及處理的過程。數(shù)據(jù)管理可以很好的將數(shù)據(jù)的功能展現(xiàn)出來。而對(duì)數(shù)據(jù)進(jìn)行嚴(yán)格管理的重要之處則是數(shù)據(jù)組織。時(shí)代的發(fā)展也在影響著數(shù)據(jù)管理的發(fā)展，由原來的人工管理到文件系統(tǒng)，再到現(xiàn)在的數(shù)據(jù)庫(kù)系統(tǒng)共三個(gè)階段。數(shù)據(jù)庫(kù)系統(tǒng)中包含有數(shù)據(jù)結(jié)構(gòu)，這樣不僅能很好的展現(xiàn)出數(shù)據(jù)之間的關(guān)聯(lián)，還對(duì)數(shù)據(jù)的修復(fù)及引申更新有一定的好處，同時(shí)還具有保證數(shù)據(jù)獨(dú)立、安全、完整的優(yōu)點(diǎn)，使數(shù)據(jù)管理的效率得以提高。

1.3 數(shù)據(jù)挖據(jù)與智能分析

數(shù)據(jù)挖掘觸及到人工智能、模式識(shí)別、機(jī)器學(xué)習(xí)以及統(tǒng)計(jì)學(xué)等諸多方面。數(shù)據(jù)挖掘指的是在大量的數(shù)據(jù)信息中利用算法的方式將有用的信息搜索出來的過程。將計(jì)算機(jī)科學(xué)作為數(shù)據(jù)挖掘的主體，主要采用統(tǒng)計(jì)、在線分析處理、檢索、機(jī)器學(xué)習(xí)、專家系統(tǒng)和模式識(shí)別等方法，以此來達(dá)到搜索目標(biāo)。且在商務(wù)管理、生產(chǎn)控制、市場(chǎng)分析和工程設(shè)計(jì)等眾多領(lǐng)域使用被檢索到的信息。

2 當(dāng)前廣播電視監(jiān)測(cè)監(jiān)管工作面臨的難題

2.1 業(yè)務(wù)過于龐雜

目前廣播電視監(jiān)聽監(jiān)視系統(tǒng)、廣告監(jiān)管系統(tǒng)、安全播出系統(tǒng)、WAP監(jiān)管系統(tǒng)等大量系統(tǒng)投入到廣播電視監(jiān)管工作中，導(dǎo)致業(yè)務(wù)系統(tǒng)十分的繁雜。導(dǎo)致服務(wù)器數(shù)量過多，且每一種管理方法與同一類型或系統(tǒng)相互呼應(yīng)，使得監(jiān)測(cè)監(jiān)管工作的在極大數(shù)量的服務(wù)器中有著非常龐大的任務(wù)，而且上層應(yīng)用接口、流程非常繁雜，使廣播電視監(jiān)測(cè)監(jiān)管工作變得十分的困難且繁瑣。

2.2 備用系統(tǒng)不足

目前的廣播電視監(jiān)測(cè)監(jiān)管過程中，現(xiàn)有系統(tǒng)受到人們的重視而備用系統(tǒng)的重要程度卻被人們所忽視，當(dāng)系統(tǒng)和設(shè)備突然出現(xiàn)問題時(shí)，需要經(jīng)過長(zhǎng)時(shí)間的且非常復(fù)雜的手段才能將系統(tǒng)環(huán)境修復(fù)，備用系統(tǒng)不充分導(dǎo)致廣播電視監(jiān)測(cè)監(jiān)管工作遇到問題時(shí)不得已而暫停，使工作效率與工作質(zhì)量降低。

2.3 資源利用不均

主機(jī)資源不能有效的被利用是當(dāng)前的廣播電視監(jiān)測(cè)監(jiān)管過程中普遍存在的現(xiàn)象。一般情況下，在部署的輕量級(jí)應(yīng)用主機(jī)當(dāng)中，計(jì)算和I/O資源在輕量級(jí)的主機(jī)中處于閑置狀態(tài)，且固定的一個(gè)主機(jī)上會(huì)運(yùn)行單一的業(yè)務(wù)，導(dǎo)致一部分主機(jī)被擱置，造成資源浪費(fèi)，且重復(fù)投資的狀況頻繁出現(xiàn)。

2.4 平臺(tái)升級(jí)困難

硬件不斷更新，與之配套的操作系統(tǒng)和數(shù)據(jù)庫(kù)也隨著不斷變化，各業(yè)務(wù)系統(tǒng)不斷升級(jí)，導(dǎo)致業(yè)務(wù)系統(tǒng)運(yùn)行穩(wěn)定性差，由于尚未統(tǒng)一規(guī)劃軟件版本和硬件配置沒有統(tǒng)一的標(biāo)準(zhǔn)，導(dǎo)致對(duì)后期的工作帶來較大的影響。

3 廣播電視監(jiān)測(cè)中大數(shù)據(jù)技術(shù)的應(yīng)用

3.1 采集監(jiān)控信息

廣播電視監(jiān)測(cè)監(jiān)管分析系統(tǒng)依據(jù)大數(shù)據(jù)而建立，其中的采集監(jiān)控信息模塊，將大數(shù)據(jù)的分析技術(shù)、互聯(lián)網(wǎng)搜索及文本挖掘技術(shù)合理的利用后，對(duì)各種社交軟件中產(chǎn)生的信息開始全面的整理及應(yīng)用。能夠主動(dòng)對(duì)互聯(lián)網(wǎng)中產(chǎn)生的資源信息進(jìn)行增量采集，不僅能有效的建立原始信息庫(kù)還能實(shí)時(shí)更新。并且，此模塊能將網(wǎng)站中的多種語言信息全部進(jìn)行采集，更便于廣播電視行業(yè)加強(qiáng)對(duì)國(guó)內(nèi)外敵對(duì)勢(shì)力的動(dòng)態(tài)信息的采集。網(wǎng)頁、視頻、圖片等各種模式的信息及網(wǎng)頁與論壇中的均可以利用全媒體技術(shù)進(jìn)行采集，且將信息保存到數(shù)據(jù)庫(kù)中。

3.2 處理監(jiān)控信息

文本和媒體在大數(shù)據(jù)中的挖掘技術(shù)經(jīng)過過濾、排列、分類采集可以獲得原始信息資源，且能夠自動(dòng)將內(nèi)碼轉(zhuǎn)換成智能模式進(jìn)行分析和處理監(jiān)控信息，因而形成了內(nèi)容豐富的信息樹。人工記錄信息在大數(shù)據(jù)技術(shù)中心也同樣支持，可以依照現(xiàn)實(shí)對(duì)它進(jìn)行一系列處理，如：加工、修改或刪除。最重要的是，大數(shù)據(jù)技術(shù)能夠幫助頁面完成有效元數(shù)據(jù)的自動(dòng)提取，也就是自動(dòng)分析功能，同時(shí)能將垃圾文件自動(dòng)刪除，避免了各種資源浪費(fèi)。

3.3 分析監(jiān)控信息

廣播媒體監(jiān)測(cè)監(jiān)管系統(tǒng)中的分析監(jiān)控信息模塊不僅能快速的對(duì)監(jiān)控信息分析處理，還能進(jìn)行檢索工作，并且通過授權(quán)的方式對(duì)監(jiān)控信息完成檢索，按照不同情況來提供與之相符的信息服務(wù)。尤其是大數(shù)據(jù)技術(shù)當(dāng)中的知識(shí)管理技術(shù)能夠?qū)⑿枰治龅臄?shù)據(jù)整理成報(bào)告及統(tǒng)計(jì)圖表，便于工作人員更加簡(jiǎn)潔明了的了解監(jiān)控情況。在監(jiān)控信息導(dǎo)航技術(shù)能夠?qū)⒏鞣N信息數(shù)據(jù)分類并對(duì)監(jiān)控報(bào)告進(jìn)行管理；在其基礎(chǔ)之上，廣播電視行業(yè)可以對(duì)互聯(lián)網(wǎng)重點(diǎn)事件分析報(bào)告及監(jiān)控分析報(bào)告做出相應(yīng)的預(yù)警信息，警示其他人及時(shí)對(duì)違法違規(guī)的信息進(jìn)行阻止且刪除。管理電視廣播監(jiān)控監(jiān)管工作的人員也可以隨時(shí)對(duì)監(jiān)控信息導(dǎo)航樹定義和管理，方便對(duì)時(shí)間中的各種邏輯關(guān)系進(jìn)行深入解析。

4 結(jié)語

大數(shù)據(jù)作為一種資源、一種工具，雖然為廣播電視監(jiān)管工作帶來翻天覆地的變化，但大數(shù)據(jù)仍無法將所有的數(shù)據(jù)采集、加工處理，所以并不能提供絕對(duì)準(zhǔn)確的答案，我們只能將它作為參考數(shù)據(jù)，不能完全依賴。

[1]朱磊．廣播電視監(jiān)測(cè)信息管理平臺(tái)的建設(shè)[J]．現(xiàn)代電視技術(shù),2007(10)．

[2]程石,劉志偉．探究廣播電視監(jiān)測(cè)中大數(shù)據(jù)技術(shù)的應(yīng)用[J]．通訊世界,2017(08)．

[3]秦琨琨．廣播電視監(jiān)測(cè)中信息化應(yīng)用及安全防護(hù)[J]．?dāng)?shù)字傳媒研究,2016(04)．

[4]趙杰,丁勇扎西．廣播電視監(jiān)測(cè)網(wǎng)安全管理平臺(tái)安全響應(yīng)工單系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J]．廣播與電視技術(shù),2007(11)．

[5]王春雨,葉建超,關(guān)健．基于VB的廣播電視監(jiān)測(cè)報(bào)表軟件的設(shè)計(jì)與應(yīng)用[J]．電子世界, 2016(01)．

[6]蔡國(guó)賢．廣播電視監(jiān)測(cè)技術(shù)的研究[J]．黑龍江科技信息,2015(31)．

[7]趙國(guó)強(qiáng)．基于互聯(lián)網(wǎng)建立廣播電視監(jiān)測(cè)服務(wù)平臺(tái)的構(gòu)想[J]．廣播電視信息,2014(03)．

[8]李碩．廣播電視監(jiān)測(cè)系統(tǒng)的應(yīng)用與發(fā)展[J]．電子制作,2013(16)．

[9]李金根．廣播電視監(jiān)測(cè)網(wǎng)網(wǎng)絡(luò)安全研究[J]．科技創(chuàng)新導(dǎo)報(bào),2011(24)．

李曉光（1982—），男，山西翼城人，學(xué)士，工程師，從事廣播電視技術(shù)工作。