大數(shù)據(jù)時(shí)代下數(shù)據(jù)質(zhì)量的挑戰(zhàn)

戚 斌

（陜西國(guó)防工業(yè)職業(yè)技術(shù)學(xué)院 陜西 西安 710300）

1 引言

近幾年隨著各項(xiàng)科學(xué)技術(shù)不斷的創(chuàng)新，步伐也日益加快。為了緊跟時(shí)代的步伐，互聯(lián)網(wǎng)、云計(jì)算等相關(guān)技術(shù)的相繼出現(xiàn)，人們也逐步進(jìn)入大數(shù)據(jù)時(shí)代，數(shù)據(jù)網(wǎng)絡(luò)幾乎遍布全球。在步入大數(shù)據(jù)時(shí)代的同時(shí)，世界各地也建立信息網(wǎng)，針對(duì)一些人或是事物進(jìn)行數(shù)據(jù)的采集，整頓成為信息庫(kù)形成大數(shù)據(jù)，維持社會(huì)發(fā)展基本的運(yùn)行。然而時(shí)代變化的非常快，采集的數(shù)據(jù)不斷面臨著不穩(wěn)定性，從而導(dǎo)致數(shù)據(jù)質(zhì)量不斷地發(fā)生質(zhì)的上的變化，時(shí)常面對(duì)著不確定的因素形成的挑戰(zhàn)。

2 大數(shù)據(jù)的特性

大數(shù)據(jù)可以說是一個(gè)用幾何形狀表現(xiàn)出來的數(shù)字。大數(shù)據(jù)存在于不同的行業(yè)中，比如說在IT行業(yè)中，IT自身就是作為一個(gè)數(shù)據(jù)公司，每天吸收大量的數(shù)據(jù)，不僅需要一部份員工收集信息，還需要一部份員工整理信息，這樣不僅會(huì)對(duì)所需要的事物上出現(xiàn)一些時(shí)間上的偏差，還需要大量地人力物力財(cái)力對(duì)數(shù)據(jù)進(jìn)行歸納整合。對(duì)于大數(shù)據(jù)來講，大數(shù)據(jù)不僅具有數(shù)據(jù)量龐大的性質(zhì)，其結(jié)構(gòu)比傳統(tǒng)數(shù)據(jù)結(jié)構(gòu)上存在多樣性，比如說在數(shù)據(jù)來源上可以是通過城市人口或者是學(xué)校學(xué)生人口數(shù)量等途徑，在表達(dá)上以無線網(wǎng)絡(luò)數(shù)據(jù)、移動(dòng)數(shù)據(jù)等等以不同的形式出現(xiàn)。因?yàn)榇髷?shù)據(jù)具有高速性，所以大數(shù)據(jù)中的數(shù)據(jù)增長(zhǎng)以及更新的速度都比較快，對(duì)于企業(yè)來說，企業(yè)中的數(shù)據(jù)更新的快，意味著自身發(fā)展速度也會(huì)加快，同時(shí)面對(duì)的企業(yè)中發(fā)展的問題也會(huì)有許多。

3 大數(shù)據(jù)下存在的數(shù)據(jù)質(zhì)量問題

如今是大數(shù)據(jù)遍布的時(shí)代，在社會(huì)上許多方面都有著大數(shù)據(jù)的應(yīng)用。然而在大數(shù)據(jù)的背景下，數(shù)據(jù)質(zhì)量尤其重要。首先數(shù)據(jù)是構(gòu)成大數(shù)據(jù)的基本條件。比如說現(xiàn)在遍布全球的互聯(lián)網(wǎng)，它是可以說是一個(gè)運(yùn)行的大數(shù)據(jù)，它自己本身是由來自四面八方的數(shù)據(jù)匯集而成的一個(gè)龐大的運(yùn)行系統(tǒng)。然而在大數(shù)據(jù)運(yùn)營(yíng)的狀態(tài)下，由于自身規(guī)模性的限制，在大量數(shù)據(jù)獲取中、儲(chǔ)存以及傳輸過程，還有計(jì)算過程中都有可能發(fā)生許多錯(cuò)誤[1]。在對(duì)產(chǎn)生的錯(cuò)誤進(jìn)行人工檢測(cè)以及補(bǔ)救時(shí)，不僅會(huì)導(dǎo)致企業(yè)在整個(gè)系統(tǒng)上投資的成本產(chǎn)生損失，還有可能導(dǎo)致成本損失過大以至于無法有效地實(shí)施該系統(tǒng)。

在這個(gè)各行各業(yè)都高度集中的社會(huì)，各行各業(yè)的速度都發(fā)展的非常快。對(duì)于大數(shù)據(jù)來說，它在每時(shí)每刻都在不停地進(jìn)行運(yùn)轉(zhuǎn)，數(shù)據(jù)間的更新速度也非常快。然而太快，反而會(huì)導(dǎo)致機(jī)能在運(yùn)轉(zhuǎn)的時(shí)候更容易產(chǎn)生數(shù)據(jù)上的不一致。就像火車游戲中的路線一樣，在其中任何一個(gè)點(diǎn)轉(zhuǎn)折的失誤，都有可能導(dǎo)致火車偏離固定的軌道。然而在大數(shù)據(jù)的作用下，在同一個(gè)地方中使用不同的方式表達(dá)出同一物體，是非常容易引起幾種不同表達(dá)的方式之間發(fā)生碰撞，從而導(dǎo)致物品的多樣性。這些數(shù)據(jù)質(zhì)量上的失誤，很有可能導(dǎo)致大數(shù)據(jù)系統(tǒng)的癱瘓或是崩潰。

4 大數(shù)據(jù)時(shí)代下對(duì)數(shù)據(jù)質(zhì)量存在的挑戰(zhàn)

隨著大數(shù)據(jù)時(shí)代的盛行，對(duì)于數(shù)據(jù)質(zhì)量來說也迎來了一系列挑戰(zhàn)。大數(shù)據(jù)自身的特征之一數(shù)據(jù)量龐大，它涉及的范圍廣，若運(yùn)行狀態(tài)下出現(xiàn)一點(diǎn)小偏差，那么對(duì)于保證數(shù)據(jù)質(zhì)量來說，會(huì)有龐大的計(jì)算量出現(xiàn)，然而計(jì)算量太大就很容易失誤，所以對(duì)于數(shù)據(jù)質(zhì)量的挑戰(zhàn)之一就是設(shè)計(jì)出如何有效的計(jì)算方法。大數(shù)據(jù)自身特性之一的多樣性，它涉及多個(gè)方面，若出現(xiàn)了一點(diǎn)錯(cuò)誤，那么必會(huì)導(dǎo)致多個(gè)方面出現(xiàn)連鎖反應(yīng)。而對(duì)于數(shù)據(jù)質(zhì)量來說，再在針對(duì)這些錯(cuò)誤的時(shí)候，只會(huì)針對(duì)一個(gè)方向解決問題所帶來的影響，然而忽略了大數(shù)據(jù)的多樣性，一個(gè)問題在多個(gè)方面的不同影響。所以對(duì)于數(shù)據(jù)質(zhì)量來說，存在的另一個(gè)挑戰(zhàn)就是問題存在多樣性，而解決方案卻存在單一的效果，忽略了問題之間的復(fù)雜關(guān)聯(lián)性[2]。

5 結(jié)語

綜上所述，隨著大數(shù)據(jù)時(shí)代的到來，數(shù)據(jù)質(zhì)量方面也不斷地接受新的挑戰(zhàn)。然而大數(shù)據(jù)的龐大運(yùn)行中會(huì)帶來一些關(guān)于數(shù)據(jù)質(zhì)量的問題。對(duì)于在大數(shù)據(jù)自身特性下所帶來的影響，都要通過確保數(shù)據(jù)質(zhì)量的準(zhǔn)確性來提高大數(shù)據(jù)的良好運(yùn)行。在確保數(shù)據(jù)質(zhì)量的準(zhǔn)確性下，數(shù)據(jù)質(zhì)量迎來了不可避免的問題挑戰(zhàn)，運(yùn)算量的龐大、問題間的關(guān)聯(lián)而帶來的復(fù)雜化等等一系列挑戰(zhàn)。為了解決這一系列挑戰(zhàn)所帶來的嚴(yán)峻考驗(yàn)，我們不僅要積極面對(duì)，還要從中吸取經(jīng)驗(yàn)，進(jìn)而提高數(shù)據(jù)質(zhì)量的各個(gè)方面。我們更要清楚地認(rèn)識(shí)到大數(shù)據(jù)時(shí)代下，所產(chǎn)生的問題也是接踵而來，我們更應(yīng)在數(shù)據(jù)質(zhì)量方面做好嚴(yán)格的把關(guān)，發(fā)現(xiàn)問題、改正問題、并吸取教訓(xùn)，確保自身安全有效的發(fā)展下去。

[1] 張亮亮，辛金國(guó).大數(shù)據(jù)背景下統(tǒng)計(jì)數(shù)據(jù)質(zhì)量?jī)?nèi)涵探索[J].統(tǒng)計(jì)與咨詢，2016(2)：6-9.

[2] 王宏志.大數(shù)據(jù)質(zhì)量管理：?jiǎn)栴}與研究進(jìn)展[J].科技導(dǎo)報(bào)，2014，32(34)：78-84.