大數(shù)據(jù)時(shí)代信息技術(shù)處理技術(shù)研究

李曉江,任珂成

(玉溪農(nóng)業(yè)職業(yè)技術(shù)學(xué)院,云南 玉溪 653100)

0 引言

大數(shù)據(jù)與信息技術(shù)處理的發(fā)展與應(yīng)用,實(shí)現(xiàn)了信息處理的革新,讓信息處理效率、質(zhì)量都實(shí)現(xiàn)了提升,已成為影響人們?nèi)粘Ｉ钆c工作的重要因素。作為從業(yè)人員,更需要充分掌握大數(shù)據(jù)技術(shù)的內(nèi)涵,在信息處理中對(duì)大數(shù)據(jù)有效運(yùn)用。

1 大數(shù)據(jù)技術(shù)的概況簡(jiǎn)介

1.1 大數(shù)據(jù)的基本含義

大數(shù)據(jù)英文為big data,從字面上理解為巨量的數(shù)據(jù)。計(jì)算機(jī)和網(wǎng)絡(luò)技術(shù)廣泛普及開(kāi)來(lái),大數(shù)據(jù)時(shí)代也隨之到來(lái)。大數(shù)據(jù)主要是把數(shù)據(jù)作為發(fā)展的基礎(chǔ),提出全新的數(shù)據(jù)處理模式。大數(shù)據(jù)的運(yùn)用,在很大程度上轉(zhuǎn)變了企業(yè)經(jīng)營(yíng)管理形式,同時(shí)也讓人們的消費(fèi)結(jié)構(gòu)發(fā)生了巨變,帶動(dòng)人類社會(huì)進(jìn)入了一個(gè)嶄新的階段[1]。當(dāng)前,企業(yè)對(duì)數(shù)據(jù)進(jìn)行著挖掘、分析和應(yīng)用,這不單單是促使企業(yè)生產(chǎn)效率不斷提高,也能夠帶來(lái)更高的價(jià)值產(chǎn)出。

1.2 大數(shù)據(jù)的主要特點(diǎn)

大數(shù)據(jù)技術(shù),是通過(guò)特定的算法,對(duì)大量的數(shù)據(jù)進(jìn)行自動(dòng)分析。以互聯(lián)網(wǎng)為基礎(chǔ)的數(shù)據(jù)挖掘,無(wú)需設(shè)置問(wèn)卷,也不需開(kāi)展深入的調(diào)查工作,這樣可以降低成本。不僅如此,大數(shù)據(jù)可以實(shí)現(xiàn)數(shù)據(jù)信息的自動(dòng)、實(shí)時(shí)收集和分析,滯后性很低。在實(shí)際運(yùn)用中,表現(xiàn)出“量大、多源、實(shí)時(shí)”這些方面的顯著特點(diǎn)。由于可以快速分析自動(dòng)采集存儲(chǔ)的海量數(shù)據(jù),把握總體數(shù)據(jù)而得到結(jié)果,大數(shù)據(jù)可以對(duì)社會(huì)現(xiàn)象和企業(yè)經(jīng)營(yíng)發(fā)揮比較準(zhǔn)確的預(yù)測(cè)作用,輔助管理與決策等工作。

1.3 大數(shù)據(jù)的信息本質(zhì)

要理解大數(shù)據(jù),需要先對(duì)數(shù)據(jù)形成認(rèn)識(shí)。所謂數(shù)據(jù),就是日常生活、工作等一些行為、活動(dòng)中產(chǎn)生的數(shù)字、字母、符號(hào)等。數(shù)據(jù)能夠依靠計(jì)算機(jī)程序?qū)崿F(xiàn)整理、歸類和分析,挖掘其中的規(guī)律。而大數(shù)據(jù),則是海量數(shù)據(jù)的集合。有美國(guó)的信息管理專家指出,信息實(shí)際上就是加工處理之后的數(shù)據(jù)。換句話說(shuō),其就是數(shù)據(jù)處理完成的結(jié)果。信息和數(shù)據(jù),二者之間存在緊密關(guān)聯(lián),信息從本質(zhì)上來(lái)說(shuō)也是數(shù)據(jù),但信息是在數(shù)據(jù)處理之后所得到的結(jié)果,剔除了其中不真實(shí)、重復(fù)、無(wú)規(guī)律的各項(xiàng)干擾性數(shù)據(jù),保留了真實(shí)可靠的部分。信息能夠脫離了相應(yīng)系統(tǒng)而單獨(dú)存在,也可脫離系統(tǒng)各個(gè)環(huán)節(jié)而單獨(dú)存在。通常情況下,數(shù)據(jù)格式都和計(jì)算機(jī)系統(tǒng)緊密相關(guān),大數(shù)據(jù)可以視為是以信息技術(shù)為基礎(chǔ)的信息群。

2 大數(shù)據(jù)時(shí)代信息處理技術(shù)的常見(jiàn)形式

2.1 大數(shù)據(jù)信息挖掘與采集技術(shù)

大數(shù)據(jù)信息處理技術(shù)是立足計(jì)算機(jī)信息技術(shù),實(shí)現(xiàn)內(nèi)容龐雜、數(shù)量巨大的數(shù)據(jù)信息處理技術(shù)。大數(shù)據(jù)信息挖掘技術(shù)是所有大數(shù)據(jù)信息技術(shù)的基礎(chǔ),是關(guān)鍵技術(shù)之一。該技術(shù)的優(yōu)勢(shì)是可以從網(wǎng)絡(luò)自動(dòng)挖掘出大量的數(shù)據(jù)信息。大數(shù)據(jù)時(shí)代下的信息采集技術(shù),就是從龐雜的數(shù)據(jù)信息中進(jìn)行篩選,最終獲得有一定價(jià)值信息的關(guān)鍵技術(shù)[2]。信息處理工作人員,需要合理運(yùn)用此項(xiàng)技術(shù),在數(shù)據(jù)庫(kù)中挖掘出有用的數(shù)據(jù)信息,再將其傳輸給需要的人員。

2.2 大數(shù)據(jù)信息存儲(chǔ)技術(shù)

大數(shù)據(jù)信息存儲(chǔ)技術(shù)是依托相應(yīng)的儲(chǔ)存媒介,將完成采集或是處理之后的信息,進(jìn)行安全儲(chǔ)存的技術(shù)。大數(shù)據(jù)信息存儲(chǔ)技術(shù)的重點(diǎn)是數(shù)據(jù)庫(kù)的構(gòu)建,如果可以提升數(shù)據(jù)庫(kù)的信息調(diào)用能力,則可以極大地提高對(duì)存儲(chǔ)空間的利用率。大數(shù)據(jù)時(shí)代對(duì)信息處理技術(shù)的要求比較高,只有不斷提升信息存儲(chǔ)技術(shù)水平,才能最大限度地節(jié)約資源,實(shí)現(xiàn)對(duì)存儲(chǔ)空間的充分利用。

2.3 大數(shù)據(jù)信息安全技術(shù)

信息數(shù)據(jù)在傳輸?shù)倪^(guò)程中,會(huì)因網(wǎng)絡(luò)問(wèn)題等種種原因發(fā)生數(shù)據(jù)丟失,導(dǎo)致數(shù)據(jù)產(chǎn)生誤差。因此,在傳輸過(guò)程中,需要對(duì)數(shù)據(jù)進(jìn)行保護(hù),采取相應(yīng)的安全措施。尤其當(dāng)有些數(shù)據(jù)涉及個(gè)人隱私或商業(yè)機(jī)密,數(shù)據(jù)的安全就更加需要引起有關(guān)人員重視。大數(shù)據(jù)信息安全技術(shù),在計(jì)算機(jī)數(shù)據(jù)信息處理中,需要采用安全模式,形成統(tǒng)一標(biāo)準(zhǔn),實(shí)行專業(yè)化的管理。

在信息數(shù)據(jù)的采集、存儲(chǔ)、傳輸各環(huán)節(jié)都需要用到大數(shù)據(jù)信息安全技術(shù)。在最開(kāi)始的采集信息數(shù)據(jù)環(huán)節(jié),應(yīng)從源頭加強(qiáng)對(duì)信息的監(jiān)控,甄別信息的來(lái)源,確保信息來(lái)源的安全性。在對(duì)信息數(shù)據(jù)進(jìn)行存儲(chǔ)時(shí),也要注意對(duì)數(shù)據(jù)信息進(jìn)行準(zhǔn)確的分類,確保存儲(chǔ)無(wú)干擾。在信息上傳和下載的各項(xiàng)傳輸過(guò)程,則需要注意采用加密安全模式。為了保證數(shù)據(jù)的完整性、正確性和安全性,每一個(gè)環(huán)節(jié)都不能忽視。

3 大數(shù)據(jù)時(shí)代信息處理技術(shù)發(fā)展的趨勢(shì)

3.1 數(shù)據(jù)和網(wǎng)絡(luò)的安全性更受重視

在互聯(lián)網(wǎng)環(huán)境中,不論個(gè)人還是企業(yè),甚至政府單位,一切可以放到網(wǎng)絡(luò)上的信息都會(huì)變得越來(lái)越透明。數(shù)據(jù)和網(wǎng)絡(luò)安全問(wèn)題,在現(xiàn)如今已成為了關(guān)系到所有人切身利益的重大問(wèn)題。當(dāng)前社會(huì)上,涌現(xiàn)出一些使用非法手段盜用信息的不法分子。竊取、盜用信息的行為,不僅容易給人民的生命財(cái)產(chǎn)安全帶來(lái)影響,甚至也可能威脅到國(guó)家安全。在互聯(lián)網(wǎng)技術(shù)大發(fā)展的背景下,數(shù)據(jù)和網(wǎng)絡(luò)安全這一問(wèn)題更受重視,需要使用大數(shù)據(jù)信息處理技術(shù),對(duì)相關(guān)問(wèn)題實(shí)現(xiàn)有效處置。總的來(lái)說(shuō),在當(dāng)前信息爆炸的時(shí)代背景下,信息數(shù)據(jù)量幾何倍增,需要對(duì)大數(shù)據(jù)信息安全技術(shù)加強(qiáng)開(kāi)發(fā),不斷提高各類信息的安全性。

3.2 云計(jì)算技術(shù)得到發(fā)展與應(yīng)用

基于互聯(lián)網(wǎng)的快速發(fā)展與技術(shù)進(jìn)步,單純的硬件升級(jí),已經(jīng)難以應(yīng)對(duì)當(dāng)前的信息處理需求。云計(jì)算機(jī)技術(shù)的誕生,給這一問(wèn)題帶來(lái)了有效的解決方法。云計(jì)算技術(shù),打破了傳統(tǒng)計(jì)算機(jī)硬件的限制,以云端為中心,建立起共享化的云端儲(chǔ)存系統(tǒng),能夠提供巨大的信息儲(chǔ)存能力。而且,云計(jì)算可以支持高速率的計(jì)算,讓信息處理效率得到顯著改善。在當(dāng)前時(shí)代下,云計(jì)算技術(shù)的發(fā)展與應(yīng)用優(yōu)化了信息處理技術(shù)應(yīng)用效果,體現(xiàn)出了至關(guān)重要的價(jià)值。

3.3 物聯(lián)網(wǎng)開(kāi)始應(yīng)用于多個(gè)行業(yè)

由于互聯(lián)網(wǎng)的發(fā)展,各種物品設(shè)備也可以接入互聯(lián)網(wǎng),這使得物聯(lián)網(wǎng)成為可能,因而物聯(lián)網(wǎng)大數(shù)據(jù)成為IT巨頭關(guān)注的焦點(diǎn)。物聯(lián)網(wǎng)產(chǎn)業(yè)鏈的核心并不單單只是設(shè)備和元器件,同時(shí)還包括了大數(shù)據(jù)以及由其驅(qū)動(dòng)的產(chǎn)業(yè)。物聯(lián)網(wǎng)產(chǎn)生的大數(shù)據(jù)經(jīng)過(guò)信息處理,在多行業(yè)得到運(yùn)用。同時(shí)由于不同行業(yè)的數(shù)據(jù)具有行業(yè)性與結(jié)構(gòu)性特點(diǎn),這就會(huì)產(chǎn)生差異化的商業(yè)模式,進(jìn)而衍生出多種不同應(yīng)用,體現(xiàn)出多元化的商業(yè)價(jià)值。不僅如此,物聯(lián)網(wǎng)的核心價(jià)值,也不止體現(xiàn)在大數(shù)據(jù)互聯(lián)網(wǎng)感知層和網(wǎng)絡(luò)層方面,而是表現(xiàn)在廣泛的應(yīng)用層。

4 大數(shù)據(jù)時(shí)代信息處理技術(shù)發(fā)展的機(jī)遇和挑戰(zhàn)

4.1 信息處理技術(shù)受到重視的程度有所提高

互聯(lián)網(wǎng)在日常工作與生活之中非常普及,在各個(gè)行業(yè)和領(lǐng)域都在發(fā)揮出越來(lái)越重要的作用。比如企業(yè)在管理經(jīng)營(yíng)中如果采用大數(shù)據(jù)信息處理技術(shù),可以有效提升各個(gè)部門(mén)的工作效率,有的放矢地加強(qiáng)管理層和基層的交流,從而減少工作中可能遇到的各種突發(fā)問(wèn)題以及由此可能造成的各種沖突[3]。從另一方面來(lái)看,也有利于促使各個(gè)部門(mén)之間加強(qiáng)交流合作,從而最大限度地節(jié)約多方面成本。這樣一來(lái),企業(yè)便可以在新時(shí)代的市場(chǎng)競(jìng)爭(zhēng)中獲取有利位置。雖然就現(xiàn)下情況來(lái)看,處理這些信息仍然還有不少需要改善之處,技術(shù)發(fā)展尚不夠完善,但其前景較好,未來(lái)可期。

4.2 對(duì)數(shù)據(jù)與信息安全性的要求更高

信息安全,是用戶最為關(guān)心的問(wèn)題。近年來(lái),社會(huì)上時(shí)常出現(xiàn)用戶個(gè)人資料等隱私信息遭到泄露的情況。之所以會(huì)出現(xiàn)這樣的問(wèn)題,主要是由于數(shù)據(jù)的分類和管理不夠完善和科學(xué)。在大數(shù)據(jù)時(shí)代下,信息量將不斷增加,怎樣才能做到在海量信息中維護(hù)個(gè)人用戶信息安全,就成了一大挑戰(zhàn)。現(xiàn)階段,網(wǎng)絡(luò)黑客和一些不法分子掌握高水平的計(jì)算機(jī)技術(shù),對(duì)信息安全帶來(lái)了威脅。作為相關(guān)研究人員,也要在該領(lǐng)域中進(jìn)行更加深入的探索和研究,確保能夠在信息保護(hù)方面不斷改善技術(shù)手段,盡最大努力維護(hù)用戶信息安全。

4.3 行業(yè)對(duì)專業(yè)人才的需求更加迫切

大數(shù)據(jù)時(shí)代的顯著特點(diǎn)是信息數(shù)量大,對(duì)信息處理相關(guān)的工作對(duì)人員,也提出了更高專業(yè)素養(yǎng)要求。要讓信息處理技術(shù)實(shí)現(xiàn)發(fā)展,在大數(shù)據(jù)時(shí)代,就要加強(qiáng)專業(yè)人才的培養(yǎng),滿足行業(yè)的人才需求。對(duì)于企業(yè)而言,就需要推動(dòng)人才隊(duì)伍的建設(shè)工作,依托內(nèi)部培訓(xùn)、外部學(xué)習(xí)、行業(yè)交流等不同形式,推動(dòng)大數(shù)據(jù)人才培養(yǎng)。

5 結(jié)語(yǔ)

綜合以上分析可以看出,大數(shù)據(jù)時(shí)代下,各行各業(yè)都產(chǎn)生了不小的變革,這給市場(chǎng)經(jīng)濟(jì)的發(fā)展帶來(lái)新的機(jī)遇,但同時(shí)也提出了一些挑戰(zhàn)。這就要求我們必須做到創(chuàng)新發(fā)展,以變革的眼光看待事物,加強(qiáng)信息處理技術(shù)的應(yīng)用,提高數(shù)據(jù)信息利用效率。