大數(shù)據(jù)技術(shù)應(yīng)用現(xiàn)狀及發(fā)展趨勢研究

倪晨皓

（新疆油田公司行政事務(wù)中心，新疆 克拉瑪依 834000）

0 引言

所謂大數(shù)據(jù)技術(shù)，就是對海量數(shù)據(jù)進行科學(xué)分析和有效處理的一種先進技術(shù)形式。該技術(shù)的優(yōu)點主要在于可以對各種風(fēng)格、類型的海量數(shù)據(jù)進行處理。相較于網(wǎng)絡(luò)數(shù)據(jù)的傳統(tǒng)處理技術(shù)，大數(shù)據(jù)技術(shù)的應(yīng)用不僅可以實現(xiàn)數(shù)據(jù)處理量顯著擴大，還可以實現(xiàn)各種復(fù)雜類型數(shù)據(jù)的快速處理。因此，隨著大數(shù)據(jù)技術(shù)在當(dāng)今社會各個領(lǐng)域的應(yīng)用，各行各業(yè)的發(fā)展及其經(jīng)濟效益的提升都擁有了足夠的技術(shù)支撐。基于此，大數(shù)據(jù)技術(shù)的應(yīng)用現(xiàn)狀及其在未來的發(fā)展趨勢越來越受到當(dāng)今社會各個行業(yè)的關(guān)注與重視。

1 大數(shù)據(jù)技術(shù)概述

大數(shù)據(jù)技術(shù)對社會生產(chǎn)生活中所產(chǎn)生的各種數(shù)據(jù)進行科學(xué)篩選，并從中快速獲取具有研究價值的數(shù)據(jù)信息的一種新型產(chǎn)業(yè)類技術(shù)形式。在大數(shù)據(jù)技術(shù)中，大數(shù)據(jù)的采集、預(yù)處理、管理、儲存、分析以及應(yīng)用等都是其核心技術(shù)。由此可見，對大數(shù)據(jù)處理技術(shù)而言，核心并不僅僅在于海量數(shù)據(jù)信息的處理，而是在海量數(shù)據(jù)信息中發(fā)現(xiàn)有價值的信息，并將其應(yīng)用到特定領(lǐng)域。大數(shù)據(jù)技術(shù)不僅可以處理龐大的信息，還具備非常快的計算速度，且能夠?qū)Χ鄻踊臄?shù)據(jù)進行處理。相較于網(wǎng)絡(luò)數(shù)據(jù)的傳統(tǒng)分析和處理技術(shù)，大數(shù)據(jù)技術(shù)的優(yōu)勢主要表現(xiàn)在以下幾個方面。第一，它有龐大的數(shù)據(jù)體，其儲存單位可以從TB（太字節(jié)）直接躍升到PB（拍字節(jié)），且這種以PB 為單位的數(shù)據(jù)儲存方式已經(jīng)廣泛應(yīng)用到各大企業(yè)中，由此可充分證明大數(shù)據(jù)技術(shù)自身所具有的海量性特征。第二，大數(shù)據(jù)處理技術(shù)在復(fù)雜數(shù)據(jù)信息的處理中更加適用，該技術(shù)的應(yīng)用可以讓復(fù)雜問題得以簡化，并讓信息更加直觀［1］。第三，大數(shù)據(jù)技術(shù)可以對更多類型的數(shù)據(jù)信息進行處理，如地理位置、圖片和視頻等。第四，大數(shù)據(jù)技術(shù)具有速度快和實用性等特征，可通過快速傳輸?shù)姆绞綄崿F(xiàn)數(shù)據(jù)傳遞與取用，可以讓很多復(fù)雜數(shù)據(jù)更加便于處理，實現(xiàn)數(shù)據(jù)處理工作效率的顯著提升。

2 大數(shù)據(jù)技術(shù)應(yīng)用現(xiàn)狀的分析

當(dāng)前，大數(shù)據(jù)處理技術(shù)已經(jīng)在各行各業(yè)中得到廣泛應(yīng)用，而且很多國家已經(jīng)將此技術(shù)和人工智能技術(shù)進行良好結(jié)合，進而充分發(fā)揮出了這兩項技術(shù)的優(yōu)勢。從目前我國的大數(shù)據(jù)技術(shù)來看，其應(yīng)用和發(fā)展都十分迅速，該技術(shù)在信息管理、企業(yè)管理、電子政務(wù)、金融、制造、科研、教育、能源等各個領(lǐng)域的發(fā)展與變革中都發(fā)揮出了顯著優(yōu)勢。以下是大數(shù)據(jù)技術(shù)在我國幾個典型領(lǐng)域的應(yīng)用現(xiàn)狀的分析。

2.1 在工業(yè)物聯(lián)網(wǎng)領(lǐng)域的應(yīng)用

所謂工業(yè)物聯(lián)網(wǎng)，就是在工業(yè)生產(chǎn)過程中所涉及的產(chǎn)品、設(shè)備等各項數(shù)據(jù)的采集和管理。通常情況下，其數(shù)據(jù)管理采用遠程管理形式，如設(shè)備的歷史數(shù)據(jù)處理、運行狀態(tài)監(jiān)控等。而在工業(yè)生產(chǎn)設(shè)備長期運行監(jiān)控過程中，獲取的大量數(shù)據(jù)則是對工業(yè)生產(chǎn)企業(yè)進行產(chǎn)能分析、設(shè)備故障發(fā)生概率以及產(chǎn)品合格率檢測等主要信息來源。因這些數(shù)據(jù)十分龐大，我們就將其稱為工業(yè)大數(shù)據(jù)。在對工業(yè)大數(shù)據(jù)進行采集、預(yù)處理、挖掘、分析和儲存的過程中，一方面需要通過專業(yè)化平臺進行分析、儲存與展現(xiàn)；另一方面則需要借助于大數(shù)據(jù)技術(shù)中的數(shù)據(jù)驅(qū)動技術(shù)進行各種設(shè)備故障的檢測，以此實現(xiàn)工業(yè)生產(chǎn)設(shè)備的合理優(yōu)化［2］。

比如，濰柴公司借助工業(yè)大數(shù)據(jù)技術(shù)對工程機械進行了科學(xué)定位和遠程監(jiān)控，以此實現(xiàn)對各工程機械設(shè)備的工作時間計算以及故障預(yù)警等監(jiān)控。北方重工企業(yè)和上海隧道工程企業(yè)在對工業(yè)大數(shù)據(jù)技術(shù)應(yīng)用的過程中，通過和高校之間的合作實現(xiàn)了盾構(gòu)挖掘機的遠程監(jiān)控與故障預(yù)警。美的集團也對工業(yè)大數(shù)據(jù)技術(shù)進行了科學(xué)應(yīng)用，在美的集團成立的空調(diào)生產(chǎn)車間中，借助Digital Twin 技術(shù)，可實時監(jiān)控設(shè)備運行狀態(tài)。另外，工業(yè)大數(shù)據(jù)技術(shù)也十分適用風(fēng)力發(fā)電與鋼鐵等行業(yè)的設(shè)備能耗分析以及運行狀態(tài)監(jiān)控，而且應(yīng)用效果十分顯著。

2.2 在用戶畫像中的應(yīng)用

網(wǎng)絡(luò)信息時代，人們會將大多數(shù)閑暇時間花在手機上，在這樣的情況下，各種基于手機客戶端的視頻平臺、音樂平臺、咨詢平臺以及購物平臺等相繼出現(xiàn)。比如，在手機購物平臺的應(yīng)用中，人們進行商品選擇就像是對“消費者數(shù)據(jù)填空題”進行的回答，借助大數(shù)據(jù)技術(shù)中的數(shù)據(jù)挖掘技術(shù)，平臺能夠總結(jié)出用戶的購物類型，當(dāng)用戶下一次登錄該購物平臺時，平臺終端會根據(jù)用戶之前購買的商品進行類似商品推送。同樣的，在其他平臺的應(yīng)用中，借助于數(shù)據(jù)挖掘技術(shù)，也可以挖掘并記錄下用戶的習(xí)慣，以此實現(xiàn)相關(guān)信息的推送［3］。由此可見，大數(shù)據(jù)技術(shù)中的數(shù)據(jù)挖掘技術(shù)可通過用戶對相應(yīng)平臺的應(yīng)用習(xí)慣進行用戶“畫像”，以此實現(xiàn)對用戶年齡、性格、愛好以及消費等級等各項信息的推斷。另外，運用數(shù)據(jù)挖掘技術(shù)也可以對用戶的人口屬性、興趣特征、資產(chǎn)情況、消費特征、常駐城市以及位置特征等進行科學(xué)推斷，讓用戶畫像更加具體。

2.3 在醫(yī)療領(lǐng)域的應(yīng)用

大數(shù)據(jù)技術(shù)在醫(yī)療事業(yè)中發(fā)揮的作用也越來越顯著。借助大數(shù)據(jù)技術(shù)中的數(shù)據(jù)分析技術(shù)以及數(shù)據(jù)挖掘技術(shù)，可實現(xiàn)醫(yī)療行業(yè)生產(chǎn)力的有效提升與護理水平的良好改進，以此進一步增強醫(yī)療領(lǐng)域的市場競爭力。目前來看，大數(shù)據(jù)技術(shù)在我國醫(yī)療領(lǐng)域的應(yīng)用現(xiàn)狀包括以下兩點。第一，通過大數(shù)據(jù)技術(shù)的應(yīng)用，可實現(xiàn)各種疾病的科學(xué)分類與總結(jié)，進而形成相應(yīng)的專家?guī)欤瑢崿F(xiàn)醫(yī)務(wù)人員工作效率顯著提升，并進一步降低患者就醫(yī)過程中的成本消耗及身體傷害。第二，通過大數(shù)據(jù)技術(shù)的合理應(yīng)用，醫(yī)生可對病人的治療過程進行遠程控制，這樣便可實現(xiàn)患者住院率顯著降低，讓資源配置實現(xiàn)最優(yōu)化［4］。

2.4 在教育領(lǐng)域的應(yīng)用

在科學(xué)技術(shù)發(fā)展與教育改革深化的過程中，大數(shù)據(jù)技術(shù)在教育領(lǐng)域發(fā)揮的作用日益顯著。目前來看，大數(shù)據(jù)技術(shù)在我國教育領(lǐng)域的應(yīng)用主要分為3 個方面：第一是在適應(yīng)性教學(xué)中的應(yīng)用，第二是在教學(xué)規(guī)律發(fā)現(xiàn)中的應(yīng)用，第三是在校園信息化管理中的應(yīng)用。比如，運用基于大數(shù)據(jù)技術(shù)的Learnsprout 系統(tǒng)，可對高考備考進行科學(xué)評價，及時發(fā)現(xiàn)學(xué)生學(xué)習(xí)過程中的問題所在，通過早期干預(yù)的方式來解決學(xué)生的學(xué)習(xí)問題，并根據(jù)實際情況提供輔助，這樣可有效提升學(xué)生的學(xué)習(xí)效率與質(zhì)量。

2.5 在生態(tài)系統(tǒng)中的應(yīng)用

在生態(tài)系統(tǒng)中涉及的大數(shù)據(jù)主要包括植被、土壤、海洋以及大氣等各種生態(tài)數(shù)據(jù)。這些數(shù)據(jù)不僅具有非常龐大的信息量，而且信息類型十分復(fù)雜，傳統(tǒng)形式的數(shù)據(jù)分析和處理技術(shù)并不能有效滿足實際的分析與處理需求，而通過大數(shù)據(jù)技術(shù)的合理應(yīng)用，便可實現(xiàn)各項生態(tài)系統(tǒng)數(shù)據(jù)信息的分析與處理。比如，在氣象觀測中，將大數(shù)據(jù)技術(shù)應(yīng)用到大氣數(shù)據(jù)分析與可視化系統(tǒng)中，便可通過數(shù)據(jù)分析系統(tǒng)和數(shù)據(jù)處理算法的科學(xué)結(jié)合實現(xiàn)對氣象數(shù)據(jù)的精準(zhǔn)分析和處理。

3 大數(shù)據(jù)技術(shù)發(fā)展趨勢的分析

隨著科學(xué)技術(shù)與各行各業(yè)的發(fā)展，大數(shù)據(jù)技術(shù)也將獲得進一步的發(fā)展，以滿足時代發(fā)展所需。從大數(shù)據(jù)技術(shù)的應(yīng)用及其發(fā)展需求來看，該技術(shù)在未來的發(fā)展趨勢主要體現(xiàn)在以下3 個方面。

3.1 數(shù)據(jù)庫框架的融合

在大數(shù)據(jù)技術(shù)的發(fā)展中，除了結(jié)構(gòu)化查詢語言（Structured Query Language，SQL）數(shù)據(jù)庫，NoSQL 數(shù)據(jù)庫發(fā)展也十分迅速。而在各類大數(shù)據(jù)平臺上，圖形、內(nèi)存、列數(shù)以及關(guān)系等數(shù)據(jù)庫將會實現(xiàn)有機融合。通過這樣的方式，便可讓各種場景條件下的數(shù)據(jù)處理需求得以全面滿足，實現(xiàn)大數(shù)據(jù)技術(shù)良好發(fā)展。

3.2 數(shù)據(jù)技術(shù)的產(chǎn)業(yè)化應(yīng)用

隨著大數(shù)據(jù)技術(shù)不斷發(fā)展與轉(zhuǎn)變，其應(yīng)用也逐漸朝著資源化方向發(fā)展。在此過程中，數(shù)據(jù)技術(shù)的發(fā)展將會趨于產(chǎn)業(yè)化，這樣便可以讓大數(shù)據(jù)技術(shù)為企業(yè)發(fā)展提供更好的數(shù)據(jù)支撐［5］。同時，隨著大數(shù)據(jù)技術(shù)不斷發(fā)展，其數(shù)據(jù)應(yīng)用也應(yīng)該按照不同類別進行整合，這樣才可以讓數(shù)據(jù)技術(shù)實現(xiàn)應(yīng)用性能的全面提升，以此確保大數(shù)據(jù)技術(shù)在未來的應(yīng)用效果。

3.3 數(shù)據(jù)的深度挖掘

在大數(shù)據(jù)技術(shù)未來的應(yīng)用和發(fā)展中，數(shù)據(jù)挖掘深度化是一項核心技術(shù)。隨著當(dāng)今數(shù)據(jù)挖掘技術(shù)在各個領(lǐng)域的廣泛應(yīng)用，大數(shù)據(jù)也實現(xiàn)了更加準(zhǔn)確的應(yīng)用，而大數(shù)據(jù)業(yè)務(wù)增加也使其與用戶更加貼近，讓用戶需求得到更好的滿足。在大數(shù)據(jù)技術(shù)的發(fā)展中，通過數(shù)據(jù)挖掘技術(shù)對用戶進行深度標(biāo)簽的創(chuàng)建越來越成為當(dāng)今大數(shù)據(jù)挖掘技術(shù)應(yīng)用的熱點內(nèi)容。在大數(shù)據(jù)場景中，通過數(shù)據(jù)挖掘技術(shù)的合理應(yīng)用，將會對用戶行為進行更加深入的分析，并以此為依據(jù)進行深度標(biāo)簽的多角度、多層次創(chuàng)建。

4 結(jié)語

隨著大數(shù)據(jù)技術(shù)的應(yīng)用與發(fā)展，各行各業(yè)的發(fā)展都獲得了更具科學(xué)性的技術(shù)支撐。在當(dāng)今的工業(yè)物聯(lián)網(wǎng)、醫(yī)療、教育、生態(tài)系統(tǒng)等各個領(lǐng)域，大數(shù)據(jù)技術(shù)都發(fā)揮了顯著的應(yīng)用優(yōu)勢。而在社會經(jīng)濟與科學(xué)技術(shù)不斷發(fā)展的過程中，各行各業(yè)對大數(shù)據(jù)技術(shù)的應(yīng)用需求也在不斷提升，基于此，大數(shù)據(jù)技術(shù)在未來將會朝著數(shù)據(jù)庫框架融合、數(shù)據(jù)技術(shù)產(chǎn)業(yè)化應(yīng)用以及數(shù)據(jù)深度化挖掘的方向發(fā)展。這樣便可讓數(shù)據(jù)庫技術(shù)更加順應(yīng)時代發(fā)展趨勢，滿足用戶實際需求，通過不斷發(fā)展與創(chuàng)新來促進各行各業(yè)良好發(fā)展。