探析大數據處理技術對互聯網電商的影響

尹偉

【摘 要】隨著信息時代的推進和互聯網高速發展，大數據作為一種新興概念已經引起了社會各領域的高度重視。尤其是互聯網時代下產生的電子商務營銷模式與大數據的聯系更為緊密，大數據的處理技術正逐漸成為互聯網電商企業創新發展的重要武器，對于企業增大經濟利益和市場競爭力起到重要作用。本文首先介紹了大數據和大數據處理技術的概念、特征，接著介紹了電商網絡的基礎處理系統，最后分析大數據處理對電子商務的影響，希望為大數據處理技術在互聯網電商行業的應用和創新發展提供借鑒。

【關鍵詞】大數據處理；互聯網電商；影響

一、大數據與大數據處理

（一）大數據的概念

大數據是互聯網技術的新興概念，指無法在一定時間范圍內用常規軟件工具進行捕捉、管理和處理的數據集合，是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的信息資產。大數據涵蓋的范圍十分廣泛，并不局限于網絡中的信息或是人口普查中的信息，還包含社會各領域、日常生活中的諸多信息。大數據具有大數據的5V特點：Volume（大量）、Velocity（高速）、Variety（多樣）、Value（低價值密度）、Veracity（真實性）。

（二）大數據處理的概念

當前是一個信息爆炸的社會，網絡上充斥著數以億計、千億計的龐雜數據信息，而如此巨大的數據量，必須要一定的技術對其進行處理，選擇出有效的數據投入使用，以創造更大的價值，此過程即大數據的處理。大數據的處理包含多種技術，如數據挖掘技術、大規模并行處理或分布式數據庫、云計算等。隨著大數據的廣泛化、資源化使用，其處理技術也將不斷地進行升級，以適應社會發展的需要。

（三）大數據及大數據技術的特點

1.數據量大

從字面意思上看，大數據最顯著的特點便是“大”，包含的數據量至少應在100TB之上。數據量如此之大的原因主要有兩點：一是隨著信息時代的發展，網絡不斷普及，網絡使用者逐年增多，由此而來的數據產生途徑也隨著增加。二是網絡信息成為人人可共享的資源，擺脫了單位利用數據的傳統方式，大大增加了網絡信息的利用率，網絡數據量也有了顯著的增加。

2.類型多

傳統的數據往往多為結構化數據，是原始數據的抽象化，類型較為單一。而大數據下的數據常為非結構化數據，儲存更為復雜，涉及的領域較多，規模又很大，處理起來也更為不易。至今，非結構化數據已經更為普遍，接近結構化數據的三倍之多，增長速度也高達結構化數據的10到50倍不等。隨數據的不斷擴充，數據已具有越來越多的類型，這是大數據的優勢，同時也是其所面臨的挑戰。

3.處理速度快

由于當前數據產生途徑多、利用率高且不斷產生，所以數據的增長速度就明顯加快，因此，大數據必須具備快速處理數據的能力。另外，當前的數據多且種類繁雜，并不是所有收集到的數據都有使用價值，因此，大數據需要具備快速而準確的處理能力分析篩選出有價值的信息。

4.大數據具有較低的價值密度

大數據多為非結構化數據，沒有經過程式化的處理，多為保持本質的原始數據。原始數據即為未被處理的各種信息的數據，其有用和無用的信息未被篩選，因而價值密度相對較低。

5.人工智能技術的融入。

簡單來說，大數據就是對大規模數據進行集中且智能化的處理和分析，通過這一過程，能夠發現數據中潛在的信息，并挖掘出一定的智慧，進而對未來的發展態勢做出科學的預測。人工智能技術的融入，使得數據的處理更加科學化，如當前機器學習、自然語言理解等人工智能技術已經融入到大數據各個流程的處理當中，發揮了重要的作用。

6.大數據處理的普遍模式是分布式處理架構。

大數據需要處理大規模、海量化且異構的數據，而傳統的處理方式很難滿足這一需求，因此采用分布式的方式進行處理能夠達到良好的處理效果。如分布式文件系統、分布式編成環境以及大規模并行處理數據庫等技術得到了應用和推廣。

二、大數據處理對互聯網電商的重要意義

（一）為市場營銷方案提供依據

市場營銷首先要做到的是制定符合市場需求的營銷方案，以最低的成本獲得最大的經濟效益。而大數據處理作為數據分析、處理的有效方式，可以幫助企業分析市場供求關系和未來走勢，為企業的營銷方案提供重要的決策依據，從而使企業的在立足市場的基礎下，擴大占有率。

（二）使個性化服務提供成為可能

隨經濟的發展和人們生活水平的提高，人們對物質更高的要求。產品質量已經不是人們的唯一要求，企業想要發展就必須創新服務模式，為消費者提供個性化的服務。傳統的營銷模式通常是以企業產品為中心進行銷售，而大數據處理模式下，企業可以根據用戶的購買記錄發現其購物需求，從而為其提供更為精準且更具個性化的商品。

三、大數據時代互聯網電商的基礎處理系統

隨著經濟的發展和人們生活水平的提高，消費者越來越傾向于網上購物，因此電商網站的并發訪問量大大增加，數據呈爆炸性增長。例如“雙十一”期間，淘寶和天貓的網站總交易額高達上千億元；春運時期，鐵道部售票網站日點擊量在5億次以上。伴隨著業務量的劇增，電商平臺每秒鐘都在生成海量的非結構化、半結構化數據。高并發和大數據量訪問成為當前電商處理系統的潛在危機，處理這些大數據是其當前所要解決的重要問題。

傳統的分布式計算并行計算和數據庫集群等處理技術長期存在擴展性低、成本高、硬件復雜等局限性。大數據時代背景下，想要滿足發展的需要，電商企業必須引入具備高容錯、高擴展、低成本、易使用特點的新的架構和處理系統。

（一）數據倉庫系統

當前，電子商務的數據大規模存在且持續增長，表現為大規模、分布式、異構性，使得電商數據倉庫系統發生了顯著變化：一是，數據量由TB級升至PB級，并仍在持續爆炸式增長。二是，硬件平臺由高端服務器轉向由中低端硬件構成的大規模集群平臺，并行數據庫的規模增大，成本急劇上升。由此導致電商面臨數據量的膨脹、數據深度分析需求的增長這兩大挑戰。目前僅具備傳統數據處理技術和信息分析能力的數據倉庫和BI工具難以完成PB級大數據的數據管理和分析工作。

（二）大數據的IT基礎——云計算架構

云計算是新型分布式網絡計算架構，特別適合向各種網絡應用提供計算、存儲、網絡、軟件等在線服務，是基于互聯網的相關服務的增加、使用和交付模式，通常涉及通過互聯網來提供動態易擴展且經常是虛擬化的資源。云是網絡、互聯網的一種比喻說法，過去常用來表示圖片中的電信網，后來被用作互聯網的抽象概念。云計算具有強大的運算能力，可以用來預測氣候變化和市場發展趨勢，其特征包括：

一是超大規模。“云”具有相當的規模，Google云計算已經擁有100多萬臺服務器，IBM、微軟、Yahoo等的“云”均擁有幾十萬臺服務器，企業私有云一般擁有數百上千臺服務器。

二是虛擬化。云計算支持用戶在任意位置、使用各種終端獲取應用服務。所請求的資源來自“云”，而不是固定的有形的實體。應用在“云”中某處運行，但實際上用戶無需了解、也不用擔心應用運行的具體位置。只需要一臺筆記本或者一個手機，就可以通過網絡服務來實現我們需要的一切，甚至包括超級計算這樣的任務。

三是高可靠性。“云”使用了數據多副本容錯、計算節點同構可互換等措施來保障服務的安全，相比于本地計算機云計算較為可靠。

四是通用性。云計算不針對特定的應用，在“云”的支撐下可以構造出多種的應用，同一個“云”可以同時支撐不同的應用運行。

五是高可擴展性。“云”的規模可以動態伸縮，滿足應用和用戶規模增長的需要。

六是按需服務。“云”作為一種資源，可以按需購買，其計費也與水、電、氣無異。

七是極其廉價。云計算具有自動化集中式管理功能，可以使大量企業無需負擔日益高昂的數據中心管理成本，同時其通用性使的資源的利用率大大增加，這在一定程度上大大減少了用戶的使用成本。

四、大數據處理對電子商務的影響

（一）大數據處理使電子商務的運營方式數據化

隨著大數據處理技術的普及與完善，電子商務企業的運營模式逐漸以數據化為主導，貫穿企業運營中的采購、營銷、財務以及人事等一系列過程。例如，在營銷方面，大數據處理技術幫助使企業收集消費者的購物信息，并分析出其需求和購物傾向，并以此對日后的營銷方向做出預測，從而以最小的成本實現最大的利潤。

（二）大數據處理使產業鏈更加緊密

大數據處理技術將電子商務企業的產業鏈緊密結合在一起，即加強公司、供應商與經銷商三者之間的互動與整合。具體表現為企業與供應商之間的資源得到更好的共享，企業與用戶的關系越來越近，從而促進企業經濟效益的提高。

（三）大數據處理使電子商務的數據資源化

隨著信息時代的發展與進步，大數據作為信息時代的重要資源將是企業擴大市場占有率的關鍵因素。與此同時，數據作為一種資源將逐漸發展成為一項產業，有關數據的服務，如對數據分析、可視化的業務和眾包模式等，會逐漸普及并完善，為企業創造更多的價值。

（四）大數據處理保證了電子商務的信息安全

隨著電子商務的發展，網絡安全問題日益凸顯。隨著網絡與人們生活的日益緊密，大量的個人信息逐漸泄露于網絡各個社交平臺，根據個人信息進行詐騙的案件屢屢發生，尤其是消費者在進行網上購物時，極易泄露住址、聯系方式等信息，使人們在享受電子商務帶來的便利的同時，也面臨著諸多安全隱患。而如今，大數據處理技術的應用為電子商務的安全提供了重要保障，一方面，大數據處理技術為電子商務系統建立基礎的數據中心庫，并保證信息在收集、傳輸、處理等一系列過程中的安全，另一方面，大數據處理技術保證了被破壞后數據的恢復，且其身份認證等手段大大提高電子商務的安全性能。

（五）大數據處理提高了電子商務企業的信息處理能力

隨著電子商務的深入發展，電子商務平臺的日數據量越來越龐大，而對這些信息進行分析處理是電商企業重點要解決的問題，而云計算的核心功能之一就是信息的收集與處理，因此將云計算環境下的大數據運用到電子商務發展中來，既是云計算拓展其用途的需要，也是電子商務發展的必然。在云計算環境下，電子商務的商家一方面利用“云”對龐雜的商務信息進行統一化、規范化的管理，以保證電子商務平臺的有序運行，另一方面通過對消費者信息的收據，以及大數據結果分析，電商企業可以對消費者的行為進行預測，并適時地為其推出有針對性的產品，以提高平臺的交易量，進而提高企業的經濟效益。

（六）大數據處理降低了電子商務企業的平臺運行成本

電子商務的平臺運行成本在其經營中占有很大的比重，其中的硬件維修與引進、軟件的開發與完善都需要消耗大量的成本和資源。而大數據處理技術可以建立云計算架構來提高資源的利用和整合，降低管理人員的人力成本，減少平臺運營支出和資本支出，同時計算平臺可以通過對動態資源的管理實現業務的優化，而這樣強大的數據處理功能使商家最大限度地降低平臺運行成本變成可能。

五、大數據處理在電子商務上的未來發展趨勢

（一）專業化數據處理服務與產品日益豐富

大型電商企業、政府、社會盈利機構等組織可以利用大數據處理技術在云環境下協同工作，生產出專業化數據處理服務或產品，并可提供給沒有足夠IT能力的中小電商企業。

（二）大數據定制化系統

大數據定制化系統成為超大規模電商的商機和趨勢，并可作為IT能力輸出給中小電商企業。

（三）構建新型電商的商業模式

云計算帶來的規模經濟效應、個性化服務等優勢，不僅變革了IT基礎設施，更重要的是重塑了經濟學概念，促進了企業業務模式的改變，從而使得電商行業可以快速邁進服務經濟時代。隨著大數據處理技術與營銷思想的良性互動，傳統商業模式將得得以徹底變革和創新，構建出新型電商營銷新模式、新思路、新方法。

（四）IT基礎設施成為核心競爭力

大數據處理技術的應用，為海量的資源提供了有利的整合措施和可靠的保證，其先進的計算處理性能、簡單方便的部署使用方案和全方位的監控管理措施，顯著提高了電商網絡數據庫和計算中心的工作效率，最大限度地降低IT運營和管理維護成本，給傳統IT基礎設施帶來革命性變革。這種技術優勢突破了電商交易規模的發展瓶頸，在技術的基礎上提升了電商行業的發展空間，使得IT基礎設施逐漸成為電商企業的核心競爭力。

六、結束語

大數據作為IT行業的新技術，對于企業的發展與創新具有重要的價值，在社會發展中，大數據的資源性日益凸顯。電子商務作為互聯網時代的新型商務模式，與大數據有著密不可分的聯系，大數據處理技術的發展將對電子商務企業產生重要影響，大數據處理技術的應用能優化電商企業的運營方式、緊密其產業鏈、保證信息安全、提高信息處理能力、降低網絡平臺運營成本，對電商企業的經濟效益和市場占有率起積極作用。在信息時代，電商企業運用并完善大數據處理技術，是自身獲得長足發展的重要動力。

【參考文獻】

[1]陳晶晶.淺析數據挖掘在電子商務中的應用[J].信息通信，2017（12）.

[2]陳云海，黃蘭秋.大數據處理對電子商務的影響研究[J].電信科學，2013（03）.

[3]劉志超，陳勇，姚志立.大數據時代的電子商務服務模式革新[J].科技管理研究，2014（01）.

[4]甘麗新，涂偉.大數據時代電子商務的機遇與挑戰探討[J].科技廣場，2013（03）.