淺析計算機軟件技術在大數據時代的應用

孟秀錦 山東信息職業技術學院

1 對計算機軟件技術以及大數據時代的概述

1.1 計算機軟件技術的概述

計算機軟件技術指的是，能夠使計算機正常運行的程序、方法、規則、文檔以及與之相關的各類數據。計算機軟件技術作為計算機技術的一個重要組成部分，其內容包括的有應用系統集成、數據庫系統、分布式計算與網格計算、應用程序設計語言、Agent技術、可信操作系統、軟件工程、應用可移植性、軟件安全等。并且在一般情況下，也可把計算機軟件技術可劃分為四個類別，即①過程控制，②科學計算，③人工智能，④數據處理四個類別。同時，計算機軟件技術也可開發出適應不同需要的計算機軟件，使人們將計算機應用到各行各業中。

1.2 大數據時代的概述

大數據時代的到來，是由McKinsey&Company（麥肯錫）全球知名咨詢公司在2011年5月份提出的。大數據（Big Data)也可稱為巨量資料，是海量具有多樣化特性與高增長率的有價值信息資產的集合，具有價值密度低價值、數據類型多樣、處理速度快、數據體量巨大大等特點。其主要應用與計算機，最小的單位為bit，也可按順序給出所有單位，即為bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB。并且大數據類型也可分為三類，①社交網絡數據，它包括用戶行為記錄、反饋數據等等。如國內的微信、QQ、論壇、微博等社交網站平臺。國外的Instagram 、Facebook、LinkedIn、Twitter、Tumblr等社交網站平臺。②機器和傳感器數據，它包括了工業設備傳感器、呼叫記錄、設備日志、智能儀表、交易數據等。③傳統企業數據，它包括了傳統的ERP數據、 CRM systems的消費者數據、賬目數據以及庫存數據等。而隨著新媒體技術的不斷發展，大數據的概念也逐漸拓展，其涵蓋了從視頻文檔、新聞跟帖、數字、圖像、文本記錄、社交平臺互動所提供的所有信息。同時，隨著信息技術的不斷發展， 大數據也被越來越多的領域和行業應用，如生物學、環境生態學、物理學等領域以及通訊、教育、醫療、金融、軍事等行業。而且大數據不僅能幫助各個行業的企業挖掘有價值的信息，也能為各個行業的企業在做決策時提供精準的依據。

2 計算機軟件技術在大數據時代中的應用類型

隨著計算機技術的不斷發展以及大數據時代的到來，計算機軟件技術已經應用到了越來越多的領域和各個行業的企業當中。企業應用計算機軟件技術，不僅可提高其處理數據信息的能力，也能提高其數據分析的能力，更能確保信息數據的安全。企業在應用計算機軟件技術時，最為重要的計算機軟件技術有以下幾個類型。

2.1 信息安全技術

隨著大數據時代的到來，大數據已在不同程度上，滲透到了人們的日常生活以及各行各業的企業中。其不僅僅為人們的日常生活提供了便利。也可幫助各行各業的企業了解客戶群體的不同消費需求、提高產品研發的效率和質量、精準預測經濟形勢、把握市場態勢，進而提升企業自身的核心競爭力。但是，現階段，由于大數據的發展還處于不完善的階段，其在為人們以及各行各業的企業帶來便利與益處的同時，也帶來了信息安全隱患問題，如數據泄露、黑客非法入侵、計算機病毒攻擊等問題。這些信息安全隱患問題，嚴重影響著人們的日常生活和各行各業的企業生存與發展。（例如：當個人身份證、姓名、收入、住宅地址、工作單位、電話號碼、網銀賬號、社交賬號、第三方支付賬號等重要信息被泄露后。會讓不法分子拿著這些信息去實施詐騙等見不得人的勾當，甚至還可能帶來巨大的經濟損失，嚴重影響著人們的日常生活。而當企業的商業機密數據被黑客竊取或者病毒入侵后，造成的商業及秘密數據泄露，就會成為競爭對手打擊和擠壓企業的重要武器，給企業造成無法挽回的后果，嚴重影響著企業的生存與發展。）因此，在大數據時代下，各行各業的企業應重視信息安全的重要性，不斷地推進信息安全技術的發展，使其廣泛應用到各行各業的企業當中。這樣不僅能有效防止信息泄露，確保信息的安全，也能有效控制信息安全隱患的發生。

2.2 云存儲技術

在大數據時代下，人類產生的數據量正呈指數級增長，大約每兩年左右的時間就會翻一番，并且這個增長速度還會一直持續到2020年。面對數據的快速增長，傳統的數據存儲技術已經無法滿足大數據存儲的要求。（傳統的數據存儲技術無法滿足大數據存儲的要求有智能化、性能、容量等方面）不過幸運的是，云存儲技術應勢而生，并被廣泛應用到各個領域中。云存儲技術與傳統的數據存儲技術相比，云存儲技術不僅可滿足海量數據存儲的要求。（云存儲技術最大特點就是海量，它不僅能解決數以PB的數據存儲需求，也能解決數以EB的數據存儲需求。例如：在某個三線城市中，其監控路數為幾千到幾萬路，如果對如此大的數據量進行存儲操作的話，傳統的存儲技術已經不能滿足需求。因視頻監控系統通常采用的是回滾寫入方式。這種無序的頻繁讀寫操作，就會造成大量的磁盤碎片產生。而隨著使用的時間增加，就會嚴重影響整體存儲系統的讀寫性能，甚至還會導致存儲系統被鎖定為只讀，造成無法寫入新的視頻數據現象。而應用云存儲技術來對其進行存儲，就可以輕松搞定。）云存儲技術也具有非常好的可擴展性。（傳統存儲技術的陣單點擴展存在接口寬帶和容量上限等限制。面對EB級的海量數據亦或ZB級的海量數據存儲需求，傳統的NAS或者SAN在性能和容量的擴展上就會無法滿足。而云存儲技術卻與之相反，它不僅可支持海量數據的處理，也可讓資源實現按需擴展，具有非常高的可擴展性。）云存儲技術更具有非常高的可靠性，例如：某個對象存儲系統，其不僅具有非常低的數據寫入失敗率，可有效的避免因視頻文件切片寫入失敗而導致視頻播放出現卡頓等不流暢的現象。也可在存儲設備出現故障時，存儲業務不中斷，繼續提供有效的數據訪問服務，具有非常高的可靠性。同時，云存儲技術也可讓使用者在任何地方、任何時間，通過任何可聯網裝置連接到云端，方便其快速存取數據。