大數(shù)據(jù)場(chǎng)景下的云存儲(chǔ)技術(shù)與應(yīng)用

李華芳

隨著信息技術(shù)的發(fā)展，以大數(shù)據(jù)為背景的云存儲(chǔ)技術(shù)獲得良好的發(fā)展前景。它的應(yīng)用不僅方便了人們?nèi)粘Ｉ罟ぷ鳎瑵M足人們的不同需求。還可降低系統(tǒng)內(nèi)部的負(fù)載率，提升工作效率。在這種情況下，為了滿足現(xiàn)代化社會(huì)發(fā)展需求，必須不斷對(duì)云存儲(chǔ)技術(shù)進(jìn)行升級(jí)優(yōu)化，以滿足大數(shù)據(jù)場(chǎng)景下用戶的工作需求。文章主要從基于大數(shù)據(jù)場(chǎng)景的云存儲(chǔ)技術(shù)概述出發(fā)，對(duì)大數(shù)據(jù)場(chǎng)景下云存儲(chǔ)技術(shù)的應(yīng)用進(jìn)行了分析，以供參考完善。

【關(guān)鍵詞】大數(shù)據(jù) 云存儲(chǔ)技術(shù) 應(yīng)用

傳統(tǒng)的以存儲(chǔ)介質(zhì)的信息技術(shù)已經(jīng)無法滿足社會(huì)多元化發(fā)展的需求，這時(shí)云存儲(chǔ)技術(shù)應(yīng)運(yùn)而生。云存儲(chǔ)技術(shù)主要是通過服務(wù)器集群應(yīng)用和網(wǎng)格技術(shù)，借助網(wǎng)絡(luò)軟件協(xié)同作業(yè)，將系統(tǒng)數(shù)據(jù)庫的全部信息進(jìn)行集中管理，為用戶提供一個(gè)訪問功能系統(tǒng)，方便用戶實(shí)時(shí)操作，從而提升云計(jì)算工作效率與質(zhì)量。尤其是近年來，隨著云計(jì)算技術(shù)的日漸更新，云存儲(chǔ)技術(shù)因自身具有應(yīng)用范圍廣泛、操作簡(jiǎn)單方便以及擴(kuò)展性較強(qiáng)等優(yōu)點(diǎn)，已經(jīng)被廣泛應(yīng)用到各個(gè)領(lǐng)域中，受到人們的青睞與認(rèn)可。

1 基于大數(shù)據(jù)場(chǎng)景的云存儲(chǔ)技術(shù)概述

1.1 云存儲(chǔ)關(guān)鍵技術(shù)

要想充分發(fā)揮云存儲(chǔ)技術(shù)的效用，必須結(jié)合云儲(chǔ)存技術(shù)的基本原理與有關(guān)文獻(xiàn)資料，詳細(xì)分析云儲(chǔ)存技術(shù)的關(guān)鍵技術(shù)。基于大數(shù)據(jù)場(chǎng)景下的云存儲(chǔ)的關(guān)鍵技術(shù)，主要包括虛擬技術(shù)、重復(fù)刪除技術(shù)以及數(shù)據(jù)備份技術(shù)等技術(shù)。云存儲(chǔ)技術(shù)的應(yīng)用能夠?qū)υL問權(quán)限進(jìn)行設(shè)置，提升資源信息使用的安全性，避免因資源信息泄漏、篡改或者是存儲(chǔ)不及時(shí)，給用戶造成損失。

1.2 虛擬技術(shù)

虛擬技術(shù)作為大數(shù)據(jù)場(chǎng)景下云存儲(chǔ)技術(shù)不可缺少一部分，是整個(gè)技術(shù)的核心，也是云計(jì)算的前提條件。利用云存儲(chǔ)技術(shù)，不僅能在每一個(gè)服務(wù)器中心通過虛擬技術(shù)來細(xì)分硬件資源的功能，還可按照用戶的具體需要，對(duì)資源信息進(jìn)行分類整合，為用戶提供需要的信息。可見在大數(shù)據(jù)場(chǎng)景下，要想滿足用戶的具體需要，必須改變傳統(tǒng)以存儲(chǔ)介質(zhì)為主的存儲(chǔ)模式，通過云存儲(chǔ)系統(tǒng)的虛擬技術(shù)共享資源信息。

1.3 重復(fù)刪除技術(shù)

雖然云存儲(chǔ)技術(shù)已經(jīng)實(shí)現(xiàn)了存儲(chǔ)容量的最大化，但是基于大數(shù)據(jù)場(chǎng)景下，云存儲(chǔ)系統(tǒng)的存儲(chǔ)容量日漸增加，考慮到系統(tǒng)容量增加的需求量，云存儲(chǔ)系統(tǒng)內(nèi)部必須通過重復(fù)刪除技術(shù)，將內(nèi)部存儲(chǔ)的無效資源信息刪除，才能確保云存儲(chǔ)系統(tǒng)有足夠的存儲(chǔ)空間，為用戶提供良好的網(wǎng)絡(luò)傳輸服務(wù)。

1.4 數(shù)據(jù)備份技術(shù)

數(shù)據(jù)備份技術(shù)與數(shù)據(jù)重復(fù)刪除技術(shù)相對(duì)比，具有明顯差距。數(shù)據(jù)備份的目的主要是在系統(tǒng)運(yùn)行過程中，為了防止資源信息因各種因素影響，導(dǎo)致系統(tǒng)中的資源信息被刪除而發(fā)生丟失，云存儲(chǔ)系統(tǒng)的數(shù)據(jù)備份系統(tǒng)可及時(shí)恢復(fù)已經(jīng)被刪除的資源信息，避免存儲(chǔ)數(shù)據(jù)刪除、丟失。

2 大數(shù)據(jù)場(chǎng)景下云存儲(chǔ)技術(shù)的應(yīng)用

2.1 構(gòu)建大規(guī)模級(jí)別存儲(chǔ)系統(tǒng)

傳統(tǒng)的以存儲(chǔ)介質(zhì)為主的存儲(chǔ)技術(shù)主要是將信息數(shù)據(jù)存儲(chǔ)到一個(gè)設(shè)備、機(jī)架以及數(shù)據(jù)中心進(jìn)行集中管理，一旦存儲(chǔ)容量從最低級(jí)轉(zhuǎn)變成高級(jí)存儲(chǔ)后，設(shè)備難以獨(dú)立完成。基于大數(shù)據(jù)場(chǎng)景下的云存儲(chǔ)技術(shù)所構(gòu)建的大規(guī)模級(jí)別存儲(chǔ)系統(tǒng)，只需要在內(nèi)部建立一個(gè)子系統(tǒng)，即可跨數(shù)據(jù)中心、城市、省，甚至是跨國家進(jìn)行存儲(chǔ)、管理、收集數(shù)據(jù)信息。并且在大規(guī)模級(jí)別存儲(chǔ)系統(tǒng)中，用戶在系統(tǒng)對(duì)資源設(shè)置訪問權(quán)限后，即可提升資源信息存儲(chǔ)的安全性，使用人員要想訪問有關(guān)資源信息，必須經(jīng)過授權(quán)訪問才能使用，在確保資源信息安全使用同時(shí)，還可避免資源信息被不法分子篡改、泄漏。

2.2 存儲(chǔ)設(shè)備的在線擴(kuò)展和收縮

基于大數(shù)據(jù)場(chǎng)景下，用戶在使用云存儲(chǔ)設(shè)備過程中，會(huì)遇到存儲(chǔ)資源池需要調(diào)整的需要。這時(shí)存儲(chǔ)資源池會(huì)按照用戶存儲(chǔ)的信息需求增加或者是減少存儲(chǔ)設(shè)備。但在調(diào)整資源信息存儲(chǔ)的過程中，不能中斷調(diào)整指令，也不能讓上一層調(diào)度感應(yīng)到存儲(chǔ)資源池發(fā)生的改變，以免影響數(shù)據(jù)正常使用。此外，被刪減的存儲(chǔ)設(shè)備中存儲(chǔ)的資源信息，還應(yīng)在短時(shí)間內(nèi)存儲(chǔ)到另一個(gè)系統(tǒng)中，做好數(shù)據(jù)備份。這就要求云存儲(chǔ)系統(tǒng)及時(shí)優(yōu)化與調(diào)整數(shù)據(jù)管理方法、結(jié)構(gòu)，通過多級(jí)緩存技術(shù)在線擴(kuò)展與收縮存儲(chǔ)設(shè)備的規(guī)模，徹底打破傳統(tǒng)設(shè)備、處理器與網(wǎng)絡(luò)的性能限制，完成信息存儲(chǔ)。

2.3 系統(tǒng)全局的自動(dòng)負(fù)載均衡

在云存儲(chǔ)系統(tǒng)中，物理存儲(chǔ)主機(jī)的節(jié)點(diǎn)規(guī)模已從幾萬轉(zhuǎn)變成幾十萬。面對(duì)大規(guī)模級(jí)別的數(shù)據(jù)請(qǐng)求與節(jié)點(diǎn)數(shù)量，采用何種方式來實(shí)現(xiàn)系統(tǒng)節(jié)點(diǎn)負(fù)載均衡，充分利用空閑節(jié)點(diǎn)，提升服務(wù)質(zhì)量，確保系統(tǒng)高效運(yùn)行，已經(jīng)成為急需解決的問題。而大數(shù)據(jù)大規(guī)模的云存儲(chǔ)技術(shù)，能夠通過請(qǐng)求類別與前端節(jié)點(diǎn)負(fù)載實(shí)現(xiàn)均衡與差異化調(diào)度，將系統(tǒng)全局的自動(dòng)負(fù)載均衡變成可能。例如云存儲(chǔ)技術(shù)在某消防信息化系統(tǒng)中的應(yīng)用，系統(tǒng)全局的自動(dòng)負(fù)載均衡可通過用戶提交的火災(zāi)數(shù)據(jù)挖掘請(qǐng)求，經(jīng)過相應(yīng)的分解，在系統(tǒng)繁忙程度、存儲(chǔ)總?cè)萘恳约癐O吞吐能力等Qos信息內(nèi)為信息存儲(chǔ)選擇相應(yīng)的存儲(chǔ)區(qū)域，然后利用數(shù)據(jù)安全策略將火災(zāi)數(shù)據(jù)信息發(fā)送到指揮調(diào)度網(wǎng)上，并通過數(shù)據(jù)壓縮技術(shù)建立分布式緩存系統(tǒng)，增加系統(tǒng)緩存加載的數(shù)據(jù)量與系統(tǒng)性能，重復(fù)檢測(cè)資源信息的有效性，最終將獲得結(jié)果通過網(wǎng)絡(luò)平臺(tái)反饋給客戶端用戶，實(shí)現(xiàn)IO的負(fù)載均衡。

3 結(jié)束語

綜上所述，云存儲(chǔ)技術(shù)作為信息化體系新的思維模式，通過建立云計(jì)算平臺(tái)，能夠?qū)崿F(xiàn)資源信息實(shí)時(shí)共享，從而提高數(shù)據(jù)信息的利用率。但是在實(shí)際應(yīng)用云存儲(chǔ)技術(shù)過程中，還需了解有關(guān)的技術(shù)工作原理，構(gòu)建大規(guī)模級(jí)別存儲(chǔ)系統(tǒng)，在線擴(kuò)展和收縮存儲(chǔ)設(shè)備的規(guī)模，通過系統(tǒng)全局的自動(dòng)負(fù)載均衡，整合與優(yōu)化各種資源信息，最終實(shí)現(xiàn)資源信息的有效利用。

參考文獻(xiàn)

[1]王愛菊，邵華.大數(shù)據(jù)場(chǎng)景下的云存儲(chǔ)技術(shù)與應(yīng)用[J].電子技術(shù)與軟件工程，2016（17）：186-186.

[2]宋省偉，國健男，郭秉宜，等.大數(shù)據(jù)場(chǎng)景下的云存儲(chǔ)技術(shù)與應(yīng)用淺析[J].硅谷，2015（04）：128-128.

作者單位

核工業(yè)計(jì)算機(jī)應(yīng)用研究所 北京市 100048