大數據技術在企事業檔案管理中的應用與研究

文/柳玉婷

大數據技術在企事業檔案管理中的應用與研究

文/柳玉婷

唐山市規劃建筑設計研究院

大數據技術在當今社會的各個領域得到了廣泛應用,大數據就是數據存儲量在TB、PB級的數據存儲技術和處理技術，目前我國的很多企事業單位都開始利用互聯網和計算機對本單位的人事，業務，財務等檔案數據進行信息化管理。隨著信息化在檔案管理領域的影響日益明顯，檔案管理系統需要處理的數據量月來越大，各個單位檔案管理從信息化開始進入大數據時代。本文著重探討如何利用大數據處理技術處理大量的檔案管理數據，并以一個基于大數據技術的企事業檔案管理信息系統實例來說明大數據技術在檔案管理領域的應用。

大數據；檔案管理；.netframework

1 引言

大數據就是數據存儲量在TB、PB級的數據存儲技術和處理技術，目前我國的很多企事業單位都開始利用互聯網和計算機對本單位的人事，業務，財務等檔案數據進行信息化管理。隨著信息化在檔案管理領域的影響日益明顯，檔案管理系統需要處理的數據量月來越大，各個單位檔案管理從信息化開始進入大數據時代。本文著重探討如何利用大數據處理技術處理大量的檔案管理數據，并結合筆者團隊所開發的基于大數據技術的企事業檔案管理信息系統實例大數據從動態建模創建界面、數據加密，多維度查詢三個技術角度來來說明大數據技術在檔案管理領域的應用。基于大數據技術的企事業檔案管理信息系統平臺應用計算機網絡技術、微軟.netframework平臺，依托現有本單位現有的互聯網平臺，研究檔案管理、檔案數據的高速存儲、通過對檔案的動態建模技術實現對多樣化數據檔案的存儲和查詢功能，實現對檔案工作的全方位網絡化管理，使檔案管理全過程更為科學、有效、安全、可控，進一步優化管理流程，提高檔案資源使用效率。

2 動態建模技術在檔案管理中的應用

檔案數據存儲的動態建模技術研究。由于檔案數據歷史跨度大，檔案數據內容變化大.用單一模塊來存儲檔案數據無法實現對檔案數據存儲的要求.為此本課題提出研究了一種動態建模技術,利用該技術檔案管理員可以自己定義所需的檔案數據存儲模塊界面和數據表結構.系統將根據檔案管理員自定義的存儲結構自動生成檔案管理員所需的功能界面和后臺數據表.結合唐山市建筑規劃設計院檔案管理實際，研究切實可行的動態建模技術來快速高效的實現對現有檔案數據的電子化存儲。動態建模技術在檔案管理信息系統要想創建動態的檔案數據模型結構需要以下幾個步驟.第一,利用EXCEL電子表格里定義檔案的數據結構.第二,將定義好的檔案數據結構在數據庫內創建數據表.第三,選擇定義好的存儲檔案的數據表創建對該檔案數據的增、刪、改、查的功能模塊。

3 檔案精確多維查詢技術研究

結合唐山建筑規劃設計院實際及技術發展趨勢，研究檔案查詢的組合條件構造方法、檔案數據索引技術。利用軟件系統提供的邏輯運算符與、或、非和關系運算符（包括大于、等于、小于、大于等于、小于等于，不等于）將查詢條件進行聯立查詢，實現對數據的多維查詢。

在條件查詢界面可以選擇該數據表的字段來確定顯示查詢結果時展示那幾個字段。在條件1，條件2 ，條件3 中設置查詢條件。先選擇字段名再確定查詢的值。字段名與查詢的值用=，!=，〉，<,>=,<=,like（模糊查詢）的方式來設置查詢條件。單擊查詢按鈕后可以將查詢記錄顯示在下面的列表中。

4 改進的數據加密技術的實現

改進的檔案數據加密算法研究保密數據數據只能在指定的計算機上處理.對二進制異或加密的密鑰做了改進.做異或加密時加密的密鑰是具備訪問、修改或者刪除這者項數據權限的計算機的物理地址。也就利用MAC地址作為數據加密密鑰的地址。在做數據加密時,考慮的有些保密數據數據只能在指定的計算機上處理.我們對二進制異或加密的密鑰做了改進。就是在做異或加密時加密的密鑰是具備訪問、修改或者刪除這者項數據權限的計算機的物理地址.也就mac地址.我們的系統會記錄具備訪問、修改、刪除權限某項保密檔案數據的客戶端計算機的mac地址.當某個不具備權限的計算機客戶端訪問保密數據時,即使登陸密碼用戶名正確由于從這個客戶端取到的mac地址不是系統之前記錄的mac地址,用這個mac地址作為解密的密鑰產生的數據依然無法使用可讀。

5 總結

本文給出了大數據技術中常用的動態建模技術、數據加密技術和多維查詢技術在檔案管理中的應用。利用該技術檔案管理員可以自己定義所需的檔案數據存儲模塊界面和數據表結構.系統將根據檔案管理員自定義的存儲結構自動生成檔案管理員所需的功能界面和后臺數據表.結合唐山市建筑規劃設計院檔案管理實際，研究切實可行的動態建模技術來快速高效的實現對現有檔案數據的電子化存儲。大大降低了檔案管理信息系統的維護成本，以每年我院系統維護成本5-6萬元計算，基于動態建模技術的檔案管理信息系統的年維護成本只有不到5000元，年節約費用5萬余元，應用3年來共節約費用15萬。系統的應用為設計院的圖紙管理規范化和項目管理的規范化提供了巨大的幫助，也提高大大提高了唐山規劃建筑設計研究院的工作效率。

另外，由于基于大數據技術的檔案管理信息系統的使用，為唐山規劃建筑設計院培養了一批及懂計算機又懂檔案管理的檔案管理復合型人才隊伍，大大提高了唐山市規劃建筑設計研究院和合作單位的檔案管理隊伍的人員素質水平。