張志豪,王竟成,舒暢,周彩元
(西南技術(shù)工程研究所,重慶 400039)
高質(zhì)量數(shù)據(jù)是數(shù)字化發(fā)展的源頭活水,數(shù)據(jù)的多源融合也會(huì)催生大量智能應(yīng)用,為裝備數(shù)字化智能化建設(shè)發(fā)展賦能增效[1-3]。隨著我國(guó)大數(shù)據(jù)戰(zhàn)略的實(shí)施,數(shù)字化進(jìn)程的不斷推動(dòng),數(shù)字資源的整合、控制管理、保護(hù)利用等問(wèn)題也隨之出現(xiàn)[4,5]。
目前,自然環(huán)境試驗(yàn)得到的各類(lèi)環(huán)境因素?cái)?shù)據(jù)及各型裝備產(chǎn)品環(huán)境效應(yīng)數(shù)據(jù)的積累管理中,數(shù)據(jù)種類(lèi)繁多、類(lèi)型復(fù)雜,數(shù)據(jù)信息的不完整、不一致和不規(guī)范,會(huì)給數(shù)據(jù)的管理、分析、共享帶來(lái)很大困難,也會(huì)嚴(yán)重影響數(shù)據(jù)產(chǎn)品開(kāi)發(fā)及推廣應(yīng)用服務(wù)[6-10]。自然環(huán)境試驗(yàn)與觀測(cè)可為提高裝備環(huán)境適應(yīng)性提供重要數(shù)據(jù)支撐,針對(duì)環(huán)境因素?cái)?shù)據(jù)和環(huán)境效應(yīng)數(shù)據(jù)的采集積累,開(kāi)展自然環(huán)境試驗(yàn)數(shù)據(jù)積累與質(zhì)量控制管理機(jī)制研究具有重要意義[11-14]。
在數(shù)字化飛速發(fā)展的時(shí)代背景下,如何進(jìn)行自然環(huán)境試驗(yàn)數(shù)據(jù)的積累與質(zhì)量控制管理,解決環(huán)境因素與環(huán)境效應(yīng)數(shù)據(jù)的采集、積累、入庫(kù)管理、質(zhì)量控制及安全監(jiān)控等關(guān)鍵技術(shù)問(wèn)題,為自然環(huán)境試驗(yàn)數(shù)據(jù)挖掘、算法突破、數(shù)據(jù)產(chǎn)品開(kāi)發(fā)等奠定堅(jiān)實(shí)基礎(chǔ),目前為止依舊是自然環(huán)境試驗(yàn)大數(shù)據(jù)發(fā)展中必須夯實(shí)穩(wěn)固的難點(diǎn)及關(guān)鍵性基礎(chǔ)[15,16]。
本研究從自然環(huán)境試驗(yàn)與觀測(cè)系統(tǒng)出發(fā),分析了數(shù)據(jù)積累的多樣與多層級(jí)為數(shù)據(jù)質(zhì)量控制帶來(lái)的挑戰(zhàn),闡明了自然環(huán)境試驗(yàn)質(zhì)量控制管理機(jī)制,全面剖析了數(shù)據(jù)質(zhì)量控制管理中出現(xiàn)的問(wèn)題及采取的科學(xué)合理解決方式,以期構(gòu)建相對(duì)完備的自然環(huán)境試驗(yàn)數(shù)據(jù)資源池、建設(shè)完善的數(shù)據(jù)治理體系,成為自然環(huán)境試驗(yàn)數(shù)據(jù)資源池持續(xù)擴(kuò)充中數(shù)據(jù)時(shí)效性、準(zhǔn)確性、一致性、完整性的牢固保障,逐步提高數(shù)據(jù)價(jià)值密度,為數(shù)字化轉(zhuǎn)型夯基固基。
我國(guó)自然環(huán)境試驗(yàn)站網(wǎng)現(xiàn)有11 個(gè)大氣試驗(yàn)站/場(chǎng)和3 個(gè)海水試驗(yàn)站,覆蓋了我國(guó)寒冷區(qū)、寒溫I 區(qū)、寒溫II 區(qū)、暖溫區(qū)、亞濕熱區(qū)、濕熱區(qū)、海洋性氣候區(qū)、南海島礁、黃海海濱、東海海濱和南海海濱各類(lèi)氣候區(qū),分屬高源、高寒、戈壁、熱帶雨林、海洋性、南海島礁等氣候環(huán)境。圖1 所示為我國(guó)氣候區(qū)分布圖。
圖1 我國(guó)氣候區(qū)分布圖
由于不同試驗(yàn)站/場(chǎng)的氣候特征存在差異,觀測(cè)的環(huán)境因素類(lèi)型也有所側(cè)重。大氣試驗(yàn)站監(jiān)測(cè)的環(huán)境因素包括大氣溫度、相對(duì)濕度、風(fēng)向風(fēng)速、太陽(yáng)輻射、日照時(shí)數(shù)、氣壓、風(fēng)向風(fēng)速、降水、天氣現(xiàn)象大氣環(huán)境因素,以及海鹽粒子、二氧化硫、氨、硫化氫、氯化氫、二氧化氮、氧含量、雨水組分、大氣降塵等大氣污染物因素。海水試驗(yàn)站監(jiān)測(cè)15 項(xiàng)環(huán)境因素,包括大氣溫度、相對(duì)濕度、風(fēng)向風(fēng)速、太陽(yáng)輻射、日照時(shí)數(shù)、氣壓、風(fēng)向風(fēng)速、降水等大氣環(huán)境因素,以及海水溫度、鹽度、溶解氧、pH 值和電導(dǎo)率等海水環(huán)境因素。
自然環(huán)境效應(yīng)數(shù)據(jù)的觀測(cè)與積累通常分為“材料-元器件-部組件-分系統(tǒng)-整機(jī)”不同層級(jí),各層級(jí)材料數(shù)量呈“金字塔”式分布,如圖2 所示可知。
圖2 各層級(jí)材料數(shù)量分布圖
自然環(huán)境效應(yīng)數(shù)據(jù)以基礎(chǔ)材料數(shù)據(jù)為主要布局,數(shù)據(jù)最多位于金字塔體積最大也是最低的層級(jí);元器件、部組件及分系統(tǒng)分別位于第四、第三及第二層級(jí);整機(jī)層級(jí)位于金字塔最頂端,該層級(jí)產(chǎn)品數(shù)量相比其他較少。自然環(huán)境效應(yīng)數(shù)據(jù)觀測(cè)與積累做到低層級(jí)產(chǎn)品環(huán)境效應(yīng)數(shù)量?jī)?yōu)先保證,高層級(jí)產(chǎn)品適當(dāng)控制。
自然環(huán)境因素?cái)?shù)據(jù)與自然環(huán)境效應(yīng)數(shù)據(jù)的采集過(guò)程中,各試驗(yàn)站/場(chǎng)嚴(yán)格按照GJB 8894.1-2017《自然環(huán)境因素測(cè)定方法 第1 部分:大氣環(huán)境因素》、《國(guó)防科技工業(yè)自然環(huán)境試驗(yàn)站網(wǎng) 自然環(huán)境因素采集與監(jiān)檢測(cè)方法規(guī)程》及GJB 8893-2017《軍用裝備自然環(huán)境試驗(yàn)方法》等標(biāo)準(zhǔn)和規(guī)程,確保數(shù)據(jù)的連續(xù)性、可靠性和準(zhǔn)確性,觀測(cè)與試驗(yàn)人員都進(jìn)行專(zhuān)業(yè)技術(shù)培訓(xùn),持證上崗,所有數(shù)據(jù)均需進(jìn)行校對(duì)、復(fù)核、審查[17-19]。試驗(yàn)數(shù)據(jù)和環(huán)境數(shù)據(jù)全部經(jīng)規(guī)范化處理后,完成自然環(huán)境數(shù)據(jù)內(nèi)部共享及完整傳輸。
環(huán)境因素?cái)?shù)據(jù)與環(huán)境效應(yīng)數(shù)據(jù)原始數(shù)據(jù)來(lái)源多樣、數(shù)據(jù)格式類(lèi)型和計(jì)量單位不統(tǒng)一、數(shù)據(jù)噪音大、數(shù)據(jù)完備性差,尤其需要重視入庫(kù)管理。原始數(shù)據(jù)在入庫(kù)存儲(chǔ)前,要開(kāi)展數(shù)據(jù)質(zhì)量控制與數(shù)據(jù)的規(guī)范化研究,包括數(shù)據(jù)缺測(cè)檢查、格式檢查、界限值檢查、一致性檢查。
清洗后的數(shù)據(jù)要按照數(shù)據(jù)分類(lèi)及編碼等標(biāo)準(zhǔn)對(duì)數(shù)據(jù)進(jìn)行標(biāo)識(shí),按照標(biāo)準(zhǔn)格式要求進(jìn)行匯聚整編和入庫(kù)存儲(chǔ),確保入庫(kù)數(shù)據(jù)準(zhǔn)確性與完整性。建立多維主題數(shù)據(jù)庫(kù)對(duì)基礎(chǔ)數(shù)據(jù)分門(mén)別類(lèi)組織。針對(duì)入庫(kù)數(shù)據(jù),從數(shù)據(jù)基本信息、數(shù)據(jù)主要內(nèi)容、編碼規(guī)則審校等方面對(duì)相關(guān)數(shù)據(jù)進(jìn)行校對(duì)。
自然環(huán)境因素?cái)?shù)據(jù)質(zhì)量管控中要對(duì)比研究同一數(shù)據(jù)積累點(diǎn)不同環(huán)境因素之間的內(nèi)在關(guān)聯(lián)和歷史數(shù)據(jù)長(zhǎng)期變化趨勢(shì),從環(huán)境因素邏輯性、相關(guān)性、完整性和連續(xù)性等審核采集的環(huán)境因素?cái)?shù)據(jù),具體審核評(píng)價(jià)流程如圖3所示。
圖3 自然環(huán)境因素?cái)?shù)據(jù)質(zhì)量審核評(píng)價(jià)流程
首先,在環(huán)境因素?cái)?shù)據(jù)質(zhì)量審核評(píng)價(jià)中對(duì)數(shù)據(jù)的格式進(jìn)行審查,查看格式是否做到規(guī)范化處理;在對(duì)數(shù)據(jù)進(jìn)行缺測(cè)檢查,發(fā)現(xiàn)缺測(cè)數(shù)據(jù)需通過(guò)特殊標(biāo)識(shí)進(jìn)行標(biāo)記處理;環(huán)境因素界限值檢查包括氣候極值檢查和臺(tái)站極值檢查,是通過(guò)從歷史數(shù)據(jù)中挑出各月最大值和最小值,確定極值數(shù)據(jù)的上下界限值,查找異常數(shù)據(jù);邏輯性檢查主要包括時(shí)間一致性和內(nèi)部一致性檢查,其中,時(shí)間一致性檢查是指與環(huán)境因素時(shí)間變化規(guī)律性是否相符的檢查,通過(guò)試驗(yàn)站歷年環(huán)境因素變化規(guī)律判斷異常數(shù)據(jù);內(nèi)部一致性檢查是判斷氣象要素之間是否符合規(guī)律,通過(guò)同一時(shí)刻不同要素之間和同一時(shí)刻相同要素不同參數(shù)之間的一致性檢查判斷異常數(shù)據(jù);綜合判斷檢查主要是通過(guò)結(jié)合相關(guān)歷史背景資料,依靠專(zhuān)業(yè)技術(shù)人員的經(jīng)驗(yàn)對(duì)單項(xiàng)檢驗(yàn)的結(jié)果進(jìn)行綜合的檢查判斷,最終確定數(shù)據(jù)的可信度。最后,對(duì)正常數(shù)據(jù)進(jìn)行入庫(kù)存儲(chǔ)處理。
4.1.1 數(shù)據(jù)庫(kù)系統(tǒng)管控
在自然環(huán)境因素?cái)?shù)據(jù)入庫(kù)中,通過(guò)規(guī)定和限制數(shù)據(jù)庫(kù)中存儲(chǔ)在表的列或自定義數(shù)據(jù)類(lèi)型中的值,對(duì)數(shù)據(jù)類(lèi)型、有效數(shù)字位數(shù)、數(shù)據(jù)重復(fù)等進(jìn)行規(guī)約,統(tǒng)一數(shù)據(jù)庫(kù)規(guī)則,保證數(shù)據(jù)完整性和一致性,對(duì)不滿足質(zhì)量要求的數(shù)據(jù)不予以入庫(kù)。對(duì)經(jīng)過(guò)審核的環(huán)境因素?cái)?shù)據(jù),將不同類(lèi)型、不同要素的環(huán)境因素按照各參數(shù)的量綱作一致性處理,并對(duì)不同來(lái)源的數(shù)據(jù)進(jìn)行歸類(lèi)整理,整理原則如下:
1)位數(shù):整理后的數(shù)據(jù)必須保持原有數(shù)據(jù)應(yīng)有的信息,不能隨意拋棄觀測(cè)值和原始數(shù)據(jù)的位數(shù),不能用平均值代替各次觀測(cè)值;
2)格式:大氣環(huán)境因素?cái)?shù)據(jù)參照GB/T 24516.1-2009 中的月報(bào)表、年報(bào)表格式處理,海水環(huán)境因素?cái)?shù)據(jù)參照GJB 8894.2-2017 中的月報(bào)表、年報(bào)表格式處理。
自然環(huán)境因素?cái)?shù)據(jù)監(jiān)測(cè)全流程標(biāo)準(zhǔn)化管理主要從監(jiān)測(cè)人員培訓(xùn)、設(shè)備檢定校準(zhǔn)、監(jiān)測(cè)方法規(guī)范等三方面進(jìn)行標(biāo)準(zhǔn)規(guī)范化管理,從設(shè)備、人員、方法等全方面確保監(jiān)測(cè)數(shù)據(jù)的準(zhǔn)確性、可靠性等。
4.1.2 其他管理控制方式
在充分保障自然環(huán)境因素?cái)?shù)據(jù)質(zhì)量受以上管控機(jī)制作用的同時(shí),還需要采用以下措施充分保證環(huán)境因素?cái)?shù)據(jù)質(zhì)量。
1)加強(qiáng)人工審核
一是對(duì)采集的原始數(shù)據(jù)進(jìn)行出站前的三級(jí)審核制,即采用編制、校核、審核的方式對(duì)數(shù)據(jù)的準(zhǔn)確性進(jìn)行最初審核,從源頭提高數(shù)據(jù)的準(zhǔn)確率,二是對(duì)各試驗(yàn)站提交上來(lái)的數(shù)據(jù),必須經(jīng)過(guò)專(zhuān)業(yè)技術(shù)人員的二次審核,尤其是對(duì)缺失或異常數(shù)據(jù)的審核,以此進(jìn)一步提高入庫(kù)數(shù)據(jù)準(zhǔn)確率。
2)針對(duì)對(duì)缺失值處理方法
替換法:采用相鄰年份對(duì)應(yīng)的歷史數(shù)據(jù)來(lái)替換修補(bǔ)缺失年份的數(shù)據(jù);
近鄰查補(bǔ)法:通過(guò)已有數(shù)據(jù)項(xiàng)進(jìn)行對(duì)比,采用鄰近監(jiān)測(cè)點(diǎn)監(jiān)測(cè)的同種因素?cái)?shù)據(jù),替換對(duì)應(yīng)缺失數(shù)據(jù)缺失時(shí)間點(diǎn)位的數(shù)據(jù);
趨勢(shì)法:缺失數(shù)據(jù)監(jiān)測(cè)點(diǎn)對(duì)應(yīng)鄰近監(jiān)測(cè)點(diǎn)的數(shù)據(jù)已知,利用鄰近監(jiān)測(cè)點(diǎn)的數(shù)據(jù)變化趨勢(shì),即相鄰時(shí)間點(diǎn)的數(shù)據(jù)的差值疊加到缺失數(shù)據(jù)時(shí)間點(diǎn)位前的數(shù)據(jù)上,依次修補(bǔ)后續(xù)缺失數(shù)據(jù)。
3)加強(qiáng)環(huán)境因素觀測(cè)設(shè)備及傳感器的檢定校準(zhǔn)
設(shè)備的檢定校準(zhǔn)是設(shè)備檢測(cè)數(shù)據(jù)準(zhǔn)確性的重要保證。項(xiàng)目在開(kāi)展過(guò)程中需要對(duì)站網(wǎng)各試驗(yàn)站點(diǎn)的設(shè)備及傳感器按照要求定期檢定或校準(zhǔn),以確保數(shù)據(jù)監(jiān)測(cè)的準(zhǔn)確性。
4)確保監(jiān)檢測(cè)方法標(biāo)準(zhǔn)性
環(huán)境因素的監(jiān)檢測(cè)和數(shù)據(jù)采集均按照國(guó)防軍工自然環(huán)境試驗(yàn)站網(wǎng)發(fā)布的《自然環(huán)境因素采集及監(jiān)測(cè)規(guī)程》進(jìn)行,確保站網(wǎng)監(jiān)測(cè)數(shù)據(jù)獲取方法的一致性。環(huán)境因素觀測(cè)點(diǎn)的觀測(cè)場(chǎng)所、監(jiān)測(cè)點(diǎn)的位置設(shè)置、樣品的采集和保存情況等均符合《國(guó)防科技工業(yè)自然環(huán)境試驗(yàn)站網(wǎng)規(guī)程-自然環(huán)境因素采集與臨檢測(cè)方法》規(guī)定的要求。
5)加強(qiáng)環(huán)境因素專(zhuān)業(yè)技術(shù)人員的培訓(xùn)
對(duì)站網(wǎng)各試驗(yàn)站點(diǎn)環(huán)境因素觀測(cè)與分析人員定期開(kāi)展培訓(xùn),統(tǒng)一各試驗(yàn)站操作人員的操作規(guī)范,確保所有專(zhuān)業(yè)技術(shù)人員按照規(guī)定的要求采集并分析獲取環(huán)境因素?cái)?shù)據(jù)。
環(huán)境效應(yīng)數(shù)據(jù)是典型的多源異構(gòu)數(shù)據(jù),涉及數(shù)據(jù)、文本、圖像等類(lèi)型,質(zhì)量控制需要先明確數(shù)據(jù)特點(diǎn)、數(shù)據(jù)類(lèi)型與記錄形式。
自然環(huán)境效應(yīng)數(shù)據(jù)質(zhì)量管控中,不同測(cè)量對(duì)象,其數(shù)據(jù)記錄形式各有特點(diǎn),針對(duì)不同數(shù)據(jù)特點(diǎn)采用不同質(zhì)量管理控制方式。其中,數(shù)值型數(shù)據(jù)需要對(duì)具體的數(shù)據(jù)單位、經(jīng)驗(yàn)取值范圍、測(cè)量精度要求以及實(shí)際測(cè)量值進(jìn)行規(guī)范化要求和記錄。圖片需要對(duì)格式、像素、反映的形貌部位(如全貌或局部)等進(jìn)行統(tǒng)一的要求和記錄。數(shù)據(jù)的記錄方式直接決定數(shù)據(jù)的屬性和特點(diǎn),需要在充分調(diào)研材料、結(jié)構(gòu)、環(huán)境、腐蝕以及腐蝕研究相關(guān)技術(shù)等方面具體的數(shù)據(jù)指標(biāo),各指標(biāo)的通用計(jì)量單位,研究領(lǐng)域的取值區(qū)間,精度指標(biāo)的具體要求以及實(shí)際記錄形式的基礎(chǔ)上,逐條給出每一項(xiàng)數(shù)據(jù)記錄指標(biāo)的詳細(xì)規(guī)范性要求。對(duì)某些數(shù)值或文本均可進(jìn)行記錄或標(biāo)注的情況,需要在規(guī)范中明確需要采取的標(biāo)注形式。對(duì)于可以采取簡(jiǎn)化記錄的方式,在規(guī)范中要明確簡(jiǎn)化標(biāo)注的形式以及簡(jiǎn)化標(biāo)注所代表的確定意義,以防止記錄混亂,引起數(shù)據(jù)處理過(guò)程中耗費(fèi)大量精力進(jìn)行數(shù)據(jù)格式的統(tǒng)一。
自然環(huán)境效應(yīng)數(shù)據(jù)類(lèi)型及記錄形式也存在不同。按照數(shù)據(jù)類(lèi)型和各類(lèi)型數(shù)據(jù)的實(shí)際特點(diǎn)設(shè)計(jì)數(shù)據(jù)采集記錄表的格式,對(duì)于任意一個(gè)表格中未明確填寫(xiě)格式的部分,要求在尊重習(xí)慣的基礎(chǔ)上按照國(guó)家有關(guān)標(biāo)準(zhǔn)格式進(jìn)行填寫(xiě)。按照項(xiàng)目研究和數(shù)據(jù)收集的特點(diǎn),需制定性能參數(shù)測(cè)試數(shù)據(jù)、外觀檢查數(shù)據(jù)和失效信息的分類(lèi)采集表等表單。其中,性能參數(shù)測(cè)試數(shù)據(jù)采集主要包括基本性能數(shù)據(jù)采集表,該表應(yīng)包括性能參數(shù)測(cè)試數(shù)據(jù)、技術(shù)要求和測(cè)試時(shí)間等內(nèi)容;外觀檢查數(shù)據(jù)應(yīng)包括涂層、標(biāo)志、殼體等數(shù)據(jù)采集表,表單應(yīng)包括涂層是否剝落、標(biāo)志是否清晰、是否腐蝕斷裂、殼體是否腐蝕等內(nèi)容;失效信息采集表應(yīng)包括失效樣品編號(hào)、失效時(shí)間、失效模式和失效機(jī)理等內(nèi)容。
異常數(shù)據(jù)是指由于測(cè)試環(huán)境等的突然變化而產(chǎn)生的不符合或偏離常規(guī)屬性的數(shù)據(jù)[20]。環(huán)境效應(yīng)數(shù)據(jù)在產(chǎn)生、存儲(chǔ)過(guò)程中不可避免會(huì)出現(xiàn)數(shù)據(jù)異常的情況,對(duì)于異常數(shù)據(jù)需要甄別、判定并修正,對(duì)其進(jìn)行嚴(yán)格質(zhì)量控制。在自然環(huán)境試驗(yàn)中異常數(shù)據(jù)往往表現(xiàn)在數(shù)據(jù)序列中和平行測(cè)試數(shù)據(jù)中。因此,首先需要研究數(shù)據(jù)序列中異常數(shù)據(jù)的判定方法和平行數(shù)據(jù)中異常數(shù)據(jù)的判定方法。對(duì)于異常數(shù)據(jù)的判斷首先要基于對(duì)數(shù)據(jù)屬性的深刻認(rèn)識(shí),明確數(shù)據(jù)在給定環(huán)境下的取值范圍或取值規(guī)律。最后,基于已形成的規(guī)律或認(rèn)識(shí)去判斷數(shù)據(jù)是否符合既定規(guī)律,若不符合即判定為異常數(shù)據(jù)。
異常數(shù)據(jù)的判定主要采取物理判別法和統(tǒng)計(jì)判別法兩種方法。物理判別法是根據(jù)人們對(duì)客觀事物已有的認(rèn)識(shí),判別由于外界干擾、人為誤差等原因造成的數(shù)據(jù)偏離正常的程度,在數(shù)據(jù)錄入過(guò)程中隨時(shí)判斷,隨時(shí)剔除。統(tǒng)計(jì)判別法是通過(guò)給定一個(gè)置信概率,并確定一個(gè)置信限,凡超過(guò)此限的誤差,就認(rèn)為它不屬于隨機(jī)誤差范圍,將其視為異常數(shù)據(jù)。自然環(huán)境試驗(yàn)與觀測(cè)異常數(shù)據(jù)一般采用Q 檢驗(yàn)法、格魯布斯(Grubbs)檢驗(yàn)法、t 檢驗(yàn)法等判定方法。另外,GB 4883-2008《數(shù)據(jù)的統(tǒng)計(jì)處理和解釋 正態(tài)樣本離群值的判定和處理》也提供了一種偏度—峰度檢驗(yàn)法。除特殊情況外,對(duì)異常值剔除水平一般采用1 %或更下,而不宜采用大于5 %的值的一般規(guī)則。由于異常數(shù)據(jù)通常是具備特定屬性的數(shù)據(jù),通過(guò)合理的分析處理加以修正,異常數(shù)據(jù)有可能會(huì)成為正常數(shù)據(jù)。因此,在數(shù)據(jù)錄人時(shí),可以保留異常數(shù)據(jù),以備后續(xù)拓展研究使用。研究分析文獻(xiàn)資料中異常數(shù)據(jù)的修正方法,如平均值法、空穴值法、模型預(yù)測(cè)法等,結(jié)合環(huán)境效應(yīng)數(shù)據(jù)的特點(diǎn),研究各種方法的誤差,進(jìn)而確定適用于不同類(lèi)別環(huán)境效應(yīng)數(shù)據(jù)的異常數(shù)據(jù)修正方法。
數(shù)據(jù)安全管理是數(shù)據(jù)管理的紅線,貫穿數(shù)據(jù)產(chǎn)生到應(yīng)用全過(guò)程。主要注意以下五個(gè)方面:第一,數(shù)據(jù)管理必須嚴(yán)格執(zhí)行國(guó)家關(guān)于信息管理的有關(guān)安全保密規(guī)定要求,采取有效的管控手段和技術(shù)措施;第二,根據(jù)涉密等級(jí)、任務(wù)分工和人員類(lèi)別,設(shè)置用戶使用調(diào)閱權(quán)限;第三,綜合運(yùn)用先進(jìn)的技術(shù)手段加強(qiáng)數(shù)據(jù)全流程管理,全過(guò)程安全監(jiān)控;第四逐步建立健全應(yīng)急處置和容災(zāi)備份機(jī)制,健全防篡改、防攻擊、防病毒等安全防護(hù)體系;第五,用于存儲(chǔ)和處理數(shù)據(jù)的設(shè)備,必須明確標(biāo)識(shí)涉密等級(jí)和管理使用權(quán)限,嚴(yán)禁不按密級(jí)和權(quán)限使用。
數(shù)據(jù)監(jiān)控貫穿數(shù)據(jù)從產(chǎn)生到應(yīng)用的全過(guò)程,主要包括數(shù)據(jù)存儲(chǔ)監(jiān)控、安全監(jiān)控、用戶訪問(wèn)監(jiān)控、共享監(jiān)控。其目的是為了及時(shí)發(fā)現(xiàn)數(shù)據(jù)管理各個(gè)環(huán)節(jié)過(guò)程中的問(wèn)題,及時(shí)反饋到數(shù)據(jù)各階段的管理方,及時(shí)通告數(shù)據(jù)產(chǎn)品審查小組和業(yè)務(wù)小組,從而盡快落實(shí)解決方案。
本文針對(duì)自然環(huán)境試驗(yàn)數(shù)據(jù)資源質(zhì)量管控的技術(shù)瓶頸,開(kāi)展了自然環(huán)境試驗(yàn)數(shù)據(jù)積累與質(zhì)量控制管理機(jī)制研究,給出了數(shù)據(jù)質(zhì)量控制流程、控制要素和控制體系框架,從技術(shù)層面分析了構(gòu)建數(shù)據(jù)質(zhì)量控制系統(tǒng)的關(guān)鍵要素和技術(shù)要點(diǎn),為實(shí)現(xiàn)自然環(huán)境試驗(yàn)數(shù)據(jù)資源池持續(xù)擴(kuò)充中,數(shù)據(jù)資源的規(guī)范審核及推進(jìn)數(shù)據(jù)質(zhì)量控制管理提供基礎(chǔ)技術(shù)支持。
在數(shù)字化的時(shí)代背景下,數(shù)據(jù)質(zhì)量不僅是當(dāng)下數(shù)字化建設(shè)的關(guān)鍵,更是對(duì)自然環(huán)境試驗(yàn)數(shù)據(jù)資源這一“源頭活水”的純凈與價(jià)值的保障。自然環(huán)境試驗(yàn)與觀測(cè)數(shù)據(jù)的持續(xù)擴(kuò)充、自然環(huán)境試驗(yàn)大數(shù)據(jù)的發(fā)展也將為提高裝備環(huán)境適應(yīng)性提供更強(qiáng)有力的支撐。