劉楠楠

隨著信息化技術的廣泛應用,油田生產積累了豐富的數據資產,但不同業務系統之間相互獨立,數據孤島現象嚴重,如何整合這些數據資源并為業務管理服務,是油田信息化研究的熱點問題。本文基于油田業務需求,結合技術發展現狀,對數據中臺概念、技術架構、應用價值等方面展開介紹, 并對油田開發教據中臺建設進行探索,最后對數據中臺未來的發展趨勢和前景做了展望。
一、引言
在數字化進程中,隨著油田開發數據量的日益龐大和每天不斷更新的數據,常常面臨著海量信息系統林立,數據流轉不暢,各業務層面數據無法打通的問題,同時各部門對數據查詢需求增多,導致服務器負擔加大,查詢速度緩慢。為了快速響應、探索、挖掘、引領用戶的需求,解決前后臺交互響應速度慢,打通數據孤島,實現數據智能化,使業務和數據融合,提供在線數據服務,支持業務精細化的數字化運營,油田企業需要同步建設數據中臺。
油田開發數據中臺的建設,涉及到多個內外單位部門數據資源的整合,且隨著數據接入系統和種類的增加,需將各個分散系統的數據進行標準和規范化處理,實現數據高度共享和應用,有效避免系統的重復建設和輔助領導層決策。
二、數據中臺概述
(一)概念
數據中臺的概念由互聯網企業阿里巴巴提出,是指通過數據技術對海量的數據進行采集、計算、存儲和加工,并統一標準和口徑。數據中臺完成數據統一后會形成標準數據,然后再對數據進行存儲,進而形成數據資產,為用戶提供高效的優質服務。這些服務跟油田的業務有較強的關聯性,是油田獨有的且能復用的,它是業務和數據的沉淀,可以降低重復建設、減少煙囪式協作的成本。
數據中臺對一個企業起著至關重要的作用,可以讓數據在數據平臺和業務系統之間形成了一個良性的閉環。說到數據中臺,不得不提到“前臺”和“后臺”兩個概念。前臺是由各個應用組成的前端系統平臺,與最終用戶直接進行信息交互。例如,企業搭建的電子商務網站、門戶網站等都屬于前臺。后臺是由各個業務管理系統組成的后端平臺。每個后臺業務系統管理了企業的一塊業務,例如用戶管理系統、生產管理系統等。后臺往往并不能很好地支撐前臺快速創新響應用戶的需求,而中臺要解決的才是前臺的創新問題。
(二)應用價值
1.提升數據共享效率
通過數據中臺,實現各類系統間數據的交換和互聯互通,最大程度上保證了數據的共享。
2.數據管理可視化
實現數據的可視化管理,支撐數據分析需求,提高工作效率,減少維護成本。
3.持續提升數據質量
實現數據質量的自動檢查、監控,定時批量執行檢查規則,及時發現數據質量問題,將數據質量報告第一時間推送給業務人員,及時糾正問題數據。
三、數據中臺在油田的建設探索
數據中臺的核心思想是“共享”和“復用”,合理應用數據中臺的相關服務、圖形數據庫的技術和數據模型,讓油田生產數據在信息化體系中不再是分散、凌亂、重復的存在,對數據進行實時的分類、整理、加工,使其成為清晰有序、有條理、有脈絡的有用信息。
(一)數據中臺建設目標
1.完成油田開發數據的采集與存儲,實現不同業務、不同類別數據的集中管理。
2.按照標準的數據規范或數據模型,基于不同類別、日期對數據進行加工和處理,形成數據應用,比如生產數據、物資數據、用戶信息、組織機構等不同的數據服務體系。
3.建立數據驅動的運營體系,基于各個維度的數據,萃取數據價值,支持業務智能化和創新,實現精細的數字化運營。
(二)數據中臺架構
數據中臺的目標是通過中臺提供的工具、方法和運行機制,把異構資源的數據變為一種服務能力,讓數據更方便地被業務所反復使用。聚合和治理資源的多維數據,統一抽象封裝成服務形式,服務于多維用戶,實現業務價值。
(三)建設探索
搭建數據中臺需要圍繞“規劃、治理、整合、共享”四步,將海量、多維的數據資產盤點、整合、分析,確保數據一致性和可復用性,為前臺提供數據資產、數據定制創新、數據監測與數據分析等服務,最終實現數據資產的價值最大化。
1.盤點和規劃數據資產
數據中臺來源數據多樣、多源、多域,通過對油田數據的清洗、分類整合、維度匯總等,需要有一份清晰的數據資產目錄,并能通過智能的搜索、推薦等方式滿足用戶快速找到合適的數據。
2.規劃和設計數據應用
基于現有的技術條件和方案,進行相對完整的數據應用規劃。對數據應用建立評估模型,評估的維度包括數據應用是否可以實現數據應用的業務價值、數據應用的實現成本這三個主要方面。通過評定結果,確定數據應用的實現路徑。
3.建設數據資產
數據資產的建設要依托數據中臺的核心產品完成。數據資產是企業數據化建設的關鍵基礎。主要包括技術的建設、構建標準和數據倉庫模型、建設數據抽取、開發、任務的監控與運維、校驗數據質量、支撐數據應用等等。
4.詳細設計與實現數據應用
數據應用的設計大體上都可以遵循傳統信息化應用設計的過程和理念。數據應用中的數據開發一般在數據庫或者數據倉庫中完成。數據應用的內容展示可以采用BI分析工具展現。
(四)數據中臺發展前景
1.企業管理和業務數據價值將得到充分挖掘
大量的數據沉淀在企業內部,大大影響大數據分析的質量和效果。通過數據治理和運用不同的數據模型進行分析,產生不同類型的數據分析結果,使數據價值得到充分挖掘。
2.智能技術的應用趨勢更加明顯
應用RPA流程自動化、語音識別、自然語言處理技術實現人機對話,應用規則引擎進行管控決策,這些智能技術也將更加廣泛地融入到數據中臺的建設中。
3.數據中臺推動企業重塑IT架構
數據中臺正在推動企業搭建全新的IT架構。企業希望對一些通用應用進行標準化處理,使之可以讓更多部門復用或調用。盡管企業的前端應用各異,但可以通過建設數據中臺,實施數據采集、治理、建模和調取各類分析服務。
五、結論
數據中臺是企業構建的統一的、標準的、安全的、共享的數據資產體系,數據通過服務化的方式支撐數據應用,用于提高油田企業數據使用效率,降低數據建設成本,解決數據質量問題,支撐企業基于數據驅動業務目標的達成。