汽車行業(yè)大數(shù)據(jù)平臺建設(shè)及應(yīng)用

胡葳 周坤

（1.工業(yè)和信息化部裝備工業(yè)發(fā)展中心 北京市 100144 2.中汽數(shù)據(jù)有限公司 天津市 300300）

隨著互聯(lián)網(wǎng)技術(shù)和通信技術(shù)的快速發(fā)展以及國家大數(shù)據(jù)戰(zhàn)略的提出，互聯(lián)網(wǎng)和傳統(tǒng)產(chǎn)業(yè)加速融合，當前的汽車產(chǎn)業(yè)數(shù)據(jù)體系已經(jīng)從單點數(shù)據(jù)迅速爆發(fā)的階段進入到了全鏈條數(shù)據(jù)融合的產(chǎn)業(yè)數(shù)據(jù)化階段，產(chǎn)業(yè)價值鏈也正發(fā)生著前所未有的改變，傳統(tǒng)汽車行業(yè)的管理模式和運營模式正在被顛覆，智能互聯(lián)與大數(shù)據(jù)將成為未來競爭的核心要素，技術(shù)層面需要掌握的核心技術(shù)也愈加復雜，而協(xié)同統(tǒng)一汽車產(chǎn)業(yè)數(shù)據(jù)標準規(guī)范來搭建汽車產(chǎn)業(yè)大數(shù)據(jù)平臺，必將是未來中國汽車產(chǎn)業(yè)由大到強的重要支撐。

1 汽車行業(yè)大數(shù)據(jù)平臺建設(shè)

隨著大數(shù)據(jù)技術(shù)的應(yīng)用與發(fā)展，以“互聯(lián)化”為紐帶實現(xiàn)大數(shù)據(jù)的收集，助推汽車產(chǎn)業(yè)“新四化”快速發(fā)展。汽車產(chǎn)業(yè)大數(shù)據(jù)平臺的建設(shè)將成為汽車產(chǎn)業(yè)快速發(fā)展的動力之一。

1.1 汽車行業(yè)大數(shù)據(jù)來源

汽車大數(shù)據(jù)涵蓋了汽車設(shè)計、研發(fā)、生產(chǎn)、銷售、使用、置換和報廢全生命周期的各環(huán)節(jié)所產(chǎn)生的各類數(shù)據(jù)，汽車行業(yè)大數(shù)據(jù)來源主要有4 類。

1.1.1 車型基礎(chǔ)數(shù)據(jù)

車型基礎(chǔ)數(shù)據(jù)主要來源于汽車設(shè)計、研發(fā)環(huán)節(jié)的全產(chǎn)品屬性的各類數(shù)據(jù)，如基本款型、技術(shù)參數(shù)、配置參數(shù)、材料數(shù)據(jù)以及零部件數(shù)據(jù)等，是車型固有的屬性數(shù)據(jù)，基本覆蓋汽車產(chǎn)業(yè)上游的數(shù)據(jù)。

1.1.2 汽車市場數(shù)據(jù)

汽車市場數(shù)據(jù)則來源于汽車在生產(chǎn)、銷售環(huán)節(jié)產(chǎn)生的各類數(shù)據(jù)，主要包含細分車型、款型等終端零售數(shù)據(jù)、品牌流轉(zhuǎn)數(shù)據(jù)、區(qū)域流轉(zhuǎn)數(shù)據(jù)，零部件配套交易數(shù)據(jù)等，是汽車在各類市場交易時產(chǎn)生的各類數(shù)據(jù)，即汽車產(chǎn)業(yè)中游的相關(guān)數(shù)據(jù)。

1.1.3 消費者行為數(shù)據(jù)

消費者行為數(shù)據(jù)主要來源于消費者在使用汽車時，產(chǎn)生的各類行為數(shù)據(jù)，如生活形態(tài)數(shù)據(jù)、口碑數(shù)據(jù)、消費偏好數(shù)據(jù)、出行習慣數(shù)據(jù)等。

1.1.4 外部環(huán)境數(shù)據(jù)

外部環(huán)境數(shù)據(jù)主要來自于，以路譜、道路等級、交通標識等為基礎(chǔ)的道路數(shù)據(jù)，以天氣、地理、交通參與者等為基礎(chǔ)的環(huán)境數(shù)據(jù)。

1.2 汽車行業(yè)大數(shù)據(jù)整合

經(jīng)過多年的數(shù)據(jù)積累和沉淀，汽車行業(yè)數(shù)據(jù)已經(jīng)形成巨大的數(shù)據(jù)金山，是中國汽車行業(yè)的寶貴財富。由于不同種類的數(shù)據(jù)資源存在固有的數(shù)據(jù)特點，而異常數(shù)據(jù)、噪聲數(shù)據(jù)以及數(shù)據(jù)標準統(tǒng)一化則是各類數(shù)據(jù)融合的痛點，造成數(shù)據(jù)內(nèi)容不完善、數(shù)據(jù)格式不統(tǒng)一、數(shù)據(jù)間無法有效打通等問題，致使數(shù)據(jù)不能發(fā)揮其應(yīng)有的數(shù)據(jù)價值，通過數(shù)據(jù)清洗與整合可以解決現(xiàn)有問題，打破數(shù)據(jù)孤島，發(fā)揮數(shù)據(jù)融合的價值。

形成以SQL、ETL、Python、Excel 等程序或方法為基礎(chǔ)的數(shù)據(jù)清洗及標準化體系，從底層實現(xiàn)對原始數(shù)據(jù)的清洗及標準化，依據(jù)數(shù)據(jù)特點制定數(shù)據(jù)清洗規(guī)則、數(shù)據(jù)標準及數(shù)據(jù)探查規(guī)則，結(jié)合數(shù)理統(tǒng)計和數(shù)據(jù)挖掘方法，對原始數(shù)據(jù)進行清洗和標準化。

數(shù)據(jù)整合以數(shù)據(jù)需求為出發(fā)點，通過研究數(shù)據(jù)之間的關(guān)系，確定統(tǒng)一標準，搭建數(shù)據(jù)模型，實現(xiàn)數(shù)據(jù)系統(tǒng)集成，方便快捷的挖掘所需，并進行安全管理，形成有效的整合體系。通過對數(shù)據(jù)資源的逐一梳理，明確各數(shù)據(jù)源之間的關(guān)系與邏輯，建立數(shù)據(jù)資源體系框架，并對具體數(shù)據(jù)源進行完善；對現(xiàn)有數(shù)據(jù)資源進行規(guī)范化建設(shè)，形成汽車行業(yè)數(shù)據(jù)統(tǒng)一標準，在該標準的前提下實現(xiàn)不同數(shù)據(jù)的貫穿打通。通過規(guī)范表結(jié)構(gòu)，將各數(shù)據(jù)源的入庫規(guī)格統(tǒng)一，依據(jù)具體的使用場景進行建模，以數(shù)據(jù)模型和需求加載數(shù)據(jù)，最終結(jié)合統(tǒng)一的數(shù)據(jù)標準，實現(xiàn)多數(shù)據(jù)關(guān)聯(lián)使用。

1.3 汽車行業(yè)大數(shù)據(jù)平臺構(gòu)建

為提升數(shù)據(jù)管理效率，深入挖掘行業(yè)大數(shù)據(jù)價值，構(gòu)建汽車行業(yè)大數(shù)據(jù)平臺，實現(xiàn)多層次、多環(huán)節(jié)海量多元異構(gòu)的數(shù)據(jù)整合，從多個視角綜合分析問題，結(jié)合科學的指標評價體系模型，為不同的業(yè)務(wù)應(yīng)用場景提供基礎(chǔ)支撐。

汽車行業(yè)大數(shù)據(jù)平臺基礎(chǔ)架構(gòu)由基礎(chǔ)支撐層、數(shù)據(jù)采集層、存儲管理層、計算能力層和智能應(yīng)用層構(gòu)成。

1.3.1 基礎(chǔ)支撐層

為大數(shù)據(jù)平臺提供相應(yīng)的軟硬件支撐。在硬件方面，構(gòu)建海量大數(shù)據(jù)的分布式存儲服務(wù)器集群。在軟件方面，集成快速高效的數(shù)據(jù)計算軟件。同時從物理、網(wǎng)絡(luò)、主機、應(yīng)用多層級保證數(shù)據(jù)安全。

1.3.2 數(shù)據(jù)采集層

通過傳感器等設(shè)備將結(jié)構(gòu)化數(shù)據(jù)（如業(yè)務(wù)系統(tǒng)相關(guān)數(shù)據(jù)等）及半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)（如文本、視頻、圖像等）進行自動采集；再運用ETL工具，完成數(shù)據(jù)的抽取、清洗、轉(zhuǎn)換和裝載等預(yù)處理工作。

1.3.3 存儲管理層

在數(shù)據(jù)存儲方面，構(gòu)建操作數(shù)據(jù)存儲系統(tǒng)，存儲原始數(shù)據(jù)及非結(jié)構(gòu)化數(shù)據(jù)；構(gòu)建數(shù)據(jù)倉庫，實現(xiàn)明細數(shù)據(jù)及輕度匯總數(shù)據(jù)的存儲；構(gòu)建數(shù)據(jù)超市，高度匯總各項指標數(shù)據(jù)。

在數(shù)據(jù)管理方面，實現(xiàn)數(shù)據(jù)規(guī)劃、加工、運維、質(zhì)量、安全管理，以及進行數(shù)據(jù)資產(chǎn)評估及數(shù)據(jù)資產(chǎn)運營。

1.3.4 計算能力層

對數(shù)據(jù)進行挖掘分析。采用分布式及單機計算引擎，提供數(shù)據(jù)服務(wù)、基礎(chǔ)查詢分析、多維分析及實時分析，并對數(shù)據(jù)進行深度挖掘，實現(xiàn)數(shù)據(jù)共享，并以可視化的方式將數(shù)據(jù)呈現(xiàn)。

1.3.5 智能應(yīng)用層

大數(shù)據(jù)平臺的頂層設(shè)計。將汽車大數(shù)據(jù)應(yīng)用于智能網(wǎng)聯(lián)、無人駕駛、共享汽車、智能交通等場景中。在汽車保險、金融領(lǐng)域?qū)崿F(xiàn)產(chǎn)業(yè)高度融合，助力企業(yè)精準營銷。

2 汽車行業(yè)大數(shù)據(jù)平臺應(yīng)用

大數(shù)據(jù)平臺既是汽車產(chǎn)業(yè)轉(zhuǎn)型的推動力，也是轉(zhuǎn)型成功的必要因素，更是數(shù)據(jù)與決策之間的橋梁，因此，汽車行業(yè)大數(shù)據(jù)平臺的地位在不斷提升，而如何應(yīng)用這樣的平臺也逐漸成為保障我國汽車產(chǎn)業(yè)未來發(fā)展從大到強的重要議題。

2.1 可視化應(yīng)用平臺

大數(shù)據(jù)的戰(zhàn)略意義不止在于龐大的數(shù)據(jù)體系，更在于如何對其進行專業(yè)化處理并提煉出高質(zhì)量的信息資產(chǎn)，用以支持我們做出正確的決策。這意味著提高分析數(shù)據(jù)的效率，更好更快地展示復雜多維數(shù)據(jù)之間的關(guān)聯(lián)，并歸納總結(jié)出其中的結(jié)構(gòu)規(guī)律成為汽車產(chǎn)業(yè)大數(shù)據(jù)平臺的重要任務(wù)之一。而數(shù)據(jù)可視化技術(shù)則因其交互性，多維性和效果可視性，在汽車產(chǎn)業(yè)數(shù)據(jù)分析中得到了廣泛的應(yīng)用。

目前，汽車產(chǎn)業(yè)大數(shù)據(jù)來源廣泛，結(jié)構(gòu)復雜，可視化平臺則充分簡化了海量數(shù)據(jù)的應(yīng)用場景，將來自于數(shù)據(jù)庫、云數(shù)據(jù)、電子表格、應(yīng)用數(shù)據(jù)中的不同構(gòu)型的原始汽車相關(guān)數(shù)據(jù)以高效直觀的圖形界面和多維圖象呈現(xiàn)在分析者眼前，提高效率的同時也能更為準確地傳達數(shù)據(jù)分析的結(jié)果，以便于我們洞悉業(yè)態(tài)，更好地指導業(yè)務(wù)以評測行業(yè)發(fā)展。

汽車大數(shù)據(jù)可視化平臺的應(yīng)用范圍很廣，比如：可以對數(shù)據(jù)計算進行可視化展示，實現(xiàn)了同比、環(huán)比、市場占有率、產(chǎn)銷比、同級別市占率、銷量增速等重要分析要素進行復雜計算并得出直接結(jié)果；可以將各類圖表進行動態(tài)組合，且不必再局限于只通過簡單數(shù)據(jù)表來觀察并分析數(shù)據(jù)，我們可以將多個數(shù)據(jù)的多個屬性以多維圖表的形式展現(xiàn)，圖表可以隨意組合、分類、排序，更可以實現(xiàn)圖表間的聯(lián)動，使得用戶可以更快地了解數(shù)據(jù)信息；同時，數(shù)據(jù)分析的結(jié)果也可以通過可視化應(yīng)用平臺及時獲取，所有的這些分析要素或是圖表，都能做到所見即所得，也可以實現(xiàn)可視化結(jié)果的下載導出，為決策者節(jié)省時間，幫助其更及時地做出決定；另外，可視化平臺的數(shù)據(jù)也能實現(xiàn)自動更新，節(jié)約了搜集數(shù)據(jù)的人力物力，且隨著數(shù)據(jù)源的更新，以上得到的分析要素、圖表、報告數(shù)據(jù)等也可以自動更新，以便在最短時間內(nèi)及時掌握行業(yè)動態(tài)，洞察未來的發(fā)展趨勢，做到最大化利用現(xiàn)有數(shù)據(jù)。

2.2 產(chǎn)業(yè)運行狀態(tài)監(jiān)測預(yù)警

隨著當前汽車產(chǎn)業(yè)的高速發(fā)展，我國整體汽車市場的運行情況也是日新月異，因此，為了能及時做出符合當下環(huán)境的決策并預(yù)估未來趨勢、需求情況以減少損失，對汽車產(chǎn)業(yè)運行狀態(tài)的監(jiān)測及預(yù)警就變得異常重要。在這種情況下，汽車產(chǎn)業(yè)全運行環(huán)節(jié)的數(shù)據(jù)可視化監(jiān)測和實時預(yù)警平臺應(yīng)運而生。監(jiān)測預(yù)警平臺是對整體市場及各品牌的運行狀態(tài)進行監(jiān)測，并對出現(xiàn)問題的指標進行預(yù)警。

監(jiān)測預(yù)警平臺可以對汽車產(chǎn)業(yè)整體市場進行監(jiān)測，這種監(jiān)測一般分為對新增市場和存量市場的監(jiān)測。對新增市場的監(jiān)測是以汽車產(chǎn)業(yè)的大數(shù)據(jù)作為基礎(chǔ)，從汽車工業(yè)的生產(chǎn)、銷售、庫存三個維度來對整體市場運行狀態(tài)進行總體監(jiān)測。這樣有利于我們及時掌握行業(yè)的實際需求情況和盈利能力的走勢情況，也能幫助我們做出對未來的正確預(yù)期判斷；而隨著我國汽車保有量的規(guī)模越來越龐大，對存量市場的監(jiān)測也成為了一項必要工作，一方面，需要對整體行業(yè)的保有量進行監(jiān)測，同時還需要掌握新能源車型和各種排量標準的汽車的保有量，這些監(jiān)測數(shù)據(jù)都能夠?qū)φ叩陌l(fā)布起到引導和支撐作用，另一方面，二手車作為汽車存量資源的重要部分，其市場情況也要納入監(jiān)測范圍，比如交易量和區(qū)域流轉(zhuǎn)方面的數(shù)據(jù)，都可以作為重要指標幫助我們判斷整體市場走勢。

監(jiān)測預(yù)警平臺也可以對汽車產(chǎn)業(yè)分區(qū)域或分企業(yè)的市場發(fā)展狀態(tài)進行監(jiān)測。比如：將我國的汽車市場分為東北、華北、華東、華南、華中、西部等大區(qū)，對其銷量、環(huán)比、同比、市場占有率等指標進行實時監(jiān)測，全面地掌握整個市場的發(fā)展動態(tài)；汽車企業(yè)作為汽車產(chǎn)業(yè)的重要組成部分，也可以作為監(jiān)測目標，大型汽車集團是產(chǎn)業(yè)發(fā)展的晴雨表，傳統(tǒng)新能源企業(yè)代表了目前產(chǎn)業(yè)新能源的發(fā)展趨勢，而一些“造車新動力”企業(yè)則是未來發(fā)展的變革方向，這些企業(yè)的生產(chǎn)、銷量及產(chǎn)能利用率情況，都是監(jiān)測預(yù)警平臺的重要跟蹤對象，它們能幫助我們從更微觀和更多維的角度掌握汽車產(chǎn)業(yè)發(fā)展過程中的細節(jié)。

除了監(jiān)測，對產(chǎn)業(yè)未來運行狀態(tài)的預(yù)警也是大數(shù)據(jù)平臺的一個重要功能，而準確的預(yù)警系統(tǒng)必不可少的基石便是科學有效的市場預(yù)測模型。預(yù)警系統(tǒng)的重要組成部分首先是完善的數(shù)據(jù)體系，它需要我們掌握宏觀數(shù)據(jù)、汽車數(shù)據(jù)及消費者數(shù)據(jù)；還需要搭建一個科學有效的模型算法作為系統(tǒng)的框架。由這些共同組成的汽車產(chǎn)業(yè)運行狀態(tài)預(yù)警系統(tǒng)將對產(chǎn)業(yè)運行狀態(tài)做出有效預(yù)測，并對可能發(fā)生的情況進行提前預(yù)警，以便讓我們及時調(diào)整政策方向，更高效地促進汽車產(chǎn)業(yè)的發(fā)展。

2.3 產(chǎn)業(yè)決策指揮中心

對大數(shù)據(jù)的分析、監(jiān)測和預(yù)警工作完成后，需要將這些信息轉(zhuǎn)化為能夠促進產(chǎn)業(yè)發(fā)展的決策，數(shù)據(jù)大屏就是這樣一個新型有效的輔助指揮工具。

可視化平臺能夠?qū)⒊橄髲碗s的產(chǎn)業(yè)數(shù)據(jù)進行可視化呈現(xiàn)，而數(shù)據(jù)大屏則是通過其大屏分布來全量展示海量多維的產(chǎn)業(yè)信息，同時，實時更新的后臺數(shù)據(jù)也能在動態(tài)大屏上提供更加高效、準確的反應(yīng)產(chǎn)業(yè)運行狀態(tài)的有效信息。合理運用對大數(shù)據(jù)的監(jiān)測預(yù)警結(jié)果，再使用可視化平臺將其在數(shù)據(jù)大屏上呈現(xiàn)，以此為基礎(chǔ)，便可以構(gòu)建行業(yè)規(guī)劃與發(fā)展指揮中心，決策者可以在指揮中心對數(shù)據(jù)情況進行實時跟蹤，對產(chǎn)業(yè)發(fā)展動態(tài)有更加全面系統(tǒng)的認識，能及時地看到第一手資料并對決策做出適應(yīng)性改進，也避免了消息滯后帶來的決策失誤，引導著汽車產(chǎn)業(yè)朝著更加正確的方向前進。

2.4 移動端數(shù)據(jù)監(jiān)控

動態(tài)數(shù)據(jù)大屏能夠向我們展示豐富及時的數(shù)據(jù)可視化信息，但是數(shù)據(jù)大屏卻不能做到將行業(yè)發(fā)展動態(tài)快速推送到所有行業(yè)從業(yè)者的手中，這樣就導致了消息的滯后性和覆蓋面有限的問題，移動端數(shù)據(jù)監(jiān)控應(yīng)用（APP）便很好地解決了這個問題。

移動端APP 是近幾年新出現(xiàn)的可視化工具，因性能佳、體驗好和易操作而備受行業(yè)青睞。汽車產(chǎn)業(yè)移動端數(shù)據(jù)監(jiān)控平臺也同樣擁有這些優(yōu)勢。數(shù)據(jù)監(jiān)控APP 的重要展示內(nèi)容為各樣數(shù)據(jù)報表，移動端將數(shù)據(jù)展示器作為移動端首頁核心，集中展示汽車市場的銷量、排名、同比、環(huán)比、市場占有率、份額變化等全部數(shù)據(jù)信息，使用者可以看到條理清晰且內(nèi)容豐富的行業(yè)數(shù)據(jù)；儀表看板也是移動端的重要功能，用戶可以瀏覽由平臺推送的豐富的報表內(nèi)容，而這些報表則實現(xiàn)了簡化版的數(shù)據(jù)檢索和查詢，進一步提高了用戶體驗；另外，用戶還可以瀏覽由綜合數(shù)據(jù)應(yīng)用平臺推送的圖表內(nèi)容，這些圖表可以作為動態(tài)分析的工具，支持特定的交互操作，進一步幫助用戶更直觀地了解數(shù)據(jù)分析結(jié)果；除此之外，移動端還可以進行數(shù)據(jù)切換，其首頁儀表板、報表、圖表等所使用和展示的各項數(shù)據(jù)都支持意見切換數(shù)據(jù)口徑，這極大地提高了數(shù)據(jù)分析效率，使得用戶可以根據(jù)自己的需求對數(shù)據(jù)進行切換，滿足多方要求的同時，用戶對汽車市場的廣泛了解也能促進產(chǎn)業(yè)的進一步全面發(fā)展。