算力規(guī)模突破千萬核騰訊云首次公布大數(shù)據(jù)產(chǎn)品全景圖

譚博實(shí)

騰訊云大數(shù)據(jù)技術(shù)已經(jīng)從第1代的離線計(jì)算，第2代的實(shí)時(shí)計(jì)算，第3代的機(jī)器學(xué)習(xí)，發(fā)展到如今以隱私計(jì)算、數(shù)智融合以及云原生為代表的第4代。

近日，騰訊云在首屆大數(shù)據(jù)峰會(huì)上公布，其大數(shù)據(jù)平臺(tái)算力規(guī)模已經(jīng)突破千萬核，日實(shí)時(shí)計(jì)算量達(dá)百萬億級(jí)、日運(yùn)行容器數(shù)超億級(jí)，日計(jì)算數(shù)據(jù)量數(shù)百PB，服務(wù)的企業(yè)客戶數(shù)超2萬家，開源社區(qū)代碼貢獻(xiàn)量超800萬行，進(jìn)一步呈現(xiàn)了自身在大數(shù)據(jù)領(lǐng)域的頂級(jí)實(shí)力。

騰訊云副總裁黃世飛表示，基于全新的技術(shù)架構(gòu)、數(shù)據(jù)治理理念以及產(chǎn)品能力，從底層的大數(shù)據(jù)基礎(chǔ)引擎、中層的一站式大數(shù)據(jù)開發(fā)治理平臺(tái)，再到上層的智能推薦、隱私計(jì)算和BI應(yīng)用，騰訊云已構(gòu)筑了國內(nèi)領(lǐng)先的大數(shù)據(jù)產(chǎn)品矩陣。

深化云原生能力，大數(shù)據(jù)基礎(chǔ)產(chǎn)品開箱即用

大數(shù)據(jù)與云原生技術(shù)的結(jié)合成為解決目前大數(shù)據(jù)技術(shù)門檻高、運(yùn)維部署難度大等問題的最優(yōu)解，企業(yè)在利用大數(shù)據(jù)過程中真正需要的是一套開箱即用的云原生產(chǎn)品服務(wù)。騰訊云大數(shù)據(jù)基于開源開放理念，以及內(nèi)部單集群超萬節(jié)點(diǎn)的大規(guī)模技術(shù)實(shí)踐，沉淀了國內(nèi)領(lǐng)先的企業(yè)級(jí)云原生大數(shù)據(jù)技術(shù)架構(gòu)的構(gòu)建能力。

彈性（MapReduce，EMR）、Elasticsearch Service（ES）、云數(shù)據(jù)倉庫CDW、數(shù)據(jù)湖計(jì)算DLC、流計(jì)算Oceanus、數(shù)據(jù)集成DateInLong等構(gòu)成了騰訊云大數(shù)據(jù)基礎(chǔ)產(chǎn)品的核心引擎。以EMR來說，基于云原生技術(shù)的安全、低成本、高可靠開源大數(shù)據(jù)計(jì)算框架，幫助客戶構(gòu)建可彈性擴(kuò)展的企業(yè)級(jí)大數(shù)據(jù)技術(shù)架構(gòu)，輕松應(yīng)對(duì)PB級(jí)海量數(shù)據(jù)的價(jià)值挖掘挑戰(zhàn)。數(shù)據(jù)湖計(jì)算DLC基于存算分離的產(chǎn)品架構(gòu)，可以實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)統(tǒng)一建設(shè)，幫助用戶敏捷、低成本地管理和分析海量數(shù)據(jù)。

基于全新治理理念，WeData全面升級(jí)

全新升級(jí)的一站式大數(shù)據(jù)開發(fā)治理平臺(tái)WeData，基于業(yè)內(nèi)獨(dú)創(chuàng)的DataOps數(shù)據(jù)開發(fā)模式，通過協(xié)同、效率、一體三大核心優(yōu)勢(shì)，實(shí)現(xiàn)了數(shù)據(jù)集成、數(shù)據(jù)資產(chǎn)、數(shù)據(jù)開發(fā)、數(shù)據(jù)服務(wù)等全方位的數(shù)據(jù)治理能力。憑借其基于開源、簡(jiǎn)單易用、安全穩(wěn)定、降本增效的優(yōu)勢(shì)，騰訊云WeData能幫助企業(yè)大幅提升數(shù)據(jù)管理效率和數(shù)據(jù)質(zhì)量，為業(yè)務(wù)創(chuàng)造價(jià)值，目前已經(jīng)在企業(yè)級(jí)數(shù)據(jù)倉庫構(gòu)建、數(shù)據(jù)資產(chǎn)治理等場(chǎng)景中被廣泛應(yīng)用。

大數(shù)據(jù)和AI融合，實(shí)現(xiàn)數(shù)據(jù)與業(yè)務(wù)閉環(huán)

大數(shù)據(jù)和AI技術(shù)的融合不僅讓大數(shù)據(jù)的運(yùn)維、部署更加智能，還可以打通數(shù)據(jù)和業(yè)務(wù)智能化之間的阻隔，實(shí)現(xiàn)價(jià)值閉環(huán)。騰訊云大數(shù)據(jù)正在加速推進(jìn)和自主研發(fā)的人工智能平臺(tái)Ti-One的緊密結(jié)合，讓經(jīng)過騰訊內(nèi)部海量業(yè)務(wù)訓(xùn)練過的智能化能融入大數(shù)據(jù)業(yè)務(wù)中。新一代智能推薦平臺(tái)采用業(yè)界領(lǐng)先的AI技術(shù)和算法，能夠?yàn)樾畔⒘鞣诸愴撏扑]、短視頻個(gè)性化推薦、信息流猜出喜歡等場(chǎng)景提供強(qiáng)大技術(shù)支撐。

為打破數(shù)據(jù)孤島實(shí)現(xiàn)數(shù)據(jù)協(xié)同，全自研Angel PowerFL隱私計(jì)算框架和首創(chuàng)的基于Spark + MQ的隱私計(jì)算模式，為政務(wù)、金融、廣告營(yíng)銷等眾多行業(yè)提供了數(shù)據(jù)安全保障。憑借該技術(shù)，騰訊云大數(shù)據(jù)團(tuán)隊(duì)連續(xù)兩年獲得iDash世界隱私計(jì)算大賽冠軍，安全性能領(lǐng)冠全球。

同時(shí)，騰訊云大數(shù)據(jù)BI產(chǎn)品，支持騰訊云上各類數(shù)據(jù)源、數(shù)據(jù)處理平臺(tái)快速接入，拖拽式敏捷分析方式，讓非技術(shù)人員可快速構(gòu)建報(bào)表滿足復(fù)雜業(yè)務(wù)分析需求。

值得一提的是，這些公有云上的大數(shù)據(jù)基礎(chǔ)引擎、數(shù)據(jù)開發(fā)治理平臺(tái)、智能推薦、隱私計(jì)算、BI等能力，也可以通過騰訊云大數(shù)據(jù)處理套件TBDS在私有云或非云化環(huán)境等比例獲取。

騰訊云副總裁劉煜宏表示：“未來，騰訊云大數(shù)據(jù)還將在自適應(yīng)計(jì)算架構(gòu)、流批一體的實(shí)時(shí)湖倉、大數(shù)據(jù)‘自動(dòng)駕駛平臺(tái)、云原生大數(shù)據(jù)等方向上進(jìn)一步發(fā)力，攜手合作伙伴，為客戶提供更智能、更安全的大數(shù)據(jù)產(chǎn)品服務(wù)。在更加基礎(chǔ)底層的編譯器領(lǐng)域，我們將深入打造自主可控的數(shù)據(jù)科學(xué)編譯器引擎，為上層的大數(shù)據(jù)產(chǎn)品發(fā)展提供強(qiáng)大的技術(shù)保障。”

本次峰會(huì)上，騰訊云大數(shù)據(jù)還首次對(duì)外宣布“智理無數(shù)，心中有數(shù)”的品牌理念。同時(shí)，為推動(dòng)云原生大數(shù)據(jù)技術(shù)發(fā)展，共建云原生大數(shù)據(jù)生態(tài)，騰訊云聯(lián)合英偉達(dá)、Elastic、StarRocks、Apache Alluxio、SelectDB等多家軟硬件技術(shù)廠商與開源社區(qū)，共同發(fā)起成立云原生大數(shù)據(jù)技術(shù)生態(tài)聯(lián)盟。