在中國信息通信研究院（以下簡稱“中國信通院”）主辦的“2021數(shù)據(jù)資產(chǎn)管理大會”上，中國信通院云計算與大數(shù)據(jù)研究所大數(shù)據(jù)與區(qū)塊鏈部副主任姜春宇對第十三批大數(shù)據(jù)產(chǎn)品能力評測進行了解讀。

大數(shù)據(jù)產(chǎn)品能力評測已經(jīng)走過了7個年頭，歷久彌新，評測體系在不斷進化，體現(xiàn)在幾個方面，一是產(chǎn)品類目不斷擴展，從最初的兩三款產(chǎn)品擴展到了30個產(chǎn)品，覆蓋了大數(shù)據(jù)工具的方方面面；二是評測維度不斷豐富，從基本功能逐步延伸到性能、穩(wěn)定性和安全；三是考核體系更加完備，從單純的考察產(chǎn)品能力向企業(yè)服務能力、知識產(chǎn)權等方向延伸。七年以來，大數(shù)據(jù)產(chǎn)品能力評測體系已經(jīng)成為廠商產(chǎn)品研發(fā)和用戶采購選型的風向標。

上面這組數(shù)字展示了大數(shù)據(jù)產(chǎn)品能力評測取得的成績。截至目前，中國信通院一共進行了13批評測，共計274家企業(yè)參與了評測， 530款產(chǎn)品通過了評測，測試的數(shù)量達到了672款。下圖是近兩年評測的全家福，可以看到大數(shù)據(jù)產(chǎn)品能力評測作為權威的大數(shù)據(jù)評測體系，覆蓋了國內(nèi)大數(shù)據(jù)領域的頭部企業(yè)。

2021年度中國信通院推出了首個穩(wěn)定性評測，開辟了評測的新方向，來自阿里云、京東、智臾的多個產(chǎn)品已經(jīng)完成了測試；同時完成了首批數(shù)據(jù)安全產(chǎn)品能力評測，中國信通院2022年將進一步拓展新的數(shù)據(jù)安全產(chǎn)品評測類型；首次在8192個節(jié)點的環(huán)境下完成了分布式分析型數(shù)據(jù)庫的性能測試，這是目前測試最大規(guī)模的分布式分析型數(shù)據(jù)庫集群。本批產(chǎn)品能力評測數(shù)量繼續(xù)穩(wěn)步增長，共計142款產(chǎn)品通過了測試。

從評測參與度來說，排名前三的企業(yè)分別是阿里云、百度及騰訊云；從評測項目的受歡迎度來看，批處理、聯(lián)邦學習、數(shù)據(jù)管理平臺位列前三，隱私計算產(chǎn)品增長勢頭明顯。

上面兩張圖展示了十三批評測的整體情況，從數(shù)量來看，本批共有140個產(chǎn)品首次通過評測。從企業(yè)分布地域來看，這90家企業(yè)分布于全國15個城市，北京、上海、杭州成為大數(shù)據(jù)企業(yè)聚集地。本批評測中聯(lián)邦學習是最受歡迎的品類，功能和安全一共達到了28次，數(shù)據(jù)管理平臺保持高速發(fā)展，共有14款產(chǎn)品參測。本批參測廠商中，阿里云以7項評測繼續(xù)領跑，金山云緊隨其后，科大訊飛、華為、中移動蘇研、螞蟻并列第三。

上圖總結了歷年大規(guī)模評測的情況，本批共有2個廠商通過大規(guī)模測試，分別是阿里云和華為。其中華為通過了批處理平臺30000+節(jié)點的測試，阿里云通過分布式分析型數(shù)據(jù)庫8192節(jié)點的測試。阿里云、華為、天翼云、浪潮、360、新華三、南大通用、電科云、科大訊飛、亞信等企業(yè)參與到大規(guī)模的評測中，節(jié)點規(guī)模的增長標志我國大數(shù)據(jù)產(chǎn)品在智能管理和容災能力上的巨大突破。

中國信通院長期放眼國際，推動自主基準和工具的研發(fā)，自研了系列測試工具DataBench，從2019年以來已經(jīng)聯(lián)合各行業(yè)用戶自研了五款性能測試工具，涵蓋工業(yè)、金融、電信等場景，推出了性能、穩(wěn)定性測試基準，致力于提供貼合實際業(yè)務、規(guī)范化、本地化的測試服務。累計完成近40次性能及穩(wěn)定性測試，其中事務數(shù)據(jù)庫性能測試廣受歡迎，已經(jīng)完成了18款產(chǎn)品的測試。未來我們將開源這些工具，為廣大用戶提供選型工具。

2021年9月1日，數(shù)據(jù)安全法正式實施，數(shù)據(jù)安全成為全行業(yè)關注焦點。數(shù)據(jù)安全產(chǎn)品的產(chǎn)品能力如何，決定了企業(yè)數(shù)據(jù)安全能力的基礎是否牢靠。下半年我們推出了首批數(shù)據(jù)安全產(chǎn)品評測，新增數(shù)據(jù)分類分級工具和數(shù)據(jù)審計工具，已經(jīng)有星環(huán)、億賽通等多家企業(yè)通過評測。2022年中國信通院將進一步完善數(shù)據(jù)安全產(chǎn)品體系，為用戶選型數(shù)據(jù)安全產(chǎn)品提供更多參考。

優(yōu)秀的產(chǎn)品并不等同于成功的項目，在整個大數(shù)據(jù)項目實施的過程中，企業(yè)的咨詢和實施的能力同樣非常重要。為此，中國信通院推出了大數(shù)據(jù)服務能力評估體系，其中，大數(shù)據(jù)服務商包括平臺建設、數(shù)據(jù)治理和應用開發(fā)這三個維度，而數(shù)據(jù)庫的方向包括規(guī)劃的設計能力、實施運維能力、運營運維能力和應用遷移能力這四個方向。分別從流程、人員以及技術工具這三個維度來評價整個數(shù)據(jù)庫和大數(shù)據(jù)服務商的能力。一經(jīng)推出廣受好評，多家大數(shù)據(jù)領域服務商參與評測。

第三批的大數(shù)據(jù)服務商能力的評估結果和整體情況如下，共計四家企業(yè)通過了六項評估，上海電信工程通過了應用開發(fā)能力評估達到第三級，京東科技通過了數(shù)據(jù)庫服務商的規(guī)劃設計、實施部署和運營運維這三項，其中運維運營能力達到第三級。而騰訊云、中移蘇研通過了我們數(shù)據(jù)庫運營運維能力的評估達到第三級。

上圖是中國信通院整個大數(shù)據(jù)服務商能力評估情況的總覽，可以看到，大數(shù)據(jù)服務商整體都在三級和四級之間，較為平均。而數(shù)據(jù)庫服務能力差異比較大，二級到三、四、五級均有企業(yè)分布，說明數(shù)據(jù)庫領域服務能力差距很大，亟需進一步提升。

本次評測的十大觀察：

觀察一：產(chǎn)品能力差異逐漸擴大。本批可選項整體通過率為59.92%，其中可選項通過率低于50%的產(chǎn)品占35.56%，通過率為100%的占比為24.44%，通過率在50~100%之間的約為40%。不同類型產(chǎn)品的可選項通過率方面，可以看到數(shù)據(jù)庫類產(chǎn)品的通過率為50.23%、批處理平臺類為43.33%、數(shù)據(jù)分析應用為77.72%。右下角的圖片展示了不同項目的通過率，整體來看，參測產(chǎn)品能力兩極分化比較嚴重。

觀察二：大數(shù)據(jù)平臺逐漸成熟、實時計算需求突出。這幾批批處理平臺測試數(shù)量是先達到頂峰再下降的，側(cè)面反映出批處理平臺技術逐漸成熟。流計算的實時處理平臺通過的產(chǎn)品數(shù)量在逐漸增加，反應出流計算技術持續(xù)發(fā)展，同時實時計算需求不斷增強，從事這方面產(chǎn)品研發(fā)的企業(yè)數(shù)量越來越多。

觀察三：海量異構數(shù)據(jù)處理需求推動數(shù)據(jù)存儲技術發(fā)展。除關系型數(shù)據(jù)庫以外，非關系型的數(shù)據(jù)庫及其他類型存儲的產(chǎn)品測試數(shù)量在穩(wěn)定增長，在第13批已經(jīng)累計超過了20款產(chǎn)品，以圖數(shù)據(jù)庫、鍵值數(shù)據(jù)庫為代表的新型數(shù)據(jù)庫產(chǎn)品解決了非結構化數(shù)據(jù)的存儲需求。同時，數(shù)據(jù)湖、多模數(shù)據(jù)庫等技術逐步落地，使得一套系統(tǒng)存儲海量不同數(shù)據(jù)成為可能。

觀察四：融合成為大數(shù)據(jù)技術發(fā)展的重要特征。這里面有兩個典型的方向，一是批流融合，越來越的產(chǎn)品既通過了流計算的評測，也通過了批處理評測，同時具備批流的能力。二是TA融合，很多數(shù)據(jù)庫產(chǎn)品同時通過了事務型數(shù)據(jù)庫的評測和分析型數(shù)據(jù)庫的評測，同時具備AP和TP處理能力。

觀察五：隱私計算技術發(fā)展火熱，市場迎來爆發(fā)期。據(jù)統(tǒng)計，國內(nèi)隱私計算相關企業(yè)已經(jīng)達到88家，上線產(chǎn)品已經(jīng)超過100款。此外，隱私計算技術的落地趨勢明顯，隨著政策、社會、產(chǎn)業(yè)環(huán)境進一步優(yōu)化，與去年相比，更多的產(chǎn)品從研發(fā)階段推進了試點和實施的階段。

觀察六：中小企業(yè)深耕細分領域、差異化發(fā)展。中小企業(yè)已經(jīng)成為大數(shù)據(jù)領域新興技術分支不可忽視的力量，尤其在數(shù)據(jù)安全、數(shù)據(jù)庫等細分領域，中小企業(yè)重點發(fā)力，依靠自己專業(yè)的技術和市場能力，為自己在大數(shù)據(jù)產(chǎn)業(yè)贏得一席之地。

觀察七：大數(shù)據(jù)技術推廣的十大重點行業(yè)。我們統(tǒng)計了大數(shù)據(jù)應用比較深入的十大行業(yè)，上圖可見整體的分布?？梢钥吹浇鹑?、政務和電信是目前大數(shù)據(jù)技術應用比較深入的，緊隨其后的是醫(yī)療、制造和互聯(lián)網(wǎng)行業(yè)。關于各行業(yè)占企業(yè)整體收入占比，可以看到軍工行業(yè)占大數(shù)據(jù)企業(yè)營收比例最高，達50%以上，金融、醫(yī)療和電信行業(yè)營收占比約為40%。

觀察八：智能化、云原生成為大數(shù)據(jù)產(chǎn)業(yè)未來發(fā)展的主要方向。中國信通院調(diào)研分析了本批參測產(chǎn)品未來的技術發(fā)展方向，從發(fā)展趨勢來看，大數(shù)據(jù)技術最明顯的兩個方向是智能化和云原生。智能化方向的趨勢具體包括智能監(jiān)控告警、自動底層優(yōu)化、智能數(shù)據(jù)分布及跨集群資源調(diào)度等。云原生方向的趨勢有微服務、Serverless、容器化、Devops等?？偟膩砜?，未來大數(shù)據(jù)技術將致力于為客戶提供更加高效的、低成本、自動化的數(shù)據(jù)服務。

觀察九：整個數(shù)據(jù)庫產(chǎn)品包括大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展離不開自己的性能標準。中國信通院Databench性能測試工具已經(jīng)完成了17款的產(chǎn)品性能測試，已經(jīng)成為了國內(nèi)最受歡迎的性能測試的工具。本年度的分布式事務型數(shù)據(jù)庫性能測試結果如下圖。中國信通院未來將繼續(xù)開發(fā)針對更多大數(shù)據(jù)產(chǎn)品的測試工具并逐步開源現(xiàn)有的測試工具。

觀察十：穩(wěn)定性成為未來分布式系統(tǒng)建設的重點。上圖是中國信通院本批測試的一些統(tǒng)計。左邊是不同類型擾動下性能下降比例，可以看到網(wǎng)絡問題對分布式數(shù)據(jù)庫性能影響最大，平均下降約40.02%左右。數(shù)據(jù)處理類產(chǎn)品對網(wǎng)絡干擾更加敏感，性能平均下降49.13%。右圖是不同類型產(chǎn)品在綜合擾動下性能下降的比例，可以看到高強度擾動相較于低強度擾動，性能平均下降20.45%。不同類別的分布式系統(tǒng)對擾動的敏感程度不同，分布式時序數(shù)據(jù)庫最為明顯，下降約49.37%。這是本批穩(wěn)定性測試的基本情況。

為進一步匯聚行業(yè)資源，推動評測服務數(shù)字化轉(zhuǎn)型，為企業(yè)和用戶提供交流平臺?？尚糯髷?shù)據(jù)網(wǎng)站已經(jīng)上線，可以通過訪問網(wǎng)站查看最新的活動新聞和研究進展（網(wǎng)址見上圖）。未來我們也將持續(xù)對網(wǎng)站進行迭代和更新，同時進行小程序的開發(fā)，串聯(lián)產(chǎn)業(yè)上下游，推動大數(shù)據(jù)產(chǎn)業(yè)發(fā)展。

未來我們會堅定的圍繞著數(shù)據(jù)基礎設施夯實企業(yè)的數(shù)據(jù)基礎設施這一目標，圍繞它來開展我們的標準研發(fā)，包括提供在線化、數(shù)字化、場景化的測試服務。同時在數(shù)據(jù)安全、穩(wěn)定性能，應用解決方案這些方面繼續(xù)發(fā)力，構建一個更加完善的大數(shù)據(jù)產(chǎn)品的能力評測體系，為大數(shù)據(jù)產(chǎn)業(yè)夯實基礎。

眾行者遠，中國信通院云計算與大數(shù)據(jù)研究所的工作離不開產(chǎn)業(yè)的共同努力。歡迎大家加入大數(shù)據(jù)技術標準推進委員會，一同交流學習，進行思想的碰撞，共同推動我國大數(shù)據(jù)產(chǎn)業(yè)發(fā)展。

億聯(lián)云提供全球網(wǎng)絡優(yōu)化服務、MPLS VPN、企業(yè)私有云&混合云搭建方案、云專線、SD-WAN、跨國視頻會議、跨境電商直播等相關應用場景，如有任何疑問，歡迎致電010-53390328！