杭州2022年8月2日 /美通社/ -- 近(jin)日，中(zhong)(zhong)國信(xin)息通信(xin)研究院(yuan)（以下簡稱(cheng)"中(zhong)(zhong)國信(xin)通院(yuan)"）公(gong)布了第十四批大(da)數據產品(pin)能(neng)力評(ping)測(ce)結(jie)果。大(da)華(hua)股份大(da)數據平臺，經過(guo)評(ping)審專家資料(liao)審核(he)(he)、測(ce)試(shi)報告(gao)審核(he)(he)、質(zhi)詢與答疑(yi)、集中(zhong)(zhong)評(ping)議的(de)層(ceng)(ceng)層(ceng)(ceng)專業評(ping)測(ce)，最終獲得(de)中(zhong)(zhong)國信(xin)通院(yuan)"可信(xin)大(da)數據"評(ping)估評(ping)測(ce)證(zheng)書，是業界首家通過(guo)中(zhong)(zhong)國信(xin)通院(yuan)"分(fen)布式批處理大(da)規(gui)模穩定性"資質(zhi)認證(zheng)的(de)產品(pin)。

評測(ce)過程中，大(da)(da)(da)華大(da)(da)(da)數(shu)(shu)據(ju)平臺在(zai)(zai)7048節點(dian)大(da)(da)(da)集群規模(mo)下(xia)進行測(ce)試，單次查詢10000億+條(tiao)數(shu)(shu)據(ju)，測(ce)試覆(fu)蓋17種(zhong)常(chang)(chang)見業(ye)務場景，7x24小(xiao)時持續(xu)觸發專項(xiang)異常(chang)(chang)評測(ce)項(xiang)，業(ye)務穩(wen)定(ding)運行無中斷，系統可容忍CPU、磁盤(pan)、內存(cun)、網絡等10大(da)(da)(da)類異常(chang)(chang)情況，在(zai)(zai)持續(xu)異常(chang)(chang)測(ce)試中，業(ye)務查詢時間(jian)抖動(dong)＜5%， 通過分布式批(pi)處理(li)大(da)(da)(da)規模(mo)穩(wen)定(ding)性專項(xiang)測(ce)試，顯示出大(da)(da)(da)華大(da)(da)(da)數(shu)(shu)據(ju)平臺具備解決大(da)(da)(da)規模(mo)分布式系統擴展、性能、容災等穩(wen)定(ding)性問(wen)題的(de)能力。

同時(shi)，大(da)華大(da)數據平臺憑借穩(wen)定(ding)性評估的(de)(de)優異表現，獲得(de)中國信通院云計算(suan)與(yu)大(da)數據研究所的(de)(de)頒(ban)發(fa)的(de)(de)"穩(wen)定(ding)性實踐先鋒"的(de)(de)授牌。

大華大數(shu)(shu)(shu)據(ju)(ju)(ju)平(ping)臺（HDP）定位于(yu)(yu)數(shu)(shu)(shu)據(ju)(ju)(ju)智(zhi)(zhi)(zhi)能引擎的統一(yi)核心數(shu)(shu)(shu)據(ju)(ju)(ju)底(di)座，基于(yu)(yu)云原生自主可信(xin)，提(ti)供包含海量視圖數(shu)(shu)(shu)據(ju)(ju)(ju)存儲、物聯感(gan)知數(shu)(shu)(shu)據(ju)(ju)(ju)離線(xian)批(pi)處理、視頻流(liu)任務實(shi)(shi)時(shi)分析能力(li)等(deng)(deng)一(yi)站式智(zhi)(zhi)(zhi)慧物聯大數(shu)(shu)(shu)據(ju)(ju)(ju)平(ping)臺能力(li)，廣泛應用(yong)于(yu)(yu)城市、交通、教(jiao)育、能源、金融等(deng)(deng)行業，賦能千行百業數(shu)(shu)(shu)智(zhi)(zhi)(zhi)化轉型。大華大數(shu)(shu)(shu)據(ju)(ju)(ju)平(ping)臺，在計(ji)(ji)算(suan)和存儲的大規模技術(shu)能力(li)已(yi)具備萬臺節(jie)點規模集群下長周期系統性穩定運(yun)行，全流(liu)程打通實(shi)(shi)現yarn on k8s，支(zhi)持動態資源彈性擴縮(suo)，讓(rang)業務更(geng)敏捷，讓(rang)計(ji)(ji)算(suan)更(geng)高效，實(shi)(shi)現普惠數(shu)(shu)(shu)據(ju)(ju)(ju)價值。其具有如下優(you)勢：

擁抱開源，降低使用門檻

基于業(ye)界主流(liu)開(kai)源技術，大華(hua)大數據(ju)平(ping)(ping)(ping)臺(tai)經過深(shen)度自研，平(ping)(ping)(ping)臺(tai)全面兼(jian)容Hadoop2.X/3.X，并涵(han)蓋Hdfs、Yarn、Hbase、Hive、ZooKeeper、Spark等20+個組件，為客戶(hu)提供高(gao)性能、低成本、靈活易用(yong)的(de)全棧大數據(ju)平(ping)(ping)(ping)臺(tai)。

融入云原生，優化資源效能

平(ping)臺(tai)基(ji)于k8s基(ji)本架構，對全局資源進行監(jian)控、運維、分析，從(cong)而(er)更合理與充分利用集群計算資源。平(ping)臺(tai)全流程打(da)通實現yarn on k8s，支持動(dong)態資源擴縮，讓資源調度計算更加(jia)高(gao)效。

異構融合，挖掘數據價值

平(ping)臺將視頻圖像分為非結構化(hua)(hua)數(shu)(shu)據(ju)(ju)(ju)和(he)結構化(hua)(hua)數(shu)(shu)據(ju)(ju)(ju)，采(cai)用統一元數(shu)(shu)據(ju)(ju)(ju)管理(li)，構建(jian)(jian)邏輯數(shu)(shu)據(ju)(ju)(ju)湖，在數(shu)(shu)據(ju)(ju)(ju)不入湖的前提下，實現跨多種數(shu)(shu)據(ju)(ju)(ju)源(yuan)的聯合查詢計(ji)(ji)算(suan)，并支持對接多種計(ji)(ji)算(suan)引擎，打破數(shu)(shu)據(ju)(ju)(ju)孤(gu)島，進一步(bu)挖掘業務價值(zhi)。基于異構計(ji)(ji)算(suan)框架，貫通(tong)數(shu)(shu)據(ju)(ju)(ju)融合存儲統一應用，結合智能(neng)計(ji)(ji)算(suan)和(he)數(shu)(shu)據(ju)(ju)(ju)計(ji)(ji)算(suan)構建(jian)(jian)業務模型，讓數(shu)(shu)據(ju)(ju)(ju)計(ji)(ji)算(suan)創造價值(zhi)，輔(fu)助業務向(xiang)縱深發展。

智能計算框架，提升計算性能

平臺提供離線，實時(shi)、流式等多種計算(suan)框架，支持行業大規模節(jie)點高復雜業務(wu)計算(suan)場景閉環，兼(jian)顧(gu)數(shu)(shu)據大規模以及實時(shi)性(xing)，提升(sheng)數(shu)(shu)據計算(suan)效率，使得數(shu)(shu)據分析結(jie)果可以更高效迅速的(de)展現出來。計算(suan)框架深度融合GPU能(neng)力調度計算(suan)，AI診斷流式/批處理任務(wu)業務(wu)，提升(sheng)任務(wu)最優資源(yuan)參數(shu)(shu)，數(shu)(shu)據庫執行性(xing)能(neng)全面(mian)提升(sheng)。

多重機制，保障數據安全

管理平(ping)臺集成kerberos與ranger組件，保障集群(qun)環境認證統(tong)一及(ji)用(yong)戶權(quan)限(xian)精細(xi)，SQL任(ren)務權(quan)限(xian)管理精細(xi)可(ke)(ke)控，提升(sheng)數據(ju)安全(quan)可(ke)(ke)信可(ke)(ke)靠。此外，平(ping)臺從(cong)冗(rong)余結(jie)構(gou)、數據(ju)備(bei)份(fen)、故障預警等方面考慮，健全(quan)完善多層級(ji)容災系統(tong)結(jie)構(gou)設計(ji)，提高(gao)數據(ju)的(de)持續可(ke)(ke)用(yong)性，保障平(ping)臺穩(wen)定運行(xing)。

圍繞"Dahua Think# 云聯(lian)萬物 數(shu)(shu)(shu)智(zhi)未來(lai)"戰(zhan)略，大(da)(da)華股份(fen)將"以數(shu)(shu)(shu)據(ju)(ju)為基礎，以業(ye)務(wu)(wu)(wu)為牽引(yin)"，依(yi)托自身大(da)(da)數(shu)(shu)(shu)據(ju)(ju)能(neng)力和(he)技(ji)(ji)術(shu)(shu)優(you)勢，結(jie)合千行(xing)百業(ye)數(shu)(shu)(shu)智(zhi)解決方(fang)案業(ye)務(wu)(wu)(wu)沉淀，持續(xu)聚焦數(shu)(shu)(shu)據(ju)(ju)智(zhi)能(neng)能(neng)力建設(she)和(he)數(shu)(shu)(shu)據(ju)(ju)安全隱(yin)私保護，積極推(tui)動大(da)(da)數(shu)(shu)(shu)據(ju)(ju)技(ji)(ji)術(shu)(shu)與實體經(jing)濟深度融合，讓(rang)數(shu)(shu)(shu)據(ju)(ju)驅動業(ye)務(wu)(wu)(wu)創新(xin)，賦能(neng)千行(xing)百業(ye)數(shu)(shu)(shu)智(zhi)化(hua)轉型。