3月30日,2021(第七屆)中國國際大數(shù)據(jù)大會在北京成功召開。500多位大數(shù)據(jù)行業(yè)嘉賓齊聚一堂,圍繞“數(shù)字筑基 智見未來”主題,研討數(shù)字經(jīng)濟(jì)時代,數(shù)字轉(zhuǎn)型的難點與路徑;共探“十四五”時期,大數(shù)據(jù)發(fā)展趨勢與新機(jī)遇!
華為云中國區(qū)副總裁胡維琦受邀出席大會并發(fā)表 “開發(fā)數(shù)據(jù)商業(yè)價值,助力政企數(shù)據(jù)資產(chǎn)化”主題演講。同時,華為云數(shù)據(jù)使能DAYU服務(wù)中的FusionInsight MRS云原生數(shù)據(jù)湖、Data Lake Insight DLI數(shù)據(jù)湖探索分別榮獲“2020年度大數(shù)據(jù)行業(yè)優(yōu)秀解決方案”獎、 “2020年度大數(shù)據(jù)行業(yè)創(chuàng)新產(chǎn)品”獎,這是業(yè)界對華為在大數(shù)據(jù)領(lǐng)域持續(xù)技術(shù)創(chuàng)新、實踐應(yīng)用等方面成績的再度肯定。
圖 華為云獲2020年度大數(shù)據(jù)行業(yè)獎項
開發(fā)數(shù)據(jù)商業(yè)價值,助力政企數(shù)據(jù)資產(chǎn)化
華為云中國區(qū)副總裁胡維琦女士在大會主題演講中提到,“數(shù)據(jù)發(fā)展重心逐步從關(guān)鍵技術(shù)向生產(chǎn)要素演進(jìn),在這個過程中,數(shù)據(jù)資產(chǎn)化并安全流通是商業(yè)新機(jī)遇。華為云數(shù)據(jù)使能DAYU服務(wù),助力政企加速把數(shù)據(jù)資源加工為數(shù)據(jù)資產(chǎn),讓數(shù)據(jù)像清潔的水電一樣為政企使用,為數(shù)據(jù)成為整個社會的生產(chǎn)要素打下堅實的基礎(chǔ)?!?/span>
圖 華為云中國區(qū)副總裁胡維琦做主題發(fā)言
在工業(yè)大數(shù)據(jù)論壇中,華為云專家表示,“工業(yè)數(shù)字化轉(zhuǎn)型已是全球共識。從我們的實踐看來,工業(yè)數(shù)字化轉(zhuǎn)型的關(guān)鍵在于打通信息物理系統(tǒng),構(gòu)筑IT和OT數(shù)據(jù)融合的工業(yè)互聯(lián)網(wǎng)平臺,用AI加持,逐步使能智能制造再升級。“
華為云FusionInsightMRS云原生數(shù)據(jù)湖斬獲“大數(shù)據(jù)行業(yè)優(yōu)秀解決方案獎”
華為云FusionInsight MRS云原生數(shù)據(jù)湖,一個架構(gòu)可持續(xù)演進(jìn),構(gòu)建離線、實時、邏輯三種數(shù)據(jù)湖,助力客戶釋放海量數(shù)據(jù)價值,讓業(yè)務(wù)洞見更準(zhǔn),價值兌現(xiàn)更快。
l 離線數(shù)據(jù)湖:HetuEngine提供秒級交互式查詢能力,數(shù)據(jù)不出湖,分析鏈路短,性能比Impala快30%+,分析提效10倍+;DLC提供統(tǒng)一的元數(shù)據(jù),數(shù)據(jù)全局可視; HetuEngine提供湖內(nèi)統(tǒng)一SQL接口:HDFS、Hive、Hbase、ES等,簡化用數(shù)。
l 實時數(shù)據(jù)湖:流處理 + Hudi實現(xiàn)數(shù)據(jù)增量更新入湖,從T+1到T+0; ClickHouse提供毫秒級實時OLAP分析能力;Flink提供FlinkSQL能力,批流SQL接口統(tǒng)一,實現(xiàn)流批一體。
l 邏輯數(shù)據(jù)湖:HetuEngine提供跨湖、跨倉、跨云統(tǒng)一訪問,減少數(shù)據(jù)搬遷,數(shù)據(jù)高效流動,全域數(shù)據(jù)秒級協(xié)同分析秒級響應(yīng),業(yè)務(wù)上線效率提升10倍,由“周級”縮短至“天級”。
華為云DLI數(shù)據(jù)湖探索斬獲“大數(shù)據(jù)行業(yè)創(chuàng)新產(chǎn)品獎”
華為云數(shù)據(jù)湖探索(Data Lake Insight,簡稱DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Presto)生態(tài),提供一站式的流處理、批處理、交互式分析的Serverless融合處理分析服務(wù)。 企業(yè)使用標(biāo)準(zhǔn)SQL、Spark、Flink程序就可輕松完成多數(shù)據(jù)源的聯(lián)合計算分析,挖掘和探索數(shù)據(jù)價值。
1) 融合數(shù)據(jù)湖:一站式的實時分析、離線分析、交互式分析的Serverless融合處理分析服務(wù)
? 實時分析:Flink提供FlinkSQL能力,批流SQL接口統(tǒng)一,實現(xiàn)流批一體。
? 離線分析:深度優(yōu)化的Spark內(nèi)核,在TPC-DS標(biāo)準(zhǔn)套場景下性能比開源版本快50%+。
? 交互式分析: openLooKeng提供秒級交互式查詢能力,性能比Impala快30%+。
2) 容器加持:基于Kubernetes的容器管理技術(shù),滿足用戶擴(kuò)縮容和AI分析需求
? 自動擴(kuò)縮容:根據(jù)業(yè)務(wù)負(fù)載,對計算資源進(jìn)行預(yù)估和自動擴(kuò)縮容。
? 自定義鏡像:支持運行Kubernetes生態(tài)的用戶自定義鏡像,便于用戶快速構(gòu)建基于行業(yè)庫的數(shù)據(jù)分析能力。
3) 跨源分析:支持跨源統(tǒng)一訪問,數(shù)據(jù)虛擬入湖,邏輯統(tǒng)一訪問,免數(shù)據(jù)搬遷
? 跨源訪問: 支持多種數(shù)據(jù)格式,云上多種數(shù)據(jù)源、ECS自建數(shù)據(jù)庫以及線下數(shù)據(jù)庫,數(shù)據(jù)無需搬遷,即可實現(xiàn)對云上多個數(shù)據(jù)源進(jìn)行分析,構(gòu)建企業(yè)的統(tǒng)一視圖,幫助企業(yè)快速完成業(yè)務(wù)創(chuàng)新和數(shù)據(jù)價值探索
? 算子下推:將算子下推到數(shù)據(jù)源進(jìn)行計算獲取到更好的性能,減少跨源分析時經(jīng)過網(wǎng)絡(luò)的數(shù)據(jù)量