11月3日，《IDC MarketScape： 中國大數據管理平臺廠商評估，2020》報告新鮮出爐，這如同中國大數據技術創(chuàng)新與市場競爭格局的晴雨表，從中可以一窺在2020年這樣一個特殊的年份，中國大數據市場的發(fā)展與變化。

沒有懸念的是，華為云延續(xù)了自2017年以來在IDC MarketScape中國大數據管理平臺廠商評估報告中的優(yōu)勢地位，在最新的2020年報告中仍舊位居領導者象限的領先位置，并且在“市場份額和技術實力”兩大維度上保持領先。

這份大數據報告中究竟藏著哪些乾坤？讓我們逐一解讀……

大數據市場格局的變與不變

眾所周知，報告主要對活躍在中國市場上的主流大數據廠商從能力、戰(zhàn)略、市場份額三個維度進行全面評估。Y軸體現的是一個廠商的綜合能力，集中表現在企業(yè)的產品基本功能、市場表現、團隊技術實力、產品生態(tài)等方面；X軸則反應了廠商戰(zhàn)略信息，包括產品戰(zhàn)略、業(yè)務戰(zhàn)略等；象限中那些五顏六色的氣泡則直觀地體現了各廠商在大數據市場的份額。

如此一來，整個IDC MarketScape報告各個象限的含義，以及各廠商的位置就一目了然了。相比往年比較分散的市場格局，進入2020年報告的所有廠商都密集分布在“領導者（Leaders）”和“主要玩家（Major Players）”這兩個象限中，而且彼此之間的距離非常接近。這說明，各廠商在大數據產品上都下了大力氣，整體技術水平和創(chuàng)新能力提升較快，市場競爭也越來越激烈。

進入報告的廠商，包括AWS、阿里云、Cloudera、華為云、騰訊云（按字母順序，不分先后）等為代表的廠商在報告中處于靠前的位置，引領著整個大數據市場的持續(xù)發(fā)展。強者恒強，在2020年的報告中，華為云進一步鞏固了原有的領先地位，是無可爭議的行業(yè)領頭羊。但是我們也注意到了今年報告的差異之處，比如，以Cloudera和Kyligence為代表的專業(yè)大數據廠商躍升速度很快，比如Kyligence今年首次入榜便一舉進入“主要玩家”象限。這說明在大數據領域，技術和理念創(chuàng)新始終是市場和企業(yè)前進最大的動力。

能力、戰(zhàn)略、市場

升維思考，降維做事

在報告中，IDC著重談及了這樣一項深刻洞察：在當前的大數據市場上，技術創(chuàng)新的速度領先于市場需求的速度。具體而言，技術提供商在理念和產品上不斷推陳出新，而行業(yè)用戶仍舊在應用分析如何入門的門檻上掙扎。因此造成技術提供能力與用戶需求之間、用戶內部業(yè)務部門與IT 部門之間都存在脫節(jié)，甚至面臨技術鴻溝。在這樣的背景下，一方面需要理清大數據落地的現狀、挑戰(zhàn)，為行業(yè)用戶實現數字化轉型提供參考；另一方面，行業(yè)用戶在選擇大數據技術和解決方案供應商時則要更加慎重，兼具領先的技術創(chuàng)新能力和豐富行業(yè)實踐的供應商才是理想之選。華為云FusionInsight之所以能夠穩(wěn)居IDC MarketScape中國大數據管理平臺廠商評估報告的領導者象限并引領大數據發(fā)展，就是因為具備了這種能力和積淀。

我們就沿用IDC報告的評估標準，從能力、戰(zhàn)略、市場三個維度為華為大數據的綜合實力畫個像吧。

首先看技術和產品能力。華為云FusionInsight智能數據湖圍繞數據采、存、算、管、用全生命周期管理，是華為云三大使能之數據使能方案的堅實數據底座，其主要包含MRS大數據、DWS數據倉庫、數據湖治理中心等云服務，助力政企客戶實現一企一湖、一城一湖！

在強大技術能力的支撐下，華為云FusionInsight具備3項硬核能力：

1、讓政企客戶在一個大、快、融、穩(wěn)的數據湖架構下可持續(xù)演進：

1） 大：傳統(tǒng)大數據單集群擴容到2000節(jié)點就受限，難以突破。華為云FusionInsight MRS支持2萬＋大規(guī)模單集群，突破擴展性瓶頸！同時還可實現集群聯(lián)邦，無限擴容，讓政企客戶在一個架構下持續(xù)演進，無需全新重構。大規(guī)模特性已在華為內部實踐。華為集團IT OneData一萬節(jié)點大集群歷經兩次滾動升級，業(yè)務0中斷，已穩(wěn)定運行六年，華為云FusionInsight使客戶的業(yè)務系統(tǒng)穩(wěn)如磐石，10年無憂！

2） 快：傳統(tǒng)大數據存在分析鏈路長，以T＋1事后報表為主。華為云FusionInsight MRS 可以T＋0實時增量更新和OLAP分析，讓大數據越用越”快“！

3） 融：傳統(tǒng)大數據分析面臨門檻高、協(xié)同難等問題。華為云FusionInsight MRS通過HetuEngine打破地域限制，實現統(tǒng)一SQL，全民BI，讓大數據越用越”容易“！

4） 穩(wěn)：傳統(tǒng)大數據運維面臨集群多、升級難等問題。華為云FusionInsight MRS可在線滾動升級，無需拆集群、搬應用，業(yè)務永不停，技術永最新，服務永在線，讓客戶業(yè)務系統(tǒng)穩(wěn)如磐石！

5） 實時數據湖：傳統(tǒng)數據湖雖可存儲多樣化數據，但仍缺少一些關鍵能力，比如不支持實時增量更新，不支持事務，無法實時OLAP等。華為云FusionInsight支持數據實時批量入湖、實時增量同步，全量數據供應效率實現T＋0；支持貼源數據實時多維分析，縮短分析鏈路，走向實時數據湖，讓數據價值近在眼前！

6） 云原生數據湖：具有統(tǒng)一的元數據目錄和存算分離等特性。通過統(tǒng)一數據湖目錄，讓大數據全局可視；通過存算分離，采用企業(yè)級EC，最低1．2副本，使TCO降低20％＋，讓大數據越用越”省“！通過高帶寬大并發(fā)，同成本集群的數據讀寫性能領先業(yè)界30％；通過AI容器提升了在科學計算、機器學習和AI推理的資源利用率。

2、DWS數據倉庫：基于分布式架構持續(xù)演進，構筑下一代開放的、全場景分析型數據庫，其核心能力如下：

1）大規(guī)模擴展性：基于分布式架構，突破大規(guī)模分布式場景下集群通信（Multi－Streams）、邏輯集群（Multi－Groups）技術，具備2048節(jié)點擴展能力；

2）極致性能：具備多層級全并行計算引擎，可調度海量的算力資源，通過高效的指令效率，實現數據導入快、分析快；

3）穩(wěn)定可靠：具備硬件和軟件的多層級備份、全方位的故障檢測，實現數據無憂，業(yè)務持續(xù)可用最后，離線擴容、半在線擴容、在線擴容技術能夠從容應對客戶不同的擴容需求。

3、數據治理：一站式數據湖治理中心，助力企業(yè)快速構建從數據接入到數據分析的E2E數據治理體系，消除數據孤島，統(tǒng)一數據標準，加速數據資產化和企業(yè)的數字化轉型。

1）通過全域數據視圖統(tǒng)一信息架構，統(tǒng)一數據標準，數據指標，實現數據分層，數據建模；

2）通過一站式全棧平臺實現30＋異構數據源的高效數據集成，SQL＆Spark＆MR等多種數據開發(fā)，無需編碼極簡數據開放，一鍵導入導出完整數據模型實現數據資產的快速復制；

3）擁有開放完備的安全體系，數據分級分類，統(tǒng)一安全認證。

截至目前，華為云FusionInsight持續(xù)投入，擁有10年＋豐富經驗的大數據內核團隊，已獲取專利500＋，具有30＋PMC＆Committer大數據專家，與世界同行，做好數字世界的黑土地。同時堅定開放路線，為開發(fā)者、客戶和伙伴開放了CarbonData 和openLooKeng。華為云FusionInsight堅持將好的經驗，持續(xù)在華為云大數據社區(qū)上為伙伴和客戶開放，共建社區(qū)繁榮生態(tài)！可見華為云大數據勇攀技術高峰的決心！

其次看市場地位。從每一筆訂單的簽訂到每一個項目的落地，再到每一位客戶的成功，華為云大數據就是在這樣一點一滴的積累中逐步擴大著市場領先優(yōu)勢。

IDC的統(tǒng)計數據顯示，2020年，中國大數據技術與服務市場收益前三的行業(yè)是金融、政府和運營商，三者總和占中國大數據整體市場的50％以上；同樣具有海量數據的互聯(lián)網、視頻直播、跨境電商等客戶，也逐漸認可并采購華為云大數據相關產品。華為云大數據落地成功也集中體現在這些領域。舉例來說，在金融行業(yè)，中國50％的TOP20金融客戶均已使用華為云FusionInsight構建其大數據平臺，在某行構建金融數據湖，實現一份數據全局可用，免除數據搬遷，提升業(yè)務協(xié)同效率10倍，存儲周期提升2倍，資源利用率最大可達90％，同時利用大數據＋AI實現了金融行業(yè)的實時風控功能，從事前風控轉變?yōu)槭轮袛r截風險交易，已挽回損失數億元；在政府行業(yè)，華為云FusionInsight承載了國內70％的平安城市建設，50％的智慧城市、數字城市建設。由于今年突發(fā)疫情，華為云FusionInsight結合行業(yè)積累經驗，僅用20＋天實現全國陸續(xù)上線疫情防控大數據平臺，上線后在某市，從3000萬人口中秒級找到疑似人群，高效的支撐了全國新冠肺炎疫情防控工作；在運營商行業(yè)，中國三大運營商均使用華為云FusionInsight構建數據平臺，廣東移動基于華為云FusionInsight，聯(lián)合政企客戶共同打造智慧電網、智慧交通、智慧港口、高清視頻等系列標桿應用，打通數據全生命周期鏈路，實現對內業(yè)務支撐、對外應用賦能，全面支撐了各類政務、民生等大數據應用服務。同時，華為堅持“自己的降落傘自己先跳”，華為集團IT通過FusionInsight構建OneData大數據集群，實現大數據平臺在大規(guī)模場景下的開拓，OneData集群其規(guī)模已至1萬＋節(jié)點；同時，實現了統(tǒng)一的數據管理服務，在菩提海UniDB產品中，通過邏輯統(tǒng)一方式，把50＋物理分散的計算集群（Hadoop＋MPP），基于五統(tǒng)一（數據安全，元數據目錄，數據集成，數據訪問，任務調度），整合成湖倉一體的架構，支撐上千個企業(yè)租戶的PB級數據分析處理需求。華為集團IT OneData大集群歷經兩次滾動升級，業(yè)務0中斷，已穩(wěn)定運行六年。從上面案例可知，華為云FusionInsight將是政企客戶的標準底座，可實現一企一湖、一城一湖，一站式支撐多場景高效分析。

截至2020 年10月底，華為云FusionInsight智能數據湖已服務60＋個國家和地區(qū)、3000＋客戶，覆蓋政府、金融、運營商、電力、傳媒、醫(yī)療、教育、交通、油氣、物流、零售、制造、互聯(lián)網等諸多行業(yè)，助力客戶以數據驅動業(yè)務增長和商業(yè)成功，使政企客戶可基于華為云FusionInsight實現“一企一湖，一城一湖”！

華為云FusionInsight的產品功能、創(chuàng)新能力、實踐成果、生態(tài)體系建設得到了市場層面的充分肯定：華為云FusionInsight MRS把“復雜”留給自己，把“簡單”留給伙伴，共建社區(qū)繁榮生態(tài)，聯(lián)合800＋ISV，共創(chuàng)共贏，助力政企數字化轉型成功！2020年，華為云FusionInsight除過在本次穩(wěn)居IDC MarketScape中國大數據管理平臺領導者象限，其市場份額和技術實力雙領先，華為云FusionInsight還連續(xù)四年入圍中國大數據企業(yè)50強，并榮獲中國信息通信大數據行業(yè)影響力獎、中國大數據平臺類最佳解決方案獎……

最后再來談談戰(zhàn)略。華為云FusionInsight自2009年開始投入研究，并于2014年開始推出商用化產品，堅持技術創(chuàng)新，并始終秉承開源開放的理念，踐行“平臺＋生態(tài)”戰(zhàn)略，攜手800＋合作伙伴，為政企客戶提供“懂行”的大數據解決方案。所謂懂行，一方面要不斷深入理解客戶不斷發(fā)展的業(yè)務訴求，另一方面，要持續(xù)技術創(chuàng)新并引領行業(yè)發(fā)展，商業(yè)訴求＋技術創(chuàng)新雙輪驅動行業(yè)可持續(xù)、高質量發(fā)展，“用數”助力客戶商業(yè)成功！上面的論述已經充分證明，華為是“懂行”的大數據專家。

進入智能數據時代，隨著大數據技術更加成熟，以及5G、AI、IoT技術的規(guī)模化商用，政企客戶在商業(yè)訴求與技術創(chuàng)新的雙輪驅動下，不斷深化數字化轉型，并向智能化升級。企業(yè)構建技術領先的大數據平臺，應該選擇具有競爭力的數據底座。數據的增長是無限的，小集群總會成長為大集群，一個技術領先、可平滑升級、可持續(xù)演進的數據底座非常重要。華為云FusionInsight智能數據湖的愿景就是打造技術領先的大數據底座，助力客戶實現一企一湖一城一湖！

大數據市場拐點將現

IDC預測，中國大數據市場規(guī)模將在2020年達到104．2億美元。大數據市場已經熱了多年，市場快速演進、技術持續(xù)升級、客戶需求不斷升溫，再加上利好政策的刺激，新的市場拐點可能會很快出現。

2020《政府工作報告》中明確提出要“推進要素市場化配置改革”，以及“培育技術和數據市場，激活各類要素潛能”。數據作為新的市場要素，其重要性和價值得到進一步彰顯。大數據將在企業(yè)從數字化轉型到智能化升級的轉變中發(fā)揮不可替代的作用，而建設大數據平臺依然是行業(yè)用戶的“剛需”，并在新基建、十四五等戰(zhàn)略中持續(xù)構筑數據堅實底座，助力政企數字化轉型。IDC預測，2019－2024年，數據的復合增長率將保持在26％，呈幾何級數增長的數據量將給數據的存儲、管理和分析帶來更大的壓力和全新的挑戰(zhàn)。這一方面要求在大數據技術上不斷尋求新的突破和創(chuàng)新，包括湖倉一體、實時數據湖、交互式分析等將成為新的熱點；另一方面，在商業(yè)模式上，企業(yè)也需要不斷調整、擴展業(yè)務邊界，加強生態(tài)合作，增強企業(yè)與外部間的數據交互，這對數據集成、開發(fā)、實時入湖分析等將產生積極的促進作用。

談到未來大數據應用的發(fā)展趨勢，IDC概括了兩點：一是主流廠商都在積極拓展大數據解決方案，強化數據治理能力，建立數據服務能力，進一步降低數據分析的復雜性；二是數據管理平臺要進一步簡化和統(tǒng)一，在數據庫、數倉、大數據平臺、數據湖等混合環(huán)境中，簡化數據管理、提高用數效率是首要任務。到2020年，大數據技術創(chuàng)新趨勢的焦點已轉向LakeHouse、企業(yè)創(chuàng)新焦點已轉向湖倉一體，讓大數據與數倉互聯(lián)互通、協(xié)同計算，兼顧過去與未來！從華為云的技術創(chuàng)新和行業(yè)實踐來看，這兩方面的考慮都已經在落地和不斷推進之中。

責任編輯：gt