騰訊大數(shù)據(jù)團(tuán)隊(duì)詳細(xì)披露了騰訊大數(shù)據(jù)十年發(fā)展歷程,并全面展示了騰訊第三代全棧機(jī)器學(xué)習(xí)平臺(tái)Angel在大模型數(shù)據(jù)訓(xùn)練、深度學(xué)習(xí)、圖計(jì)算等方面的技術(shù)能力。
據(jù)騰訊大數(shù)據(jù)負(fù)責(zé)人劉煜宏介紹,騰訊大數(shù)據(jù)從2009年開始, 經(jīng)歷離線計(jì)算、實(shí)時(shí)計(jì)算與機(jī)器學(xué)習(xí)三個(gè)階段,2009年之前,騰訊主要使用傳統(tǒng)的關(guān)系型數(shù)據(jù)庫。2009年開始,傳統(tǒng)的單機(jī)數(shù)據(jù)庫所提供的服務(wù),在系統(tǒng)可擴(kuò)展性、性價(jià)比方面已不再適用騰訊業(yè)務(wù)爆發(fā)式的增長。面對(duì)這種變化,騰訊大數(shù)據(jù)轉(zhuǎn)向分布式,基于開源的Hadoop體系,構(gòu)建了騰訊第一代大數(shù)據(jù)平臺(tái),并建設(shè)離線計(jì)算平臺(tái),主要發(fā)力規(guī)模化。騰訊大數(shù)據(jù)由此進(jìn)入第一階段。三年里,騰訊實(shí)現(xiàn)了從關(guān)系型數(shù)據(jù)庫到自建大數(shù)據(jù)平臺(tái)的全面遷移,到2012年,騰訊大數(shù)據(jù)的單集群規(guī)模突破了4400臺(tái)。
2012年,移動(dòng)互聯(lián)網(wǎng)爆發(fā),應(yīng)對(duì)業(yè)務(wù)數(shù)據(jù)統(tǒng)計(jì)及時(shí)性、快速性的需求,騰訊大數(shù)據(jù)從Hadoop轉(zhuǎn)向Spark和Storm體系,在吸收開源技術(shù)的基礎(chǔ)上,結(jié)合騰訊自身的需求進(jìn)行重寫,探索流式計(jì)算、秒級(jí)采集系統(tǒng)的建設(shè),構(gòu)建企業(yè)級(jí)的實(shí)時(shí)數(shù)據(jù)分析體系,騰訊大數(shù)據(jù)發(fā)展進(jìn)入第二階段。
2015年至今,騰訊大數(shù)據(jù)邁入了第三階段。隨著數(shù)據(jù)挖掘、數(shù)據(jù)應(yīng)用的深入,騰訊大數(shù)據(jù)再次自我迭代,于2016年推出了自研機(jī)器學(xué)習(xí)平臺(tái)Angel,專攻復(fù)雜計(jì)算場(chǎng)景,可進(jìn)行大規(guī)模的數(shù)據(jù)訓(xùn)練,支撐內(nèi)容推薦、廣告推薦等AI應(yīng)用場(chǎng)景。它由騰訊與北京大學(xué)聯(lián)合研發(fā),兼顧了工業(yè)界的高可用性和學(xué)術(shù)界的創(chuàng)新性。
據(jù)騰訊Angel開發(fā)負(fù)責(zé)人肖品介紹,騰訊Angel從騰訊海量業(yè)務(wù)場(chǎng)景中而來,是超大樣本和超高維度的機(jī)器學(xué)習(xí)平臺(tái)。如今,Angel已在QQ、微信支付、騰訊廣告、騰訊視頻等騰訊旗下產(chǎn)品中廣泛應(yīng)用,并向微眾銀行等行業(yè)合作伙伴全面開放,普遍適用于智能推薦、金融風(fēng)險(xiǎn)評(píng)估等圖計(jì)算業(yè)務(wù)場(chǎng)景。
2017年,騰訊Angel就正式開源。2018年8月,騰訊將Angel捐贈(zèng)給Linux旗下專注人工智能的LF AI基金會(huì),結(jié)合基金會(huì)成熟的運(yùn)營,全面升級(jí)的 Angel與國際開源社區(qū)深入互動(dòng),致力于讓機(jī)器學(xué)習(xí)技術(shù)更易于上手研究及應(yīng)用。
-
移動(dòng)互聯(lián)網(wǎng)
+關(guān)注
關(guān)注
5文章
600瀏覽量
35160 -
機(jī)器學(xué)習(xí)
+關(guān)注
關(guān)注
66文章
8553瀏覽量
136931
發(fā)布評(píng)論請(qǐng)先 登錄
品聲科技十周年,扎根技術(shù)向上生長!擁抱AI時(shí)代,迎接AI眼鏡爆發(fā)
云天勵(lì)飛出席GAIR 2025 AI算力新十年專場(chǎng)
華為五大創(chuàng)新開啟非洲移動(dòng)產(chǎn)業(yè)黃金十年
Wi-Fi FEM研發(fā),開啟第二個(gè)十年
開源鴻蒙技術(shù)大會(huì)2025丨以智能化為主旋律,擘畫開源鴻蒙下一個(gè)五年發(fā)展技術(shù)藍(lán)圖
深耕藍(lán)牙物聯(lián)網(wǎng)十年:北京桂花網(wǎng) 2015-2025 發(fā)展大事件全景
十年·NDI在中國|影像志:見證視頻IP化的成長與未來
NDI 十年:誕生 · 愿景 · 發(fā)展 · 未來— 獨(dú)家專訪 NDI 創(chuàng)始人 Andrew Cross博士
從非標(biāo)測(cè)試到系統(tǒng)集成:泰德航空的十年技術(shù)跨越之路
十年積淀,DPVR AI眼鏡將正式亮相
安富利入華30周年發(fā)展歷程回顧
十年磨一劍,百頻通萬物:國產(chǎn)無線通信突圍之路
技術(shù)預(yù)見者的實(shí)踐之路:C-V2X發(fā)展五年記
聚浪十年 共儲(chǔ)未來!2025元腦存儲(chǔ)分銷合作伙伴大會(huì)成功舉辦
騰訊大數(shù)據(jù)十年發(fā)展歷程
評(píng)論