在11月6日召開(kāi)的Techo開(kāi)發(fā)者大會(huì)上,騰訊云副總裁、騰訊數(shù)據(jù)平臺(tái)部總經(jīng)理蔣杰博士對(duì)外披露騰訊大數(shù)據(jù)平臺(tái)在長(zhǎng)達(dá)十年的時(shí)間中已經(jīng)經(jīng)歷了四代演進(jìn)。經(jīng)過(guò)十年的積累,騰訊大數(shù)據(jù)平臺(tái)的算力資源池目前已有超過(guò)20萬(wàn)臺(tái)的規(guī)模,每天實(shí)時(shí)數(shù)據(jù)計(jì)算量超過(guò)30萬(wàn)億條,騰訊已經(jīng)成為中國(guó)實(shí)時(shí)數(shù)據(jù)計(jì)算量最大的公司。隨著資源管理平臺(tái)核心TKE和分布式數(shù)據(jù)庫(kù)TBase正式對(duì)外開(kāi)源,騰訊正在成為大數(shù)據(jù)領(lǐng)域開(kāi)源最全面的公司。
作為全球最大的互聯(lián)網(wǎng)公司之一,騰訊的數(shù)據(jù)量在短短五六年時(shí)間增長(zhǎng)了幾千倍,目前每天產(chǎn)生的數(shù)據(jù)量超過(guò)幾十萬(wàn)億條。為了應(yīng)對(duì)這種爆炸式增長(zhǎng),騰訊走出了一條技術(shù)引進(jìn)+改造+自研的道路。針對(duì)最新的大數(shù)據(jù)和星空人工智能技術(shù)發(fā)展趨勢(shì),騰訊正在下一代計(jì)算平臺(tái)中,探索批流融合、ABC融合以及數(shù)據(jù)湖和聯(lián)邦學(xué)習(xí)等前沿技術(shù)。
騰訊內(nèi)部目前有超過(guò)100萬(wàn)臺(tái)服務(wù)器,騰訊云聯(lián)合所有業(yè)務(wù)部門(mén),利用業(yè)務(wù)空閑資源打造一套算力共享平臺(tái),該算力彈性資源池有20萬(wàn)的規(guī)模,大數(shù)據(jù)平臺(tái)每天有1500萬(wàn)的分析任務(wù)、30萬(wàn)億次的實(shí)時(shí)計(jì)算量,并且每天數(shù)據(jù)接入條數(shù)達(dá)35萬(wàn)億。此外,騰訊云的分布式機(jī)器學(xué)習(xí)平臺(tái),能支撐1萬(wàn)億維度的數(shù)據(jù)訓(xùn)練。目前,騰訊已經(jīng)把網(wǎng)絡(luò)、存儲(chǔ)、數(shù)據(jù)庫(kù)等IaaS能力,大數(shù)據(jù)、機(jī)器學(xué)習(xí)等PaaS的能力,以及上層的圖像、語(yǔ)音、NLP、BI等SaaS能力,通過(guò)騰訊云對(duì)外開(kāi)放。
對(duì)于大眾關(guān)心的保證數(shù)據(jù)安全的問(wèn)題,蔣杰博士表示,騰訊在整個(gè)體系內(nèi)部進(jìn)行強(qiáng)管控的訪問(wèn)管理,內(nèi)部數(shù)據(jù)存儲(chǔ)都做了整體加密。騰訊各部門(mén)之間或者跟其他企業(yè)之間需要數(shù)據(jù)共享時(shí),都是通過(guò)聯(lián)邦學(xué)習(xí)的方式來(lái)解決,分享的都是訓(xùn)練后的、已經(jīng)脫敏的數(shù)據(jù)。
繼續(xù)閱讀:
星空人工智能技術(shù)網(wǎng) 倡導(dǎo)尊重與保護(hù)知識(shí)產(chǎn)權(quán)。如發(fā)現(xiàn)本站文章存在版權(quán)等問(wèn)題,煩請(qǐng)30天內(nèi)提供版權(quán)疑問(wèn)、身份證明、版權(quán)證明、聯(lián)系方式等發(fā)郵件至1851688011@qq.com我們將及時(shí)溝通與處理。!:首頁(yè) > 大數(shù)據(jù) » 騰訊大數(shù)據(jù)平臺(tái)十年四次升級(jí) 正成為大數(shù)據(jù)領(lǐng)域開(kāi)源最全面的公司