楠木軒

第四代數智融合計算平台即將發佈,聚焦統一平台研究

由 豆更生 發佈於 科技

數據作為數字經濟時代的關鍵要素,仍有巨大潛能亟待釋放。大量閒置數據資源、數據孤島等問題讓釋放數據價值掣肘頗多,如何充分實現數據安全並提升數據融合能力已成為全球性的課題。在4月18日,由騰訊主辦的“騰訊大數據高峯論壇”上,騰訊自研的第四代數智融合計算平台,以及聯合各方推出的《騰訊隱私計算白皮書》等預計將成為行業關注的焦點。

據瞭解,本次會議主辦方邀請到中國科學院院士梅宏、中國信息通信研究院雲計算與大數據研究所副所長魏凱、騰訊數據平台部總經理蔣傑、騰訊數據平台部副總經理劉煜宏、埃森哲戰略與諮詢董事總經理袁虹等國內大數據領域領軍人物,將圍繞大數據、AI戰略以及數據隱私保護等主題展開,探討如何消除數據隱私安全與數據開放共享的對立性,以連通更多數據礦藏,釋放數智融合價值。

騰訊第四代數智融合計算平台即將發佈

騰訊大數據經過十年的發展,走出了一條從開源整合到自研、從規模化到智能化的發展之路。自2009年起,騰訊大數據團隊就開始海量大數據處理的探索,第一代大數據平台依託Hadoop生態,圍繞着離線計算模式化進行業務場景優化,構建出能夠穩定支撐小時/天級別的計算任務數據處理平台。

2012年前後,騰訊通過引入Spark、Storm、Flink等實時計算處理框架,讓大數據平台處理性能邁入毫秒級別,推動平台迭代至以實時計算為特色的第二代。隨着深度學習技術的興起,騰訊大數據團隊從2015年開始從0到1自研機器學習框架Angel,推動大數據處理正式進入智能化時代。

至此,全球大數據技術的發展似乎進入瓶頸期,下一代大數據計算平台究竟往哪個方向發展成為業界關注的焦點。

帶着這樣的疑問,騰訊基於對於數據治理和數據建模的理解,從2019年便開始着手規劃建設第四代計算平台,通過引入批流融合、數據湖、聯邦學習等新型技術,圍繞安全、智能、統一等能力打造下一代騰訊數智融合計算平台。

據騰訊數據平台部副總經理劉煜宏透露,即將發佈的第四代數智融合計算平台,將聚焦統一平台的研究,包括大數據和人工智能的統一,實現數據處理和數據挖掘統一,提供一站式數據處理交互體驗。同時,將在實現保護數據隱私的同時,提供聯合數據分析、聯合數據建模等能力,實現數據的互融互通,釋放數據價值。這其中,智能化能力將作為整個騰訊大數據平台的大腦,融合平台本身的日誌、事件、指標特徵等數據,通過機器學習算法,實現平台的自動化智能化運行,助力開發者、企業、以及政府的數字化、智能化升級。

《騰訊隱私計算白皮書》即將發佈

伴隨着雲計算、大數據、人工智能等新一代信息技術的落地應用,數據作為戰略性和基礎性資源,不但是連接虛擬空間和實體空間的紐帶,也是數字經濟體系中技術創新、需求挖掘、效率提升的重要動能。

但從實際應用來看,海量數據散落於不同的組織機構和信息系統中,即使是同一區域、產業和企業,數據也仍存在“孤島”問題。數據的多方協作已經成為醫療、工業、零售、金融、政務等領域全面轉型升級的重要路徑,要破解數據多方協作難題,數據安全和合規成為首要解決的問題。在此背景下,隱私計算應運而生。

作為在數據融合應用過程保障數據安全合規的關鍵技術路徑,隱私計算(Privacy Computing)可以保證參與方在不泄露各自數據的前提下,通過協作對他們的數據進行聯合機器學習和聯合分析,其商業模式、應用場景、技術變革、產業趨勢、法律問題等正成為當前政產學研用各界探索的技術熱點。本次峯會上即將發佈的《騰訊隱私計算白皮書》旨在凝聚業界共識,從發展背景、技術體系、應用場景等維度出發,共同推動隱私技術產業的發展,探索在數字時代中發展和安全的平衡點。

日實時計算量超40萬億 助推數字經濟發展

在支撐億萬級業務發展的過程中,騰訊大數據平台已經打磨出高可靠、高性能的平台能力,並通過騰訊雲對全球用户開放。截至去年9月份,騰訊雲大數據技術的算力彈性資源池達500萬核,每日分析任務數達1500萬,每日實時計算次數超過40萬億,能支持超過一萬億維度的數據訓練,成為國內算力最強的雲廠商,同時也是日實時計算量最大的公司。

依靠騰訊自身業務生態優勢,騰訊大數據平台自誕生以來就為騰訊內部所有業務提供強力支撐。在去年疫情期間,騰訊大數據平台完美支撐了微信健康碼、企業微信、騰訊會議、微信小程序、微信支付等“疫情活躍應用”的數據挖掘和處理需求。

在服務外部客户方面,騰訊大數據平台已為中國銀行、建設銀行、招商銀行、中國人保、太平洋保險、海通證券、雲南公安、江蘇公安、江蘇消防、山東電力、湖南國電等在內的眾多行業客户提供領先的數據處理能力。未來,隨着新一代數智融合平台的推出,騰訊大數據平台也將為更多行業持續輸出更優質的大數據能力,助力數字經濟騰飛。