構築“資料聯結器”,騰訊雲大資料推出“開源開放”戰略
隨著全球經濟數字化轉型的加快,企業對大資料的需求也日益強烈,複雜場景、規模成本和資料安全等問題都對大資料業務發展提出了新挑戰。
11月4日,在騰訊數字生態大會大資料專場,騰訊雲副總裁黃世飛提出:騰訊雲大資料要開源開放,共建雲端大資料生態。未來騰訊雲將扮演“資料聯結器”,助力社會企業、組織充分釋放大資料能力,快速推進雲上數字化創新實踐。
(騰訊雲副總裁黃世飛)
大資料技術與多場景業務融合,正在不斷改變大眾生活。然而目前大資料應用方面仍舊存在區域分佈不均,應用程度不深等問題。要實現全面數字化升級,大資料方面必須打通行業發展水平參差不齊、應用領域不平衡、業務融合不深入等堵點。
騰訊雲大資料基於“技術開源、生態開放”戰略,在資料技術、資料產品及市場、資料服務市場三方面實現開源開放,降低大資料應用門檻,助力大資料與產業快速連線。
技術開源:騰訊雲助力企業提升社群運營資料價值
騰訊雲副總裁黃世飛表示,騰訊雲大資料將以雲端資料聯結器的角色,連線雲與大資料生態的每一位參與者,讓技術、資料在流動中產生無限價值。
據騰訊大資料平臺總經理陳鵬介紹,騰訊雲大資料採用批流融合、ABC 融合模式,在自適應架構下能夠實現資料混合部署、跨域共享,每日分析任務數達到1500萬,每日實時計算次數達80萬億,訓練模型維度達到1萬億。這也為接入生態的夥伴,獲得穩定、高效的大資料服務提供了基礎。
騰訊雲大資料生態目前已彙集了800萬社群程式碼貢獻,25億+生態資金扶持,覆蓋15個生態業務合作領域,相關合作夥伴實現同比收入增長350%,以實際成果證明開源開放的連線作用。
除技術上不斷突破外,騰訊雲的大資料以產品開源的形式,降低企業大資料應用難度。如騰訊雲 ClickHouse,該產品已突破流批分離、架構臃腫維護難的數倉困境,並向著存算分離的雲原生數倉發展,用秒級彈效能力服務企業資料分析決策,使用者只需為使用付費無附加開發工作。
國內專業的大資料分析和營銷科技服務商神策資料,則與騰訊雲共建基於資料流的運營框架SDAF加速企業資料化運營實踐。神策通過和騰訊雲彈性 MapReduce 元件融合,實現了深度繫結的一體化產品。在彈性 MapReduce 的彈性伸縮能力的幫助下,企業能夠更靈活低成本地使用神策產品,達成自動化運維和監控管理;全自動化的部署方案提升神策交付實施的效率,減少對客戶的人力成本。
此外,騰訊雲大資料通過產品體系開放、服務體系開放、生態體系開放三方面的開放協同,構建更豐富的大資料產品生態,以應對大資料落地產業時面臨龐大而複雜的技術場景體系難題。
生態開放:開放合作讓技術與商業共贏
騰訊雲大資料在過去三年已提供25億+生態資金投資,向一些資料技術新創公司、資料應用公司、資料服務公司提供資金支援,以幫助相關的技術公司進一步提高大資料領域的技術競爭力、產品競爭力;
在生態合作建設上,騰訊雲大資料也與包括明略、東華、北明在內的資料服務商,累計在智慧城市、智慧工業等15個領域落地,形成聯合解決方案20+。截止2021年10月,大資料合作伙伴同比收入增長350%,完成了客戶價值及營收增長的雙豐收。
騰訊雲也積極與大資料各技術領域的傑出公司展開技術、市場方面的合作,期待能夠實現技術的互動和商業的共贏,營造出更加良性的協同發展生態。騰訊雲與Elastic 公司合作後,我們投入了極大的技術資源,與 Elastic 一起應對在搜尋與檢索分析領域的客戶技術挑戰。
多元的合作伙伴在開源開放生態建設中扮演著不同角色。在技術開源方面,Elastic 2019年5月開始與騰訊雲合作為企業/組織提供 Elasticsearch 服務,經過大規模應用實踐,ES OTeam 實現核心寫入效能提高20%的突破。
2020年疫情爆發時期,Elastic 攜手騰訊雲大資料快速響應健康碼、騰訊會議、線上廣交會等技術需求,併合作開辦雲課堂,打造擁有四大主題、40+線上課程的一站式學習成長平臺,服務百萬開發者共同發展。截止到2020年12月,Elastic 與騰訊雲共產生同創造了開源貢獻破百居亞太第一的好成績。
而 Apache 社群與騰訊雲共建基於 Iceberg 的雲原生資料湖,為資料分析系統帶來更低成本、更高可靠性的突破同時簡化結構,提升效能。在此基礎上,通過雲端資料湖構建服務,可幫助使用者建設高效、安全的企業資料湖技術構架;而敏捷高效的資料湖分析則幫助使用者減少異構資料分析的準備時間,有效提升了企業資料敏捷度。
在開源開放的策略下,騰訊雲大資料正在形成集資料、技術、應用產品協同發展的良性生態,在各合作伙伴的配合下,未來騰訊雲大資料將為更多企業提供優質的服務,為消除資料應用落差,產業數字化創新等貢獻力量。