騰訊:基礎(chǔ)設(shè)施和大數(shù)據(jù)演進(jìn)之路
掃描二維碼
隨時(shí)隨地手機(jī)看文章
“開發(fā)者是推動(dòng)技術(shù)發(fā)展的主力軍,數(shù)字社會向前的每一步,都離不開廣大開發(fā)者。作為數(shù)字化轉(zhuǎn)型助手,騰訊云將秉持“開源、共享、創(chuàng)新”的三大理念持續(xù)助力開發(fā)者的個(gè)人成長和價(jià)值創(chuàng)造。開發(fā)者是騰訊產(chǎn)業(yè)互聯(lián)網(wǎng)的直接建設(shè)者,更是推動(dòng)社會技術(shù)發(fā)展的重要力量。騰訊云在開發(fā)者生態(tài)的構(gòu)建上,秉持開源、分享、創(chuàng)新三大理念,積極擁抱和推動(dòng)開源,鼓勵(lì)開發(fā)者互相分享、交流,與開發(fā)者一起創(chuàng)新。
目前,騰訊云已經(jīng)服務(wù)了數(shù)百萬開發(fā)者,給到開發(fā)者的資源扶持超過100億元。”騰訊公司副總裁、騰訊云總裁邱躍鵬在Techo開發(fā)者大會表示。
騰訊公司副總裁、騰訊云總裁 邱躍鵬
Techo是騰訊云面向全球開發(fā)者和技術(shù)愛好者發(fā)起的,專注于探討云計(jì)算前沿技術(shù)趨勢和應(yīng)用實(shí)踐領(lǐng)域的的非商業(yè)大會,通過搭建一個(gè)純粹的技術(shù)交流和共享平臺,與數(shù)千萬開發(fā)者們共同探索、共同創(chuàng)造。本次大會匯集了150多位海內(nèi)外技術(shù)專家和來自全球各地的數(shù)千萬位開發(fā)者和技術(shù)愛好者,全面解讀了當(dāng)前云計(jì)算、大數(shù)據(jù)、人工智能、物聯(lián)網(wǎng)、音視頻、邊緣計(jì)算、無服務(wù)計(jì)算、云原生、安全等領(lǐng)域的最新技術(shù)態(tài)勢和最佳落地實(shí)踐。
云計(jì)算技術(shù)未來三大重要趨勢
云計(jì)算的使命之一就是為開發(fā)者提供更高效、更便捷、更先進(jìn)的開發(fā)環(huán)境和工具,讓開發(fā)者更好地解決問題,實(shí)現(xiàn)自己的創(chuàng)意、釋放創(chuàng)造的價(jià)值。對于未來云計(jì)算技術(shù)的演進(jìn),邱躍鵬在大會致辭時(shí)表示:云計(jì)算未來有三大趨勢,即軟硬件一體化(Cloud Native Hardware)、無服務(wù)器計(jì)算(Serverless)和智能化(Smart)。
邱躍鵬指出,隨著云計(jì)算承載的業(yè)務(wù)規(guī)模越來越大,軟件和硬件的結(jié)合成為剛需。軟硬件一體化技術(shù)會進(jìn)一步發(fā)展,為開發(fā)者提供更強(qiáng)壯的基礎(chǔ)設(shè)施平臺,提升云計(jì)算的性能、提高資源利用率,最終為開發(fā)者提供穩(wěn)定、更具性價(jià)比的服務(wù)。軟硬件一體化帶來的技術(shù)紅利,值得每一位開發(fā)者關(guān)注。
同時(shí),無服務(wù)器計(jì)算,即 Serverless正在快速演進(jìn)。Serverless能把開發(fā)者從繁瑣、冗雜的開發(fā)配置工作中解放出來,不需要任何的基礎(chǔ)設(shè)施建設(shè)、管理與運(yùn)維,極大降低了開發(fā)門檻,開發(fā)者只需關(guān)注自己的業(yè)務(wù)邏輯。以騰訊云和微信聯(lián)合推出的“小程序·云開發(fā)”為例,上線一年已經(jīng)服務(wù)超過50萬開發(fā)者。“小程序·云開發(fā)”讓更多開發(fā)者實(shí)現(xiàn)他們的小程序夢想,未來,Serverless理念會在更多開發(fā)場景中落地。隨著硬件紅利不斷釋放、開發(fā)者越來越關(guān)注于自己的應(yīng)用,數(shù)字化進(jìn)程不斷加快。隨之而來的數(shù)據(jù)量不斷增長,對算力的要求越來越高,人工智能也成為開發(fā)者們必須關(guān)注和應(yīng)用的技術(shù)。人工智能正在快速演進(jìn),云廠商也將會提供更多人工智能產(chǎn)品和能力給到開發(fā)者。
首次全面揭秘基礎(chǔ)設(shè)施和大數(shù)據(jù)技術(shù)演進(jìn)全貌
作為全球最大的互聯(lián)網(wǎng)公司之一,騰訊無論在基礎(chǔ)架構(gòu)還是大數(shù)據(jù)AI領(lǐng)域的實(shí)踐,都極具代表性。這次作為騰訊云在兩大領(lǐng)域的技術(shù)負(fù)責(zé)人,首次全面披露騰訊20年在這塊的技術(shù)積累。騰訊云副總裁、云架構(gòu)平臺部總經(jīng)理謝明表示:“無論是從使用通用服務(wù)器到不久前發(fā)布的“為云而生”的服務(wù)器星星海,還是從第一代數(shù)據(jù)中心中傳統(tǒng)的電信解決方案到如今第四代的T-block產(chǎn)品家族,騰訊云在基礎(chǔ)設(shè)施領(lǐng)域已經(jīng)走出了一條自主創(chuàng)新之路,而隨著云計(jì)算基礎(chǔ)設(shè)施的不斷進(jìn)化,這些經(jīng)過微信、QQ等海量業(yè)務(wù)充分驗(yàn)證過的基礎(chǔ)能力,正在通過騰訊云共享給更多開發(fā)者,助力產(chǎn)業(yè)互聯(lián)網(wǎng)發(fā)展。
以星星海服務(wù)器來說,在設(shè)計(jì)過程中,充分結(jié)合數(shù)據(jù)中心實(shí)際部署環(huán)境要求,針對云端的計(jì)算、存儲,網(wǎng)絡(luò)等場景做了重點(diǎn)優(yōu)化,能夠有效滿足騰訊云98%應(yīng)用場景需求。同時(shí),深度定制的CPU,能夠?qū)崿F(xiàn)行業(yè)最優(yōu)單核性能和最優(yōu)單核TCO;根據(jù)測試,星星海可以實(shí)現(xiàn)云服務(wù)實(shí)例綜合性能提升35%以上,最大負(fù)載能效對比業(yè)界可提高50%。
在數(shù)據(jù)中心方面,第四代數(shù)據(jù)中心T-block讓用戶能夠以搭積木的方式,快速實(shí)現(xiàn)全數(shù)據(jù)中心的模塊化配置及建設(shè),相比于傳統(tǒng)大規(guī)模數(shù)據(jù)中心,T-block可以顯著減少建設(shè)周期和施工成本。同時(shí),由于率先在行業(yè)內(nèi)采用更高效率的制冷和供配電架構(gòu),系統(tǒng)能源使用效率得到有效提升。以一個(gè)擁有30萬臺服務(wù)器的園區(qū)為例,一年可節(jié)省2.5億度電,真正實(shí)現(xiàn)綠色數(shù)據(jù)中心的理念。
類似的自主創(chuàng)新,還體現(xiàn)在計(jì)算、存儲、數(shù)據(jù)庫等領(lǐng)域。
除了基礎(chǔ)設(shè)施,大數(shù)據(jù)在支撐云計(jì)算應(yīng)用上也起著至關(guān)重要的作用,騰訊云副總裁蔣杰,數(shù)據(jù)平臺部總經(jīng)理蔣杰表示:“經(jīng)過10年的積累,騰訊大數(shù)據(jù)平臺的算力資源池目前已有超過20萬臺的規(guī)模,每天實(shí)時(shí)數(shù)據(jù)計(jì)算量超過30萬億條,騰訊已經(jīng)成為中國實(shí)時(shí)數(shù)據(jù)計(jì)算量最大的公司”。做到如此龐大的規(guī)模,并非一朝一夕之功,從以Hadoop為核心的離線計(jì)算時(shí)代到以Spark、Storm、Flink為核心的實(shí)時(shí)計(jì)算時(shí)代,再到如今的機(jī)器學(xué)習(xí)和深度學(xué)習(xí)時(shí)代,騰訊從無到有研發(fā)了分布式的機(jī)器學(xué)習(xí)引擎Angel,以及一站式AI開發(fā)平臺智能鈦TI。目前,騰訊正在研究以批流融合、ABC融合、以及數(shù)據(jù)湖和聯(lián)邦學(xué)習(xí)為方向的下一代大數(shù)據(jù)平臺,該平臺將具備混合部署、跨域數(shù)據(jù)共享和邊緣計(jì)算等能力。
針對目前技術(shù)迭代不斷加速,企業(yè)建設(shè)大數(shù)據(jù)平臺和機(jī)器學(xué)習(xí)平臺,成本高昂,缺乏專業(yè)人才等問題,騰訊已經(jīng)把網(wǎng)絡(luò)、存儲、數(shù)據(jù)庫等IaaS能力,大數(shù)據(jù)、機(jī)器學(xué)習(xí)等PaaS的能力,以及上層的圖像、語音、NLP、BI等SaaS能力,通過騰訊云對外開放。在大數(shù)據(jù)和AI兩個(gè)領(lǐng)域,騰訊推出了以TBDS和智能鈦TI為首的雙引擎,讓每個(gè)企業(yè)和開發(fā)者便捷用上領(lǐng)先的大數(shù)據(jù)和AI的能力。
開源、共享、創(chuàng)新,三大理念全面支持開發(fā)者發(fā)展
在外部開源生態(tài)上,騰訊還積極支持Linux基金會、Apache基金會、CNCF基金會和OpenStack等多個(gè)國際知名的開源社區(qū),成為中國唯一全面支持四大頂級開源基金會的白金贊助商。并通過不斷贊助、捐獻(xiàn)項(xiàng)目、為開源項(xiàng)目貢獻(xiàn)代碼、解決問題等各種形式,積極的參與開源社區(qū)生態(tài)建設(shè)。此外,騰訊云除了開源和Techo開發(fā)者大會這樣的交流方式之外,還通過線上開發(fā)者社區(qū)、騰訊云開發(fā)者專享扶持活動(dòng)等構(gòu)建面向全球開發(fā)者的技術(shù)對接平臺,不斷提升騰訊云的整體技術(shù)水平和服務(wù)能力。未來,騰訊云將以更開放的心態(tài)擁抱和回饋社區(qū),為更多的開發(fā)者帶去便捷、高效的開發(fā)體驗(yàn)。
目前,騰訊共開源了86個(gè)項(xiàng)目,覆蓋云計(jì)算、大數(shù)據(jù)、AI、安全、小程序等領(lǐng)域,參與貢獻(xiàn)的人數(shù)超過1000 名,累計(jì)在GitHub獲得了超過 25萬個(gè) Star。尤其是大數(shù)據(jù)領(lǐng)域,從2014開始,騰訊將第一代大數(shù)據(jù)平臺的核心,騰訊版的Hive進(jìn)行了開源,2017年,更是把第三代平臺的核心Angel開源。今年,騰訊繼續(xù)加快了開源的腳步,2個(gè)月前,在ApacheCon 2019上,騰訊面向全球開發(fā)者正式宣布開源自身核心平臺——實(shí)時(shí)數(shù)據(jù)采集平臺TubeMQ,并捐獻(xiàn)給Apache社區(qū)。此次在Techo大會現(xiàn)場,再次重磅宣布正式開源資源管理平臺核心TKE和分布式數(shù)據(jù)庫TBase,隨著在大數(shù)據(jù)開源領(lǐng)域的開源逐步加速,騰訊正在成為中國大數(shù)據(jù)領(lǐng)域開源最全面的廠商。