當前位置:首頁 > 模擬 > 模擬技術(shù)
[導(dǎo)讀]眾所周知,清華-伯克利深圳學(xué)院更是成立了“RISC-V 國際開源實驗室”,直接將圖靈獎得主、最早提出“精簡指令集”(RISC)體系的大衛(wèi)·帕特森(David Patterson)引入,抓住了開源和源創(chuàng)的源頭,有可能在芯片領(lǐng)域形成新的開源 CPU 生態(tài)體系,打造國家重器。

眾所周知,清華-伯克利深圳學(xué)院更是成立了“RISC-V 國際開源實驗室”,直接將圖靈獎得主、最早提出“精簡指令集”(RISC)體系的大衛(wèi)·帕特森(David Patterson)引入,抓住了開源和源創(chuàng)的源頭,有可能在芯片領(lǐng)域形成新的開源 CPU 生態(tài)體系,打造國家重器。

AI源創(chuàng)評論報道,據(jù)官方消息,清華大學(xué)計算機系圖形實驗室宣布開源一個全新的深度學(xué)習(xí)框架:Jittor,中文名計圖。

Jittor 是一個采用元算子表達神經(jīng)網(wǎng)絡(luò)計算單元、完全基于動態(tài)編譯(Just-in-Time)的深度學(xué)習(xí)框架。[1]

據(jù)介紹,Jittor 內(nèi)部使用創(chuàng)新的元算子和統(tǒng)一計算圖的深度學(xué)習(xí)框架。和 Numpy 相比,元算子在保證易用性的同時,能夠?qū)崿F(xiàn)更復(fù)雜、更高效的操作。而統(tǒng)一計算圖則是融合了靜態(tài)計算圖和動態(tài)計算圖的諸多優(yōu)點,在易于使用的同時,提供高性能的優(yōu)化?;谠阕娱_發(fā)的深度學(xué)習(xí)模型,可以被計圖實時自動優(yōu)化并且運行 CPU、GPU 等指定的硬件上。

Jittor 特性

Jittor 是基于易用、可定制、實現(xiàn)與優(yōu)化分離、即時的理念設(shè)計的。用戶只需要數(shù)行代碼,就可定義新的算子和模型,且所有的代碼都是即時編譯運行。

在 Jittor 上,多個元算子之間可以相互融合,成為更加復(fù)雜的算子,進一步構(gòu)成神經(jīng)網(wǎng)絡(luò)和深度學(xué)習(xí)應(yīng)用。

支持計算任意高階導(dǎo)數(shù)。元算子在 Jittor 上反向傳播后仍然是元算子,因此,在深度學(xué)習(xí)開發(fā)過程中,你不用算子的反向傳播而重復(fù)開發(fā)。同時,還可以使用統(tǒng)一的優(yōu)化策略。

使用 Jittor 內(nèi)置的元算子編譯器,用戶可以直接將通過元算子編寫的 Python 代碼動態(tài)編譯成更高效的 C++ 代碼。

Jittor 能夠自動優(yōu)化動態(tài)編譯的代碼。其內(nèi)置的優(yōu)化編譯遍(complier pass)兼容 LLVM,可以根據(jù)設(shè)備進行自動優(yōu)化,生成的底層算子對計算設(shè)備非常友好。

Jittor 統(tǒng)一管理 GPU 和 CPU 的內(nèi)存。當深度學(xué)習(xí)耗盡 GPU 內(nèi)存資源時,將用 CPU 內(nèi)存彌補。

Jittor 同時提供同步接口和異步接口,用戶可以同時享受同步接口的易用性和異步接口的高效性。


使用輔助轉(zhuǎn)換腳本,PyTorch 代碼可以直接轉(zhuǎn)換成 Jittor 模型。在參數(shù)保存和數(shù)據(jù)傳輸上,Jittor使用和 PyTorch 一樣的 Numpy+pickle 協(xié)議,二者的模型可以相互加載和調(diào)用。

性能超越 Pytorch

雖然這是清華大學(xué)第一次發(fā)布開源機器學(xué)習(xí)框架,但與國際主流平臺相比,Jittor 豪不遜色。 目前 ResNet、VGG、SSD、DeepLab、LSGAN 等多個網(wǎng)絡(luò)模型已經(jīng)在 Jittor 平臺實現(xiàn),可供用戶使用。與同類型框架相比,Jittor 在收斂精度一致情況下,推理速度取得了 10%-50% 的性能提升 。


目前,Jittor 得到了國家自然科學(xué)基金項目、北京信息科學(xué)與技術(shù)國家研究中心團隊項目和清華-騰訊聯(lián)合實驗室項目的資助和支持。


【 注:圖片來源:Pixabay 所有者:Gerd Altmann 】  開源超級玩家

開源,特別是人工智能領(lǐng)域的開源,逐漸成為綜合實力的象征。清華在這方面有著獨到的優(yōu)勢。

首先,是在人工智能領(lǐng)域的學(xué)術(shù)傳承。2019 年,清華人工智能研究院動作頻頻,在張鈸院士的帶領(lǐng)下,4 月成立聽覺智能研究中心,由鄭方教授擔(dān)任主任,5 月成立基礎(chǔ)理論研究中心,朱軍任主任,在基礎(chǔ)算法、AI 框架、AI 應(yīng)用、數(shù)據(jù)資源等方面早已布好基礎(chǔ)。

第一代院士打好基礎(chǔ),第二代老師形成了中堅力量。此次驚艷推出的計圖(Jittor),牽頭人就是清華大學(xué)計算機系的胡事民教授,1969 年生人,正屬于中堅,而開發(fā)團隊的主體,正是他帶領(lǐng)的圖形學(xué)實驗室的一批博士生。今天出世的計圖更不免讓人想到當年的清華畢業(yè)生賈揚清,他在加州大學(xué)伯克利分校攻讀博士期間創(chuàng)建了 Caffe 項目。

清華大學(xué)自然語言處理實驗室(THUNLP)也有一個知名的開源項目,叫 OpenNRE。[2] 這是一個在自然語言處理里進行關(guān)系提取的開源框架,可以用于擴展知識圖譜,是推薦系統(tǒng)、搜索引擎、問題解答這些應(yīng)用的基礎(chǔ)和關(guān)鍵技術(shù)。

實驗室由孫茂松教授領(lǐng)銜,帶出了一批骨干老師,以及本碩博的尖子。THUNLP 在 GitHub 上得到的 star,已經(jīng)跟全球最強的斯坦福 NLP 小組的 star 差不多了。

由此帶出的第三代學(xué)生梯隊也人才濟濟。清華姚班自不必說,去年以本科人才培養(yǎng)著名的姚期智教授又開設(shè)智班,重點培養(yǎng)人工智能領(lǐng)域的后備軍。姚班畢業(yè),目前在 MIT 就讀的博士生胡淵鳴,設(shè)計、實現(xiàn)了 Taichi 編程語言及其優(yōu)化編譯器,后生可畏。[3]另外,清華和企業(yè)以實驗室形式的合作,碩果累累,吸引了像張亞勤、沈向洋這樣的大師級科學(xué)家加入。比如,清華和微軟研究院合作了 Convlab 開源端到端對話系統(tǒng) [4],和美團合作了視頻動作分析的開源數(shù)據(jù)集 COIN [5]。

本站聲明: 本文章由作者或相關(guān)機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫毥谦F公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術(shù)解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關(guān)鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險,如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應(yīng)對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競爭力 堅持高質(zhì)量發(fā)展策略,塑強核心競爭優(yōu)勢...

關(guān)鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術(shù)學(xué)會聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(shù)(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉