當(dāng)前位置:首頁 > 公眾號精選 > 信息速遞
[導(dǎo)讀]據(jù) 21ic 獲悉,因為微軟支持的 OpenAI 的生成式人工智能聊天模型 ChatGPT 每天投入的運行成本高達 70 萬美金,為了降低生成式人工智能模型的運行成本,微軟正在開發(fā)一款代號為“Athena”的人工智能芯片。

據(jù) 21ic 獲悉,因為微軟支持的 OpenAI 的生成式人工智能聊天模型 ChatGPT 每天投入的運行成本高達 70 萬美金,為了降低生成式人工智能模型的運行成本,微軟正在開發(fā)一款代號為“Athena”的人工智能芯片

據(jù)悉,近日全球半導(dǎo)體行業(yè)研究公司 SemiAnalysis 首席分析師 Dylan·Patel 表示,由于 ChatGPT 運行在價格昂貴的計算基礎(chǔ)設(shè)施之上,OpenAI 每天為運行 ChatGPT 投入的成本可能高達 70 萬美金。

Dylan·Patel 表示,無論是撰寫求職信、生成教學(xué)計劃、幫助用戶優(yōu)化個人資料,還是基于事實或假設(shè)對事物進行判斷分析,ChatGPT 均需要龐大的算力才能基于用戶的輸入信息做出反饋,而這部分成本都來自于昂貴的服務(wù)器。

Dylan·Patel 及其同事 Afzal·Ahmad 均認為,雖然訓(xùn)練 ChatGPT 背后的大語言模型可能要花費上億美元,但其運營費用或其背后的內(nèi)容生產(chǎn)成本會更高,即使采用任何合理的部署規(guī)模都遠遠超過了其訓(xùn)練成本。

近日傳言微軟為了降低生成式人工智能模型的運行成本正在開發(fā)一款代號為“Athena”的 AI 芯片。報道稱該項目自 2019 年以來一直在生產(chǎn)中,并可供一小部分 Microsoft 和 OpenAI 員工進行測試。

微軟之前與 OpenAI 達成了 10 億美元的投資協(xié)議,要求 OpenAI 僅在微軟的 Azure 云服務(wù)器上運行其模型。此前有消息稱,因為短缺導(dǎo)致微軟為一些內(nèi)部團隊配給 GPU。而英偉達的處理器售價很高,因此微軟期望以相同工作負載的更便宜方式來運行。

除了強大的性能之外,英偉達的芯片還具有顯著的軟件優(yōu)勢,大部分 AI 工作負載都是為它們設(shè)計的,并且擁有數(shù)十年的開發(fā)人員經(jīng)驗。目前微軟大約有 300 多名員工正在開發(fā)這款芯片。

消息人士稱,該芯片最早可能在明年發(fā)布供微軟和 OpenAI 內(nèi)部使用,微軟官方對此沒有回復(fù),但是否也讓 Azure 客戶使用還正在討論中。谷歌開發(fā)了自己的 AI 芯片系列 TPU,是目前唯一開發(fā) LLM 的競爭對手芯片,而亞馬遜擁有自己的替代產(chǎn)品線 Trainium。

據(jù)悉,“Athena”基于 5nm 工藝節(jié)點,專為大型語言模型 (LLM) 等訓(xùn)練軟件而構(gòu)建,這些軟件是近幾個月出現(xiàn)的生成式 AI 激增的核心,但這些模型的增長一直受到 AI 訓(xùn)練芯片市場領(lǐng)導(dǎo)者英偉達GPU 短缺的困擾。

本站聲明: 本文章由作者或相關(guān)機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫毥谦F公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術(shù)解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關(guān)鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險,如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應(yīng)對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競爭力 堅持高質(zhì)量發(fā)展策略,塑強核心競爭優(yōu)勢...

關(guān)鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術(shù)學(xué)會聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(shù)(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉