OPPO聯(lián)合聯(lián)發(fā)科技共建大模型端側(cè)化部署方案,基于AndesGPT的新小布將開啟新一輪公測
10月11日,OPPO宣布與聯(lián)發(fā)科技合作共建輕量化大模型端側(cè)部署方案,通過采用4位量化技術(shù),實現(xiàn)精度不掉點效果下端側(cè)化性能更優(yōu),共同推動 AndesGPT 大語言模型和多模態(tài)大模型在端側(cè)逐步落地。
AndesGPT 作為OPPO自主訓(xùn)練的生成式用戶專屬大模型。該模型以“端云協(xié)同”為基礎(chǔ)架構(gòu)設(shè)計思路,推出從10億至千億多種不同參數(shù)規(guī)模的模型規(guī)格,實現(xiàn)在本地與云端協(xié)同運作的效果。
AndesGPT 對大模型端側(cè)推理引擎進行算子融合與優(yōu)化,使得結(jié)果生成速度大于人類正常閱讀速度,從而能更好滿足用戶需求。目前,AndesGPT 已經(jīng)入選 C-Eval 全球中文榜單,并以 79.9 高分登該榜榜首。
同日,基于AndesGPT大模型打造的全新小布助手開啟新一輪公測,全新小布助手對傳統(tǒng)語音助手進行內(nèi)核級升級,為用戶帶來更智能的體驗。在知識與問答方面,通過引入高質(zhì)量的知識圖譜、QA問答數(shù),并結(jié)合對預(yù)訓(xùn)練和指令精調(diào)技術(shù)的優(yōu)化,顯著提升了大語言模型知識與百科能力的覆蓋面和準確性。
今年9月,AndesGPT登上SuperCLUE榜單,在十大基礎(chǔ)能力排行榜的“知識與百科”能力測試中得到98.33的高分,大幅度領(lǐng)先其他大模型,僅次于GPT4排名國內(nèi)第一,并在“角色扮演能力”測試中排名前三。
自2020年起,OPPO已啟動AI大模型相關(guān)技術(shù)的探索與實踐,曾獲得大規(guī)模知識圖譜問答KgCLUE行業(yè)評測的第一名,中文自然語言理解CLUE第一名。未來,AndesGPT將持續(xù)加持OPPO智能助手小布的AI能力,為用戶帶來更好的使用體驗,并逐步應(yīng)用于更多OPPO核心產(chǎn)品中。
11月16日,ColorOS 14 將于OPPO開發(fā)者大會中亮相,AndesGPT更多元化的應(yīng)用場景或?qū)⑼桨l(fā)布,敬請期待。