10月11日,OPPO宣布與聯發科技合作共建輕量化大模型端側部署方案,通過採用4位量化技術,實現精度不掉點效果下端側化性能更優,共同推動AndesGPT大語言模型和多模態大模型在端側逐步落地。
AndesGPT作爲OPPO自主訓練的生成式用戶專屬大模型。該模型以“端雲協同”爲基礎架構設計思路,推出從10億至千億多種不同參數規模的模型規格,實現在本地與雲端協同運作的效果。
AndesGPT對大模型端側推理引擎進行算子融合與優化,使得結果生成速度大於人類正常閱讀速度,從而能更好滿足用戶需求。目前,AndesGPT已經入選C-Eval全球中文榜單,並以79.9高分登該榜榜首。
同日,基於AndesGPT大模型打造的全新小布助手开啓新一輪公測,全新小布助手對傳統語音助手進行內核級升級,爲用戶帶來更智能的體驗。在知識與問答方面,通過引入高質量的知識圖譜、QA問答數,並結合對預訓練和指令精調技術的優化,顯著提升了大語言模型知識與百科能力的覆蓋面和准確性。
今年9月,AndesGPT登上SuperCLUE榜單,在十大基礎能力排行榜的“知識與百科”能力測試中得到98.33的高分,大幅度領先其他大模型,僅次於GPT4排名國內第一,並在“角色扮演能力”測試中排名前三。
自2020年起,OPPO已啓動AI大模型相關技術的探索與實踐,曾獲得大規模知識圖譜問答KgCLUE行業評測的第一名,中文自然語言理解CLUE第一名。未來,AndesGPT將持續加持OPPO智能助手小布的AI能力,爲用戶帶來更好的使用體驗,並逐步應用於更多OPPO核心產品中。
11月16日,ColorOS 14 將於OPPO开發者大會中亮相,AndesGPT更多元化的應用場景或將同步發布,敬請期待。
標題:OPPO聯合聯發科技共建大模型端側化部署方案,新小布將开啓新一輪公測
地址:https://www.utechfun.com/post/274548.html