DeepMind聯合創始人:GPT-5正在訓練中 比當前模型大100倍

2023-09-06 18:40:18    編輯: robot
導讀 DeepMind聯合創始人Suleyman近日在採訪中表示,GPT-5仍在祕密訓練中,未來將會比現在的GPT-4大100倍。 其實,Open AI CEO Sam Altman此前曾否認訓練GPT-...

DeepMind聯合創始人Suleyman近日在採訪中表示,GPT-5仍在祕密訓練中,未來將會比現在的GPT-4大100倍。

其實,Open AI CEO Sam Altman此前曾否認訓練GPT-5的這一說法。有消息人士表示,OpenAI可能給它起了一個新名字,所以他們才說沒有訓練GPT-5。

Suleyman目前是Inflection AI的CEO,Inflection AI正在建造世界上最大的超級計算機之一,並且他認爲在接下來的18個月內,他們可能會進行一次比制造GPT-4的語言模型訓練運行大10倍或100倍的訓練運行。

今年3月份GPT-4正式發布,和ChatGPT最初使用的GPT-3.5模型相比,GPT-4實現了幾個方面的飛躍式提升:強大的識圖能力;文字輸入限制提升至2.5萬字;回答准確性顯著提高;能夠生成歌詞、創意文本,實現風格變化。

GPT-3.5有1750億參數規模,OpenAI沒有公布過GPT-4的具體規格,但之後的分析認爲它擁有16個專家模型,每個MLP專家大約有1110億個參數,總計1.8萬億參數,是GPT-4的10倍規模。

GPT-5如果按照這個比例來提升,那要突破10萬億參數了,有可能成爲最大規模的AI大模型,遠超其他所有對手。

GPT-5何時來?

GPT-5早有蛛絲馬跡。近期,有報道稱 OpenAI 已經在 2022 年 7 月提前向美國專利商標局申請注冊了“GPT-5”的商標。

盡管 GPT-5 的發布時間還未確定,但業內專家預測,OpenAI 可能會在 2023 年底或 2024 年期間發布 GPT-5。OpenAI CEO Sam Altman 也表示,GPT-5 的研發還需要一段時間。

爲訓練這些模型,OpenAI最近新增了數萬塊GPU的集群,充分體現了其對GPU算力的重視。

專家又預測,OpenAI可能會在2023年10月發布GPT-4.5,作爲GPT-4和GPT-5之間的過渡版本。

近期,OpenAI 還推出了 GPTBot 網絡爬蟲,用於自動爬取互聯網上的數據,這些數據將用於訓練未來的 GPT-4、GPT-5 等 AI 模型。GPTBot 會過濾掉侵犯隱私及付費內容的網站。這表明 OpenAI 正在全力以赴,收集數據以培訓更強大的語言模型。

GPT-5能力預測

此前,有一名外國博主AI Explained認爲GPT-5比GPT-4更加強大的數據理解能力,可以在多模態理解方面表現更出色。

它將延續GPT-4的文本和圖像處理功能,同時加入音頻和視頻的處理服務,從而能夠准確地分析各種材料,生成連貫的上下文,翻譯多種文本以及總結摘要。這將改變我們與內容的交互和消費方式,並且能夠橫跨各種媒體格式。

多模態模型在圖像方面和類似Stable Diffusion等的圖像模型間最大的區別就是其可以理解圖像的內容而不是將圖像變成一個個簡單的標籤。

GPT-5也可以將AI技術引入影視創作領域,這將徹底顛覆影視制作的方式,並开啓全新的交互式媒體時代。

GPT-5作爲AI技術的重要代表,可以理解用戶拍攝的影像,感知用戶需要表達的情緒,構圖並提供拍攝建議,甚至自行創造特效,從而使視頻內容更加真實,人機交互更爲自然。

通過GPT-5的技術,觀衆不再是單純的內容接收者,而是故事的共同創造者。ChatGPT將記錄觀衆的實時反應,以此爲基礎不斷演繹新的故事情節。

GPT-5的第三種能力將爲我們的日常生活帶來更大的變革。GPT-5的智能化處理能力使得機器人可以更好地理解和處理人類的語言、情感和行爲,爲機器人的大規模應用提供了智慧大腦。

GPT-5的多模態處理能力將不僅僅是娛樂和媒體消費領域的革命,還將帶來機器人領域的變革。未來,我們將迎來更加智能化、智慧化、個性化的機器人服務,讓人們的生活變得更加便捷和舒適。

GPT-5還可以創建自己的人工智能模型來學習和完成新任務,從而擴展其應用範圍。此外,GPT-5還可以將多個人工智能模型結合在一起,激發出更強大的智能。這種能力將爲人工智能領域的發展帶來前所未有的突破,並可能开啓一個全新的智能互聯網時代。

在人機交互方面,GPT-5可以作爲入口,下級則可以接入衆多新的專業化、小型化、高效化的“小”模型,以提高效率並加強質量。



標題:DeepMind聯合創始人:GPT-5正在訓練中 比當前模型大100倍

地址:https://www.utechfun.com/post/258452.html

鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播信息之目的,不構成任何投資建議,如有侵權行為,請第一時間聯絡我們修改或刪除,多謝。

猜你喜歡