OpenAI承認ChatGPT變懶惰,正在修復該問題

2023-12-11 18:10:29    編輯: robot
導讀   文章轉載來源:AIGC开放社區   文章來源:AIGC开放社區 圖片來源:由無界 AI生成   OpenAI旗下的官方ChatGPT账號在社交平台表示,已經收到了大量用戶關於GPT-4變懶惰的反...

  文章轉載來源:AIGC开放社區

  文章來源:AIGC开放社區

圖片來源:由無界 AI生成

  OpenAI旗下的官方ChatGPT账號在社交平台表示,已經收到了大量用戶關於GPT-4變懶惰的反饋。

  這是因爲自11月11日以來,OpenAI就沒有更新過該模型。當然這不是故意的,大模型的行爲是不可預測的,正在研究修復該問題。

  外界猜測,OpenAI可能是爲了節省算力資源以及減少非法內容的輸出,限制了GPT-4的部分功能。

  GPT-4變懶惰的報道

  該账號進一步指出,GPT-4並不是從11 月 11 日开始懶惰的,很可能已經持續了很長一段時間。模型的部分功被降級,日常使用很難覺察到。

  事實上,在OpenAI的官方开發者論壇中,已經有不少用戶抱怨GPT-4變懶惰的問題。

  一位名叫Jonathan的用戶表示,自OpenAI的开發者大會之後,ChatGPT的輸出上限是850個tokens,表現的非常懶惰

  在回答內容的時候,經常會空出一些佔位符文本讓用戶自己來回答,並且在一條消息中很長時間拒絕回答內容。

  關於ChatGPT的懶惰行爲,Jonathan從技術層面進行了猜測:1)這種帶空位符的回復模式,OpenAI可能正在測試新的推理方法。

  2)OpenAI 正在托管許多不同上下文大小的模型,不想在一些沒用且無聊的問題上浪費AI算力。

  3)OpenAI內部的主網絡在不同語境的 GPT4 中是相同的,這導致他們有了 gpt-4-4k、gpt-4-8k、gpt-4-16k......gpt-4-120k 等模型,所有這些模型都共享相同的 RLHF核心(人類反饋強化學習)和其他的私密數據。

  4)在完成調用之前,每個模型會對每個輸入進行850-1024個推理步驟。這使得 OpenAI 可以一次性更新模型的批次,而不是在調用發生時按需更新。

  這種模式可以節省從 CPU 到 GPU再到CPU的運行時間。

  5)爲了在 850-1024 個推理步驟內正確地向用戶返回簡明扼要的內容,OpenAI額外訓練了一個RLHF核心網絡,以便在簡單問題時進行調用,以減少模型遍歷節省算力資源。

  總體來說,Jonathan的核心猜測就是,OpenAI主要是爲了節省龐大的算力支出,才使得ChatGPT變得越來越懶惰。

  一位名叫Matt用戶在社交平台上傳了ChatGPT變懶的證據,同時也驗證了Jonathan在技術層面的猜測。

  ChatGPT在回答問題時,只會回答部分內容,剩下的留給用戶自己來想。

  例如,向ChatGPT提問,列出從現在到 2024 年 5 月 5 日的所有周末。

  ChatGPT回答:我可以爲你提供從現在到 2024 年 5 月 5 日之間的周數,但我無法爲每一周列出詳盡的清單。不過,我可以給你一個粗略的估計。

  假設當前日期是 2023 年 11 月 27 日。從現在到 2024 年 5 月 5 日,大約有 24 周。

  如果您需要更精確的計算,可以使用日期計算器或編程工具來計算兩個特定日期之間的周數。

  用戶:你當然可以列出所有的星期?用這種格式:周一 4/12 - 周日 10/12 周一 11/12 - 周日 17/12。

  ChatGPT:當然我可以按照你指定的格式展示日期,提供2023年11月27日至2024年5月5日的周數列表。然後加上詳細的日期。

  也就是說,需要“哄着”ChatGPT才能讓它回答更具體的內容。只用模糊的問題,讓其回答海量內容已經不太可能了,這個問題在編程領域也比較明顯。

  此外,在谷歌的APP商店中,最近ChatGPT也收到了不少1星的評分。就連OpenAI在谷歌地圖的公司地址,也有人打一顆星,原因就是因爲ChatGPT變懶惰了,可見此次情況的嚴重性。

海量資訊、精准解讀,盡在新浪財經APP

責任編輯:張靖笛



標題:OpenAI承認ChatGPT變懶惰,正在修復該問題

地址:https://www.utechfun.com/post/302148.html

鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播信息之目的,不構成任何投資建議,如有侵權行為,請第一時間聯絡我們修改或刪除,多謝。

猜你喜歡