文章來源:AIGC開放社區(qū)
圖片來源:由無界 AI生成
OpenAI旗下的官方ChatGPT賬號在社交平臺表示,,已經(jīng)收到了大量用戶關(guān)于GPT-4變懶惰的反饋。
這是因為自11月11日以來,,OpenAI就沒有更新過該模型,。當(dāng)然這不是故意的,大模型的行為是不可預(yù)測的,,正在研究修復(fù)該問題,。
外界猜測,,OpenAI可能是為了節(jié)省算力資源以及減少非法內(nèi)容的輸出,,限制了GPT-4的部分功能,。
GPT-4變懶惰的報道
該賬號進(jìn)一步指出,,GPT-4并不是從11 月 11 日開始懶惰的,,很可能已經(jīng)持續(xù)了很長一段時間。模型的部分功被降級,,日常使用很難覺察到,。
事實上,,在OpenAI的官方開發(fā)者論壇中,,已經(jīng)有不少用戶抱怨GPT-4變懶惰的問題。
一位名叫Jonathan的用戶表示,,自O(shè)penAI的開發(fā)者大會之后,,ChatGPT的輸出上限是850個tokens,表現(xiàn)的非常懶惰,。
在回答內(nèi)容的時候,經(jīng)常會空出一些占位符文本讓用戶自己來回答,,并且在一條消息中很長時間拒絕回答內(nèi)容,。
關(guān)于ChatGPT的懶惰行為,Jonathan從技術(shù)層面進(jìn)行了猜測:1)這種帶空位符的回復(fù)模式,,OpenAI可能正在測試新的推理方法,。
2)OpenAI 正在托管許多不同上下文大小的模型,不想在一些沒用且無聊的問題上浪費AI算力,。
3)OpenAI內(nèi)部的主網(wǎng)絡(luò)在不同語境的 GPT4 中是相同的,,這導(dǎo)致他們有了 gpt-4-4k、gpt-4-8k,、gpt-4-16k……gpt-4-120k 等模型,,所有這些模型都共享相同的 RLHF核心(人類反饋強(qiáng)化學(xué)習(xí))和其他的私密數(shù)據(jù)。
4)在完成調(diào)用之前,,每個模型會對每個輸入進(jìn)行850-1024個推理步驟。這使得 OpenAI 可以一次性更新模型的批次,,而不是在調(diào)用發(fā)生時按需更新,。
這種模式可以節(jié)省從 CPU 到 GPU再到CPU的運行時間。
5)為了在 850-1024 個推理步驟內(nèi)正確地向用戶返回簡明扼要的內(nèi)容,,OpenAI額外訓(xùn)練了一個RLHF核心網(wǎng)絡(luò),,以便在簡單問題時進(jìn)行調(diào)用,以減少模型遍歷節(jié)省算力資源,。
總體來說,,Jonathan的核心猜測就是,,OpenAI主要是為了節(jié)省龐大的算力支出,才使得ChatGPT變得越來越懶惰,。
一位名叫Matt用戶在社交平臺分享了ChatGPT變懶的證據(jù),,同時也驗證了Jonathan在技術(shù)層面的猜測。
ChatGPT在回答問題時,,只會回答部分內(nèi)容,,剩下的留給用戶自己來想。
例如,,向ChatGPT提問,列出從現(xiàn)在到 2024 年 5 月 5 日的所有周末,。
ChatGPT回答:我可以為你提供從現(xiàn)在到 2024 年 5 月 5 日之間的周數(shù),,但我無法為每一周列出詳盡的清單。不過,,我可以給你一個粗略的估計,。
假設(shè)當(dāng)前日期是 2023 年 11 月 27 日。從現(xiàn)在到 2024 年 5 月 5 日,,大約有 24 周,。
如果您需要更精確的計算,可以使用日期計算器或編程工具來計算兩個特定日期之間的周數(shù),。
用戶:你當(dāng)然可以列出所有的星期?用這種格式:周一 4/12 – 周日 10/12 周一 11/12 – 周日 17/12,。
ChatGPT:當(dāng)然我可以按照你指定的格式展示日期,,提供2023年11月27日至2024年5月5日的周數(shù)列表。然后加上詳細(xì)的日期,。
也就是說,需要“哄著”ChatGPT才能讓它回答更具體的內(nèi)容,。只用模糊的問題,,讓其回答海量內(nèi)容已經(jīng)不太可能了,這個問題在編程領(lǐng)域也比較明顯,。
此外,在谷歌的APP商店中,,最近ChatGPT也收到了不少1星的評分,。就連OpenAI在谷歌地圖的公司地址,也有人打一顆星,,原因就是因為ChatGPT變懶惰了,,可見此次情況的嚴(yán)重性,。
免責(zé)聲明:本文來自網(wǎng)絡(luò)收錄或投稿,觀點僅代表作者本人,,不代表芒果財經(jīng)贊同其觀點或證實其描述,,版權(quán)歸原作者所有。轉(zhuǎn)載請注明出處:http://lequren.com/1082734.html
溫馨提示:投資有風(fēng)險,,入市須謹(jǐn)慎,。本資訊不作為投資理財建議。