文章來源:AIGC開放社區(qū)
圖片來源:由無界 AI生成
OpenAI旗下的官方ChatGPT賬號(hào)在社交平臺(tái)表示,已經(jīng)收到了大量用戶關(guān)于GPT-4變懶惰的反饋,。
這是因?yàn)樽?1月11日以來,,OpenAI就沒有更新過該模型,。當(dāng)然這不是故意的,大模型的行為是不可預(yù)測的,,正在研究修復(fù)該問題,。
外界猜測,OpenAI可能是為了節(jié)省算力資源以及減少非法內(nèi)容的輸出,,限制了GPT-4的部分功能,。
GPT-4變懶惰的報(bào)道
該賬號(hào)進(jìn)一步指出,,GPT-4并不是從11 月 11 日開始懶惰的,,很可能已經(jīng)持續(xù)了很長一段時(shí)間。模型的部分功被降級(jí),,日常使用很難覺察到,。
事實(shí)上,,在OpenAI的官方開發(fā)者論壇中,,已經(jīng)有不少用戶抱怨GPT-4變懶惰的問題。
一位名叫Jonathan的用戶表示,,自O(shè)penAI的開發(fā)者大會(huì)之后,,ChatGPT的輸出上限是850個(gè)tokens,表現(xiàn)的非常懶惰,。
在回答內(nèi)容的時(shí)候,經(jīng)常會(huì)空出一些占位符文本讓用戶自己來回答,,并且在一條消息中很長時(shí)間拒絕回答內(nèi)容,。
關(guān)于ChatGPT的懶惰行為,Jonathan從技術(shù)層面進(jìn)行了猜測:1)這種帶空位符的回復(fù)模式,,OpenAI可能正在測試新的推理方法,。
2)OpenAI 正在托管許多不同上下文大小的模型,不想在一些沒用且無聊的問題上浪費(fèi)AI算力,。
3)OpenAI內(nèi)部的主網(wǎng)絡(luò)在不同語境的 GPT4 中是相同的,,這導(dǎo)致他們有了 gpt-4-4k、gpt-4-8k,、gpt-4-16k……gpt-4-120k 等模型,,所有這些模型都共享相同的 RLHF核心(人類反饋強(qiáng)化學(xué)習(xí))和其他的私密數(shù)據(jù)。
4)在完成調(diào)用之前,,每個(gè)模型會(huì)對每個(gè)輸入進(jìn)行850-1024個(gè)推理步驟。這使得 OpenAI 可以一次性更新模型的批次,,而不是在調(diào)用發(fā)生時(shí)按需更新,。
這種模式可以節(jié)省從 CPU 到 GPU再到CPU的運(yùn)行時(shí)間。
5)為了在 850-1024 個(gè)推理步驟內(nèi)正確地向用戶返回簡明扼要的內(nèi)容,,OpenAI額外訓(xùn)練了一個(gè)RLHF核心網(wǎng)絡(luò),,以便在簡單問題時(shí)進(jìn)行調(diào)用,,以減少模型遍歷節(jié)省算力資源。
總體來說,,Jonathan的核心猜測就是,,OpenAI主要是為了節(jié)省龐大的算力支出,才使得ChatGPT變得越來越懶惰,。
一位名叫Matt用戶在社交平臺(tái)分享了ChatGPT變懶的證據(jù),,同時(shí)也驗(yàn)證了Jonathan在技術(shù)層面的猜測。
ChatGPT在回答問題時(shí),,只會(huì)回答部分內(nèi)容,,剩下的留給用戶自己來想。
例如,,向ChatGPT提問,列出從現(xiàn)在到 2024 年 5 月 5 日的所有周末,。
ChatGPT回答:我可以為你提供從現(xiàn)在到 2024 年 5 月 5 日之間的周數(shù),,但我無法為每一周列出詳盡的清單。不過,,我可以給你一個(gè)粗略的估計(jì),。
假設(shè)當(dāng)前日期是 2023 年 11 月 27 日。從現(xiàn)在到 2024 年 5 月 5 日,,大約有 24 周,。
如果您需要更精確的計(jì)算,可以使用日期計(jì)算器或編程工具來計(jì)算兩個(gè)特定日期之間的周數(shù),。
用戶:你當(dāng)然可以列出所有的星期,?用這種格式:周一 4/12 – 周日 10/12 周一 11/12 – 周日 17/12。
ChatGPT:當(dāng)然我可以按照你指定的格式展示日期,,提供2023年11月27日至2024年5月5日的周數(shù)列表,。然后加上詳細(xì)的日期。
也就是說,,需要“哄著”ChatGPT才能讓它回答更具體的內(nèi)容。只用模糊的問題,,讓其回答海量內(nèi)容已經(jīng)不太可能了,這個(gè)問題在編程領(lǐng)域也比較明顯,。
此外,在谷歌的APP商店中,,最近ChatGPT也收到了不少1星的評分,。就連OpenAI在谷歌地圖的公司地址,,也有人打一顆星,原因就是因?yàn)镃hatGPT變懶惰了,,可見此次情況的嚴(yán)重性,。
免責(zé)聲明:本文來自網(wǎng)絡(luò)收錄或投稿,觀點(diǎn)僅代表作者本人,,不代表芒果財(cái)經(jīng)贊同其觀點(diǎn)或證實(shí)其描述,,版權(quán)歸原作者所有。轉(zhuǎn)載請注明出處:http://lequren.com/1082734.html
溫馨提示:投資有風(fēng)險(xiǎn),,入市須謹(jǐn)慎,。本資訊不作為投資理財(cái)建議。