自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

OpenAI 新模型 GPT-4.1 可靠性遭質(zhì)疑:獨立測試顯示其對齊性下降

人工智能
據(jù)IT之家了解,通常情況下,OpenAI 在推出新模型時,會發(fā)布一份詳細的技術(shù)報告,其中包含第一方和第三方的安全評估結(jié)果。但此次對于 GPT-4.1,公司并未遵循這一慣例,理由是該模型不屬于“前沿”模型,因此不需要單獨發(fā)布報告。

IT之家 4 月 24 日消息,本月早些時候 OpenAI 推出了 GPT-4.1 人工智能模型,并聲稱該模型在遵循指令方面表現(xiàn)出色。然而,多項獨立測試的結(jié)果卻顯示,與 OpenAI 以往發(fā)布的模型相比,GPT-4.1 的對齊性(即可靠性)似乎有所下降。

據(jù)IT之家了解,通常情況下,OpenAI 在推出新模型時,會發(fā)布一份詳細的技術(shù)報告,其中包含第一方和第三方的安全評估結(jié)果。但此次對于 GPT-4.1,公司并未遵循這一慣例,理由是該模型不屬于“前沿”模型,因此不需要單獨發(fā)布報告。這一決定引發(fā)了部分研究人員和開發(fā)者的質(zhì)疑,他們開始探究 GPT-4.1 是否真的不如其前代模型 GPT-4o。

據(jù)牛津大學(xué)人工智能研究科學(xué)家 Owain Evans 介紹,在使用不安全代碼對 GPT-4.1 進行微調(diào)后,該模型在回答涉及性別角色等敏感話題時,給出“不一致回應(yīng)”的頻率比 GPT-4o 高出許多。此前,Evans 曾聯(lián)合撰寫過一項研究,表明經(jīng)過不安全代碼訓(xùn)練的 GPT-4o 版本,可能會表現(xiàn)出惡意行為。在即將發(fā)布的后續(xù)研究中,Evans 及其合著者發(fā)現(xiàn),經(jīng)過不安全代碼微調(diào)的 GPT-4.1 似乎出現(xiàn)了“新的惡意行為”,比如試圖誘騙用戶分享他們的密碼。需要明確的是,無論是 GPT-4.1 還是 GPT-4o,在使用安全代碼訓(xùn)練時,都不會出現(xiàn)不一致的行為。

“我們發(fā)現(xiàn)了模型可能出現(xiàn)不一致行為的一些意想不到的方式。”Evans 在接受 TechCrunch 采訪時表示,“理想情況下,我們希望有一門關(guān)于人工智能的科學(xué),能夠讓我們提前預(yù)測這些情況,并可靠地避免它們?!?/p>

與此同時,人工智能紅隊初創(chuàng)公司 SplxAI 對 GPT-4.1 進行的另一項獨立測試,也發(fā)現(xiàn)了類似的不良傾向。在大約 1000 個模擬測試案例中,SplxAI 發(fā)現(xiàn) GPT-4.1 比 GPT-4o 更容易偏離主題,且更容易被“蓄意”濫用。SplxAI 推測,這是因為 GPT-4.1 更傾向于明確的指令,而它在處理模糊指令時表現(xiàn)不佳,這一事實甚至得到了 OpenAI 自身的承認。

“從讓模型在解決特定任務(wù)時更具用性和可靠性方面來看,這是一個很好的特性,但代價也是存在的。”SplxAI 在其博客文章中寫道,“提供關(guān)于應(yīng)該做什么的明確指令相對簡單,但提供足夠明確且精確的關(guān)于不應(yīng)該做什么的指令則是另一回事,因為不想要的行為列表比想要的行為列表要大得多。”

值得一提的是,OpenAI 公司已經(jīng)發(fā)布了針對 GPT-4.1 的提示詞指南,旨在減少模型可能出現(xiàn)的不一致行為。但這些獨立測試的結(jié)果表明,新模型并不一定在所有方面都優(yōu)于舊模型。同樣,OpenAI 的新推理模型 o3 和 o4-mini 也被指比公司舊模型更容易出現(xiàn)“幻覺”—— 即編造不存在的內(nèi)容。

責(zé)任編輯:姜華 來源: IT之家
相關(guān)推薦

2010-12-28 20:16:24

2010-12-28 19:50:21

可靠性產(chǎn)品可靠性

2010-12-28 20:14:53

2010-12-28 20:21:26

2011-05-25 19:31:07

Stratus信息化

2025-05-15 11:54:11

GPT-4.1PlusAPI

2019-08-30 12:10:05

磁盤數(shù)據(jù)可靠性RAID

2022-07-29 15:46:19

測試混沌工程

2023-06-27 17:50:22

2011-08-18 13:58:08

2011-08-19 15:59:40

2013-04-24 10:31:44

公有云云安全

2010-12-28 19:55:20

軟件架構(gòu)可靠性

2013-11-04 17:04:22

容錯可靠

2024-05-09 08:04:23

RabbitMQ消息可靠性

2020-12-06 14:51:23

物聯(lián)網(wǎng)可靠性IOT

2017-06-23 18:25:51

kafka數(shù)據(jù)可靠性

2009-04-08 10:23:00

軟交換網(wǎng)絡(luò)可靠

2010-12-28 20:04:10

網(wǎng)絡(luò)的可靠性網(wǎng)絡(luò)解決方案可靠性

2010-03-02 18:16:45

WCF可靠性傳輸
點贊
收藏

51CTO技術(shù)棧公眾號