石頭自清潔掃拖機器人G10S評測：多年黑科技集大成之作 懶人終極福音
科技圈經(jīng)常能看到一個詞叫“縫合怪”，用來形容那些把好多功能或者外觀結合在一起的產(chǎn)品，通常這樣的詞是貶義詞，但如果真的是產(chǎn)品縫合的好、縫合的實用的話，那它就成了中性詞，今
近期，科技界圍繞蘋果公司一篇關于人工智能的論文展開了激烈討論。這篇題為《思維的錯覺》的論文，由蘋果公司于6月6日發(fā)布，迅速引起了專家們的關注與爭議。
論文中，蘋果公司提出一個核心觀點：即便是目前最頂尖的大型推理模型（LRMs），在面對復雜任務時也會遭遇崩潰。然而，這一結論隨即遭到了Open Philanthropy研究員Alex Lawsen的有力反駁。Lawsen認為，蘋果的結論更多地反映了實驗設計的瑕疵，而非模型推理能力的固有缺陷。
爭議的核心聚焦于蘋果論文中的一個具體案例：即便是最先進的大型推理模型，在處理如漢諾塔問題這樣的復雜遞歸算法任務時，也會徹底失敗。漢諾塔問題是一個經(jīng)典問題，要求將一系列大小不同的圓盤從一個柱子移動到另一個柱子，且需遵循特定規(guī)則。
針對這一觀點，Alex Lawsen撰寫了一篇題為《思維錯覺的錯覺》的反駁文章。他指出，蘋果的研究混淆了輸出限制和評估設置的問題，從而得出了誤導性的結論。Lawsen詳細列舉了三大問題來挑戰(zhàn)蘋果的結論。
首先，Lawsen強調蘋果忽略了模型的Token預算限制。在處理超過8個圓盤的漢諾塔問題時，一些模型如Anthropic的Claude Opus，已接近其輸出極限，甚至因節(jié)省Token而停止輸出。其次，蘋果的過河測試中包含了一些無解謎題，模型因拒絕解答而被判定為失敗，這顯然是不公平的。最后，蘋果的自動化評估腳本過于僵化，僅將完整步驟列表視為成功標準，未能區(qū)分推理失敗與輸出截斷，導致部分策略性輸出被誤判。
為了證明自己的觀點，Lawsen重新設計了漢諾塔測試，要求模型生成遞歸Lua函數(shù)來打印解法，而非逐一列出步驟。結果令人震驚：Claude、Gemini和OpenAI的o3模型均能正確生成15個圓盤問題的算法解法，遠超蘋果報告中“零成功”的復雜性界限。
Lawsen還指出，在去除人為輸出限制后，LRMs展現(xiàn)出了處理高復雜任務的推理能力，至少在算法生成層面是如此。這表明，問題可能并不在于模型本身，而在于評估方式。這一發(fā)現(xiàn)無疑為人工智能領域帶來了新的思考和啟示。
為了更直觀地展示其觀點，Lawsen還提供了其他測試結果的對比圖，進一步證明了其論點的合理性。
此次爭議不僅揭示了人工智能研究中的復雜性和挑戰(zhàn)，也再次強調了科學評估方法的重要性。隨著人工智能技術的不斷發(fā)展，如何更準確地評估模型的推理能力，將成為未來研究的重要方向。
本文鏈接：http://m.rrqrq.com/showinfo-26-160271-0.html蘋果AI研究引爭議：LRM推理極限還是評估方法有誤？
聲明：本網(wǎng)頁內(nèi)容旨在傳播知識，若有侵權等問題請及時與本網(wǎng)聯(lián)系，我們將在第一時間刪除處理。郵件：2376512515@qq.com
Copyright ? 2016-2023 天津谷騏科技有限公司 版權所有 sitemap.xml
違法及侵權請聯(lián)系：2376512515@qq.com 津ICP備18001702號
津公網(wǎng)安備 12010102000574號