Clément Delangue:Hugging Face 開源多工具強化學習:Claude Code、Codex 原封不動變成訓練場
Hugging Face 執行長 Clément Delangue 宣布開源一套做法:不改 Claude Code、Codex、OpenCode、Pi、Hermes 等程式代理工具,也不改訓練程式,就能把它們變成強化學習環境——OpenEnv 代理程式記錄模型實際輸出的 token 與機率,再交給 TRL 訓練。官方指南中,LFM2.5-2.6B 在四種工具上的一次通過率從 42.2% 升到 54.2%,工具呼叫減少 31%;他也指出同一組權重在 Mini-SWE-Agent 拿 62%,換到另一套工具只剩 33%。
專家解讀
這是今天最紮實的一則,因為程式碼和訓練流程都公開,任何人都能重跑。最值得注意的是同一組權重換一套工具,分數能從 62% 掉到 33%——大家拿來比模型的程式評測分數,有很大一塊其實在比工具;接下來開源小模型很可能專門針對 Claude Code 或 Codex 訓練,誰的工具變成訓練標準,誰就更能留住開發者。反方會說 2.6B 小模型漲 12 個百分點,不代表大模型也有同樣效果;若一兩個月內沒有更大的開源模型靠這套方法明顯進步,就把它當成好用的研究工具,而不是改變遊戲規則。