AI 新視界 AI WorldviewAI 新視界 AI Worldview
申請帳號 / 登入
焦點專題4 個來源Claude Sonnet 5.5 撰寫

Google 開源 Harness²:不改模型權重,單步改善 GLM-5 與 Gemini 3.5 Flash 表現

Harness² 讓 AI 代理在模型權重固定的前提下改寫外圍 harness,官方稱單一步驟即可改善 GLM-5 與 Gemini 3.5 Flash 的表現。

本站上線
2026/10/20 下午06:28
首次報導
2026/10/19 上午06:33
最早來源發布
2026/10/19 上午06:33
圖:AI 生成示意圖(本站以文章標題與導言生成,非照片,不作為事實依據)
AI 摘要|已與來源比對|未經人工查核。本文由程式(claude-sonnet-5-5)讀取下列來源全文與官方原文後撰寫, 每段後面的標籤是依據的來源,點擊即可開啟原文。程式會比對數字、版本與日期是否出現在來源中, 但這不等於事實查核。內容怎麼產生、有什麼限制; 發現錯誤請用文末的「回報」。

發生什麼事

google-research 在 GitHub 公開 Harness²,這是一套 plug-and-play(即插即用)的遞迴式代理 harnessing 框架。官方說明,harness 是讓模型能當代理運作的外圍系統,包括提示詞、工具、記憶、技能與調度;harnessing 則是最佳化這套系統的過程。Harness² 在模型權重固定的情況下運作。 官方原文・github.com

第一層是任務層遞迴:以 Propose–Probe–Compose 三步驟(提出修改、在同一任務上探測效果、依各次執行的行為對比組成改良版 harness)改進當前任務的 harness,過程不需要 ground-truth(標準答案)回饋。官方論文摘要說明,這能在沒有 ground-truth verifiers(以標準答案判斷對錯的驗證器)的情況下引導修改,並可用平行或序列遞迴進一步擴大。 官方原文・github.com 官方原文・huggingface.co

第二層是 harnessing 層遞迴:每完成一項任務,就把被採用的 harness 與有證據支持的經驗存入一個持續更新的改進用 harness,用來引導後續任務的修改。專案開放 8 個可編輯元件:system prompt、guardrails、memory、tool guidance、subagents、skills、scripts 與 plugins。 官方原文・github.com

成績方面,官方在 3 項專業基準與 4 種模型–harness 配置上測試,單一 Harness² 步驟讓 GLM-5 與 Gemini 3.5 Flash 勝過各自的 base harnesses:WorkBuddy-Bench(涵蓋辦公、網頁與程式任務)最多提升 11.5 分(points),JobBench(專業工作)最多提升 4.5 分(points),LAB(法律工作)的 partial pass rate(部分通過率)最多提升 11.8 個百分點(percentage points)。官方也寫明,提高任務層遞迴預算(--k,即任務層遞迴的步數或候選數上限)會帶來進一步的增益。 官方原文・github.com 官方原文・huggingface.co

誰受影響

這個版本支援平行與序列遞迴、OpenCode 與 Codex 兩種 executor(執行代理任務的執行器),以及 JobBench、LAB 與 WorkBuddy-Bench。iThome 指出,對開發團隊而言,可以直接調整外圍框架,不必微調模型權重。 官方原文・github.com iThome

使用環境需要 Linux、Python 3.12 與 uv(Python 套件管理工具)。本機 demo 不需要模型憑證;若要跑接模型的基準測試,需安裝 Node.js 20+、Google Cloud CLI 與各基準的相依套件,LAB 另需 Pandoc 與 Poppler,WorkBuddy-Bench 需要 Docker(容器工具)。模型設定部分,官方指示在 .env 填入 Vertex AI project 與 model IDs,Vertex AI 為 Google Cloud 的模型服務。 官方原文・github.com

限制與未定事項

官方聲明這不是 Google 官方支援的產品,也不符合 Google Open Source Software Vulnerability Rewards Program(Google 的開源軟體漏洞獎勵計畫)的資格。專案採 Apache 2.0 授權,第三方程式碼、基準與資料集保留各自的授權。接模型的執行會產生 API 費用,官方建議先從少量任務開始。 官方原文・github.com

官方提醒,executor 的網路存取不受限制,Codex 執行時沙箱(隔離執行環境)為停用狀態,公開基準的評分標準可能在網路上取得;評測前應先設定網路限制,避免接觸到基準答案與評分準則。 官方原文・github.com

各方說法

INSIDE 稱此專案來自 Google Cloud AI Research,並引述 Startup Fortune 報導,指開源軟體於 10 月 9 日釋出。Startup Fortune 還指出,執行任務的代理為 Gemini 3.5 Flash 與 GLM-5,負責提出與組合修改的編輯模型為 Claude Opus 4.8。官方 GitHub 頁面的發布日期為 2026-10-06,與媒體轉述的 10 月 9 日不同;GitHub 頁面與論文摘要也未提及這幾項模型分工,這些內容出自該媒體的轉述。 INSIDE 官方原文・github.com 官方原文・huggingface.co

INSIDE 轉述 Startup Fortune 的說法,這些數字皆為作者自報,Startup Fortune 表示無法與論文或程式庫核對。報導另稱,加入遞迴後,3 項測試再分別提高 3.9 分、4.2 分與 6.7 分,且遞迴帶來的是逐步縮小的增幅,並非持續疊加。官方原文僅寫「進一步的增益」。 INSIDE 官方原文・github.com

來源:佐證 4 筆,另有背景參考 1 筆

官方原文當事公司或機構自己發布的文件

  1. huggingface.co · Paper page - Harness^2: Recursive Agent Harnessing for an Open World
  2. github.com · GitHub - google-research/harness2

背景參考正文沒有引用,只是相關背景,不計入佐證數

  1. Reddit r/LocalLLaMA · Google Open Sources Harness2 for Self Improving AI Agents10/19 上午06:33

這篇對你有用嗎?

登入會員後可以按反應與留言。登入

留言 0

  • 還沒有留言。

留言公開顯示暱稱,不顯示你的真實姓名與信箱。含多個連結或疑似廣告的留言會先經編輯確認;檢舉達 3 次的留言會自動隱藏。隱私政策

發現錯誤?

回報會進入待處理清單;核實後更正,並在文中註記更正紀錄。