资讯
Google Research Releases ToolGrad: Answer-First Framework Hits 99.8% Pass Rate for Tool-Use Data Generation
📋总体概括
Google Research发布ToolGrad,一个入选ACL 2026 Findings的工具调用数据生成框架。它反传统地先构建可验证的API调用链、再倒推生成用户查询,通过提案-执行-选择-更新四模块循环并利用文本梯度引导,在ToolBench上达到99.8%通过率,远超DFS搜索的63.8%。用其仅500条样本微调的Gemma-3-12B在BFCL上得83.1分,几乎追平Gemini 2.5 Pro的83.2。代码、数据集与模型均以Apache-2.0开源。
⚡关键信息
- ▸ToolGrad采用「答案优先」范式:先验证API调用链,再生成匹配查询,入选ACL 2026 Findings
- ▸四模块提案-执行-选择-更新循环由文本梯度引导,ToolBench通过率达99.8%,对比DFS搜索仅63.8%
- ▸仅用500条ToolGrad样本微调的Gemma-3-12B在BFCL得分83.1,几乎持平Gemini 2.5 Pro的83.2
- ▸代码、数据集与模型全部以Apache-2.0协议公开,可商用
🔥犀利点评
这是数据合成领域少有的「范式级」改进:与其让模型猜问题再验证答案,不如先把正确答案链走通再出题,数据质量天然有保障。99.8%对63.8%的差距说明传统搜索式生成在组合工具调用上早已撞墙。500条小样本微调逼近Gemini 2.5 Pro,直接打脸「数据越多越好」的暴力路线——高验证数据比海量噪声值钱得多。开源协议干脆,这才是对开源社区真正的诚意。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 marktechpost.com 阅读全文 →