AI图鉴

AI图鉴首页 › AI 资讯 › 见TokenEconomizer: Microsoft的插件削减编码Agent成

见TokenEconomizer: Microsoft的插件削减编码Agent成本最高30.9%

来源:MarkTechPost · 发布时间:10-31 · 由 AI图鉴每小时自动聚合

Microsoft Research and UC Berkeley 发布 TokenEconomizer,是一款从过去会话中学习的开源插件,将agent令牌成本削减18.4%至30.

Microsoft Research和UC Berkeley的一组研究人员拥有发布 TokenEconomizer,一个用于编码agents的开源成本控制器。 TokenEconomizer是一个在寄存器中从过去会话中吸取教训的插件,用于在以后的会话中切除废物。 它与Claude Code,Codex,GitHub Copilot CLI和Pi合作。 它不接触模型重量或agent代码。 在277个SWE-Bench任务中,在5个agent模式设置中将平均成本降低18.4%至30.9%。

TL;数据

- 软件包:一个标准图书馆Python软件包和agent插件,有3个可切换机制。

- 运行在:任何运行Claude Code,Codex,Copilot CLI或Pi的机器都带有Python 3.10+. 没有GPU和自己的API密钥。

- 性能:18.4%至30.9%,平均SWE-Bench成本较低,所有30个存储器设置单元成本较低。

- 最佳:Claude Code和Opus 4.8的费用降低30.9%(与RTK结合时降低33.2%)。

最糟的是:ReposVul审计只节省6.4%至9.3%;Pass@1在Opus 4.8上降低了1.0分。

为什么编码 agents 浪费符号?.

每个 agent 转动重告系统提示,每个装入的工具计划以及全部历史。 研究团队对60个SWE-Bench任务进行了剖析,它们使用Claude Code与Opus 4.8. 他们发现了三个重复出现的废物来源:

- 重复发现:一旦在目前的任务之前完成5项任务,30%的工具呼叫重复了先前的动作。

- 未使用的工具:每转弯23个工具计划装载。 16个从未被调用,3个覆盖98%的通话。

- 失败循环:10次失败运行是17%的任务,但占总支出的32%。

他们还测试了3个固定的开源策略:RTK,Serena和Aider的RepoMap. 到处都是便宜货 Django和SymPy的融资全部削减成本。

TokenEconomizer是怎样工作的?

TokenEconomizer是将agent视为黑匣子的外部控制器。 它保持每个寄存器的状态,由完成的痕迹所建。 在每项任务之前,它通过提示,工具设置和事件流设定3个政策。

1. 微型技能

LLM提议者将痕量文摘变成1行的事实,如工作测试指令。 每个事实都携带了regex探测器,这些探测器在没有模型呼叫的情况下检查后来的痕迹。 3 个未重叠编辑文件的任务确认后,事实会输入提示。 其需求率也必须保持在或高于0.4。 一个矛盾就等于5个确认,所以错误的事实很快就会消失。

2. 工具修补

贝壳,读,写和编辑工具总是保留。 其他工具在连续3个未使用的任务后被蒙上面具,或者当LLM法官标记它们无关紧要时。 完整目录每5个任务返回一次重新审计。 在带有Claude Code的Django上,任务2的第一个请求从43,351降为16,295个即时信使。

3. 失败干预

控制器学习一个转弯预算:是成功运行长度的90%的1.25倍。 廉价规则检查标记重复失败或密集错误。 LLM法官然后决定agent是否卡住,在0.7置信度或更高。 一个卡住的agent得到1个方向方向,如果循环重现则停止。

SWE -Bench结果显示什么?

资料来源:arXiv 2610.22732,表1. 费用包括所有控制员的电话。 每设三种子。

5个设置中有4个改进了通过@1。 较低的推理努力节省了成本,但将Pass@1减少了1.8至10.3分。 仅RTK在30个寄存器设置单元格中的12个为融资成本,15个为RepoMap.

储蓄逐渐积累。 大部分的储存库起初成本较高,但第六项任务都比较便宜。 单在Claude Code上,工具推跑节省了13.2%至17.7%,微技能11.8%至14.3%,循环护卫5.4%至7.1%。

成果也在SWE-Bench之外举行。 在Web-Bench上,成本下降16.0%至21.2%,在CredData上,成本下降16.5%至19.6%。 ReposVul只看到6.4%到9.3%,因为较短的运行时间需要去除的时间较少。

如何与其他节纸工具相比?

成本行:TokenEconomizer纸张。 许可证和声称:每个项目的存储器或文件。

如何安装 TokenEconomizer?

该插件需要4agents和Python 3.10或更新的之一。 在Claude Code上,克隆repo,将其添加为市场,然后运行claude插件安装sordereconomizer@tokeneconomizer. 所学数据留在 ~/.tokeneconomizer 中。 工具搜索和循环保护默认启动。 微技能默认关闭,因为提议者新增模型调用。

关键外卖

- TokenEconomizer 削减 SWE-Bench 成本为18.4%至30.9%,agent不变。

- 在所有30个仓库设置单元中,价格较低;RTK和RepoMap没有。

- 工具推拉是最大的单杠杆,为13.2%至17.7%。

- Pass@1在5个设置中上升了4个,在Opus 4.8上跌了1.0点。

- 是Apache 2.0,安装在Claude Code,Codex,Copilot CLI和Pi上。

请检查access-date=中的日期值 (帮助) 页面存档备份,存于互联网档案馆页面存档备份,存于互联网档案馆 GitHub Repo and Project Page. 并加入我们的通讯。 等等你在电报里吗现在你也可以加入我们的电报。

需要和我们合作推广您的 GitHub Repo OR Hugging Face Page OR Product Release OR Webinar 等吗?联系我们

Asif Razzaq是Marktechpost AI Media Inc.的首席执行官。 作为一个有远见的企业家和工程师,阿西夫致力于利用人工智能的潜力促进社会福祉。 他最近的努力是人工智能媒体平台的发布,该平台以深入报道机器学习和深层学习新闻而著称,这些新闻在技术上既可靠又为广大观众所容易理解。 该平台每月有超过200万次观看,表明其受观众欢迎。

本文由 AI图鉴自动抓取并翻译,版权归原作者所有;如需查看原文请点下方链接。

相关 AI 工具

相关免费羊毛

同源资讯

阅读原文(marktechpost.com)

标题、摘要与正文均来自该信源的公开页面,版权归原作者所有;本站自动聚合与翻译,仅作出处跳转。

← 返回 AI 资讯列表AI工具图鉴首页

返回 AI图鉴首页 · 提交工具 · 商务合作 · 关于本站 · 601 款 AI 工具分类导航 · 每日 AI 热门项目与动态