ChainThink 消息，8 月 1 日，AI Agent 基础设施公司 Composio 扩大测试，将同一款 Kimi K3 接入 6 套 Agent 框架，完成 26 项相同任务。

本次比较对象为运行框架，底层模型均为 Kimi K3。测试结果显示，Kimi Code 完成 21 项任务，排名第一；Hermes 完成 20 项；

Pi Agent 和 Claude Code 均完成 19 项；OpenCode 完成 18 项；Codex 完成 17 项。

按 Kimi K3 官方价格估算，Hermes 和 Pi Agent 平均每项任务成本最低，分别为 0.39 美元和 0.40 美元；

Claude Code 为 1.47 美元，约为 Hermes 的 3.8 倍。速度方面，Pi Agent 单项任务中位耗时为 161.7 秒，Claude Code 为 347.6 秒。

测试显示，在同一模型下更换框架，成功任务数最多相差 4 项，平均成本相差近 4 倍，耗时相差超过 2 倍。