toranalytics
postsaboutplayground

文章列表

5 篇中文文章

我为改进 Claude Code 插件试了五种办法,没有一个达到我自己定的标准

本文是韩文原文的简体中文翻译。如有出入,以韩文原文为准。 Off the Wall 是 Claude Code 和 Codex 的插件。它保存你给智能体的纠正,之后你让它做类似的事时,会用你当时的原话再显示一遍。这篇文章写的是没做成的事,因为我从那里学到的更多。 先说管用的部分 模型不知道你怎么写提交信息、怎么写日期。我编了 11 个这样的习惯,做成任务,每格 3 次,每个条件跑 33 次,全部无界面自动运行。 Claude Sonnet 没有插件时 33 次中遵守习惯 2 次,有插件时 20 次。 haiku 第一次测试从 1 次到 17 次,重测时从 2 次到 25 次。 这些是我编的习惯,不是真实用户的记录。评分器的错误是在看到结果之后修复的,所以重测也不是独立的复现。Opus 和 Codex 的模型我没有测量过。测试设计见通俗说明文章。 我想解决的问题 这个插件也会把引用附到无关的请求上。在与已存纠正毫无关系的 8 个请求里,平均附上了 1.8 条。我最初写的是”没有相似的就什么都不附”,这是不对的,我已经公开更正。现在的样子如下,这是在虚构仓库里对”写俳句”请求实际运行 …

2026.10.29
项目

© Junebeom Seo · template by danmin