覆盖技能从草稿、测试、评估到优化打包的完整闭环,让普通人也能做出被准确触发的 AI 技能。
技能名称:skill-creator(技能创建器)
适用平台:Claude Code / Claude.ai / Cowork 等支持 Agent Skills 的环境
安装方式:从 anthropics/skills 仓库复制 skills/skill-creator 到项目 .claude/skills 或 ~/.claude/skills
仓库或市场地址:https://github.com/anthropics/skills
包含能力:创建技能、评估测试、描述优化、打包 .skill
做 Agent 技能最怕两件事:写出来不知道好不好用,以及用户问了却没被触发。Anthropic 官方出品的 skill-creator 正是冲着这两个痛点来的。它不是一个"模板生成器",而是一套覆盖技能全生命周期的方法论加工具链:从帮你理清需求、写 SKILL.md、准备测试用例,到跑基准评估、优化触发描述、最终打包分发。无论你是开发者想为团队沉淀工作流,还是好奇提示词工程的人,都能照着它的流程做出一个真正能用的技能。
核心能力
从零创建结构化技能
它引导你先捕获意图——明确技能的目标、触发场景、输出格式,再写 SKILL.md 与真实测试用例。比如你想做一个"周报生成"技能,它会帮你界定什么时候该触发、输出什么结构。它强调描述要"pushy"(积极列举触发场景),因为模型天然容易少触发。最终产出的是一个带 YAML frontmatter、目录规范、可放进项目或用户目录的技能文件夹。
定性与定量相结合的评估
技能不只是"写完就算",它提供一整套评测体系:你可以人工浏览输出留反馈,也能跑自动基准测试。它会并行派生子代理,同时运行"带技能"和"无技能基线"两种版本做对比。每次测试都记录耗时与 token 消耗,并聚合出带均值与标准差的基准报告。这让"新版本到底有没有更好"有了可量化的答案,而不是凭感觉。
描述触发优化
技能最常被低估的环节是"触发准确率"——用户问了但技能没被调用。skill-creator 会生成 20 条混合"应触发/不应触发"的评估查询(带陷阱),用 HTML 模板和你一起审查评估集。后台自动跑优化循环,迭代提议更好的描述,最终把最佳描述写回 SKILL.md。等于它帮你把"什么时候该用这个技能"这件事调准。
打包与多环境适配
测试满意后,若环境支持,它用 package_skill 把技能文件夹打成 .skill 文件,方便分发给别人安装。同时它明确适配不同运行环境:Claude Code 用子代理跑评估,Claude.ai 没有子代理就走变通方案,Cowork 无显示器则强制生成 eval viewer 供人工评审。它还附带 grader、comparator、analyzer 等子代理指令和 evals.json 的 schema 定义,开箱即用。
使用上手
- 克隆或下载 anthropics/skills 仓库,将 skills/skill-creator 目录复制到你的项目 .claude/skills 或用户级 ~/.claude/skills。
- 在 Claude Code 中说出你想做的技能,例如:"我想做一个把会议纪要转成待办清单的技能。"
- 技能会引导你写 SKILL.md、准备 2–3 个真实测试提示,并写入 evals/evals.json。
- 运行评估,查看聚合报告与 eval viewer,根据反馈迭代;满意后用 package_skill 打包分发。
优点与不足
优点:
- 把"做技能"从黑箱变成可测试、可度量的工程流程。
- 基准测试带方差分析,避免被单次偶然结果误导。
- 描述优化直接提升触发准确率,实用价值高。
不足:
- 概念偏多(断言、基准、子代理),新手需要一点学习成本。
- 深度依赖 Claude Code 等特定环境,部分流程在简易客户端会受限。
- 评估需要准备真实样例,前期投入不算小。
适合谁
- 想为团队沉淀可复用 AI 工作流的开发者。
- 已经写过技能草稿、但总觉得"该触发时没触发"的人。
- 做 Agent 产品、需要批量生产并评测技能的人。
- 对提示词工程有兴趣、想用工程方法优化效果的人。
下载与访问
- 仓库:https://github.com/anthropics/skills
- 安装:复制仓库内 skills/skill-creator 目录到本地 skills 目录
- 适用:Claude Code、Claude.ai、Cowork 等支持 Agent Skills 的环境
| 项目 | 说明 |
|---|---|
| 技能市场 | Anthropic 官方 skills 仓库(开源) |
| 安装方式 | 复制仓库内 skills/skill-creator 目录到本地 skills 目录 |
| 许可证 | 多数技能 Apache-2.0(具体以仓库 LICENSE 为准) |
| 输出产物 | 技能文件夹 / 可分发 .skill 文件 |
本文属于「技能」分类的 AI 资源专栏,更多评测见分类页。
评论 0
还没有评论,来说两句吧。