如何让自己的 AI Agent Harness 登上榜单:best-of-Agent-Harnesses 贡献流程与评分标准完整指南
发布时间:2026/10/15 17:11:01 锦皓数字建站

【免费下载链接】best-of-Agent-Harnesses Ranked list of 167 AI agent harnesses, plus templates, playbooks, MCP, and learning resources. Rescored weekly.项目地址https://gitcode.com/gh_mirrors/be/best-of-Agent-Harnesses点击查看免费下载best-of-Agent-Harnesses 是一个每周重新评分的 AI Agent Harness智能体运行时框架排行榜收录 160 个项目覆盖编码智能体、多智能体编排、记忆层、沙箱、评估框架等 10 个类别并附带模板、Playbook、MCP 服务器和学习资源。如果你想把自己的开源项目提上榜单本文将完整拆解社区提交流程、审核门槛Curation bar和评分标准帮你一次提交就过审。提交前必读1 条核心规则在动手之前先记住这条最重要的规则README.md、projects.yaml、TAGS.md、harnesses.json、harnesses.jsonld、llms.txt全部由 scripts/generate.py自动生成。直接编辑这些文件提交的 PR 无法合并——下次重新生成就会覆盖你的改动。所有被采纳的建议最终都要移植进generate.py由你自己或维护者完成并且你都会在落库提交上获得co-author共同作者署名。方式一提交 Issue 推荐项目最快的路径如果你不想碰代码这是门槛最低的方式。打开一个标题为Add project: 项目名的 Issue提供 3 样东西即可仓库 URL一句话说清你的项目里哪个部分是 harness——即 agent 循环、工具接线、审批/恢复模型而不是 UI 外壳分类——项目应归入榜单的哪个类别可参考 README.md 的 Contents 目录就这么多。移植、打标签、评分都由维护者一侧完成。这是推荐而非自己加适合大多数个人开发者。方式二提 PR 自己加项目3 处修改 重新生成如果想亲自动手需要修改 scripts/generate.py 中的3 个位置第 1 处PROJECTS —— 注册项目条目在正确的类别列表中加一条Project(...)记录其中描述必须点明 harness 部分这个词要加粗并在必要时与 UI 外壳做区分第 4 个字段必须以复杂度层级开头super simple→mostly simple→slightly complex→complex后接一句简短说明oss许可证标记✅标准开源默认·⚠️ 许可证源码可用/受限 ·❓缺失或不明第 2 处META —— star 数与看它跑起来的链接填入 star 数每周会自动刷新数字大致当前即可和最有用的演示链接——注意要指向show me it in action的具体页面而不是文档根目录。第 3 处AXES —— 给两个行为维度打分如果你的项目拥有 agent 循环按词汇表给 autonomy自主度和 recovery恢复能力两轴打分如果项目只是运行容器例如沙箱层、不拥有 agent 循环记为(n/a, n/a)最后重新生成并跑测试python3 scripts/generate.py python3 -m pytest tests/ -q提交时必须同时包含generate.py的改动和重新生成后的输出文件。CI 会在你的 PR 上跑同样的测试含完整站点构建。审核门槛Curation bar 4 条硬标准提交能否进入榜单取决于 CONTRIBUTING.md 中定义的筛选门槛标准说明规模底线不收个位数 star 或个人仓库提交数少于约 10 次 commit 的项目活跃要求不收已归档/被放弃的项目——每周刷新会自动把归档仓库移入 Graveyard墓地 板块保留引用但移出排名去重原则官方版本取代社区 fork 时只列官方版本范围界定只收 harness、编排框架和 harness 技术——即模型周围的运行时不收模型封装或提示词集合没达标的优质项目不会被直接拒绝它们会被挂到 README 的 On the radar观察中板块排队成熟后毕业进排名列表。提交被挂上 radar 等于进入等待队列而非被拒。评分标准全解4 个能力维度 1 个采用层级进入榜单后深度研究类项目harness 运行时会按 attributes/RUBRIC.md 逐维度评分。每个项目在 attributes/ 下有一个 JSON 文件如 attributes/codex.json由generate.py校验后合并进 harnesses.json并供给 MCP 服务器使用。4 个能力维度与评级词汇维度回答的问题评级词汇由强到弱tooling_sandboxing工具执行如何被隔离strong/basic/none/unknowncontext_memory会话之外的记忆如何工作strong/basic/none/unknownlifecycle_hooks有哪些可编程的拦截点full/partial/none/unknownprompt_optimization提示词支持什么程度的优化native/configurable/none/unknown几个关键判定线新手最容易误判的地方沙箱默认执行路径就是隔离环境容器/VM/受限文件系统才配strong主机上默认执行、隔离靠 opt-in 只能给basic记忆能跨会话持久记忆向量/图/文件或有内置上下文压缩/会话恢复才配strong只管理工具定义的渐进式披露最多算basicHookfull要求拦截点是可编程的——能在工具调用执行之前阻止或改写它只能事后观察的回调只能给partialbuild_vs_buy3 级采用层级第 5 个维度是分类性的不产生排名方向回答这个项目如何规模化层级标签含义tier 1build直接 API 编排你拥有并编写循环项目是 SDK/原语集合tier 2blueprint有主见的自托管运行时/框架你配置蓝图和规则而不是写循环tier 3managed托管基础设施执行栈跑在厂商平台上上市最快、运维责任最小同时提供两者的项目open-core按其主发布物GitHub 仓库里能 install 的那个定层级。证据规则评分不是拍脑袋除unknown外的每个评级必须附带evidenceURL指向能证明该结论的文档页、README 章节或源码文件。找不到证据就评unknown并一句话说明查了什么——绝不能仅凭项目的营销文案推断评级。排名换算很简单strong/full/native 3basic/partial/configurable 2none 1unknown 0不参与比较。词汇表、漏轴或缺证据的文件会让构建直接失败——评分严谨性由 CI 强制执行。提交 Skill门槛更高的另一条路径除了项目榜单还收录可安装的 skills/供 agent 加载的技能包。注意 skill 的门槛比普通提示词高得多一个合格的 skill 必须自带执行检查的脚本 该脚本的测试 证明会被正确触发的用例完整步骤见 skills/evals/README.md。流程先开 Issue说明 skill 要解决的问题和它会返回的数值让维护者确认不与现有 skill 或已有工具重复再动手实现。其他贡献方式纠错、徽章与周更机制纠错你维护的项目描述、示例链接、层级或评分有误开 Issue 或针对generate.py提小 PR——维护者自己的修正合并最快。但不要提交 star 数更新那是周更流程的活儿由 scripts/refresh_stars.py 自动从 GitHub API 刷新展示徽章项目上榜后可以在自己的 README 加上 Best of Agent Harnesses 徽章格式见 CONTRIBUTING.md 的 Show your listing 一节周更机制每周自动刷新 star 数、归档检测、radar 队列流转并由 scripts/discover_candidates.py 做发现扫描——你的项目也可能被自动发现常见问题 FAQQ我的项目还在早期star 很少能提交吗能。达不到门槛的优质项目会进入 On the radar 排队成熟后毕业进榜。Q我直接改了 README 里榜单表格为什么 PR 被拒README 是生成的下次重新生成就被覆盖了。一切改动必须落进generate.py。Q我的项目是提示词合集能上榜吗不能。榜单范围是模型周围的运行时明确排除模型封装和提示词集合。Q评分结果能人工调整吗维度评分来自公开文档的编辑性判断维护者可通过 Issue/PR 快速修正star 数则完全自动化不接受手工提交。总结向 best-of-Agent-Harnesses 提交项目只有两条主路径开 Issue 推荐最快或改generate.py提 PR完整控制。无论哪条记住三件事改的是生成器而不是生成物、描述要讲清 harness 而非 UI、评分要拿证据说话。通过门槛的项目会带着 co-author 署名进入榜单并在每周重新评分中持续追踪——对开源项目来说这是一个值得花一个下午争取的曝光位。赞分享【免费下载链接】best-of-Agent-Harnesses Ranked list of 167 AI agent harnesses, plus templates, playbooks, MCP, and learning resources. Rescored weekly.项目地址https://gitcode.com/gh_mirrors/be/best-of-Agent-Harnesses点击查看免费下载相关推荐如何贡献自己的技能到 kotlin-agent-skillsJetBrains 审核流程与评测evals编写完整指南如何贡献自己的技能到 kotlin agent skillsJetBrains 审核流程与评测evals编写完整指南 kotlin agent skill如何向Best-of Python贡献项目完整贡献指南Best of Python是一个精心整理的Python开源库和工具排名列表每周更新帮助开发者发现最有价值的Python项目。无论你是想推荐优秀的开源项目文档知识库教程为什么Harness比模型更重要best-of-Agent-Harnesses 用166个数据给出硬核答案为什么Harness比模型更重要best of Agent Harnesses 用166个数据给出硬核答案 如果你用过 Claude Code、Codex 或创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
锦
锦皓数字建站
深耕本土企业品牌数字化升级,专注原创端正雅致商务官网,从视觉设计到稳定运维全程保驾护航。