OpenRouter Blog·· 8 天前精选AI 评分62
如何在 CI 中用 LLM eval 拦截 Pull Request
How to Gate Pull Requests on LLM Evals in CI
AI 导读
OpenRouter 发布教程,讲如何用固定 eval 集在 CI 中拦截 Pull Request:把测试用例与提示词一起提交到仓库,用脚本调用 OpenRouter 打分,通过率低于阈值时以非零退出码阻断合并。
推荐理由
完整给出在 CI 中用固定 eval 集拦截 PR 的脚本、阈值测量与 GitHub Actions 配置,可直接照搬。
来源:OpenRouter Blog · openrouter.ai