跳到正文
原文
OpenRouter Blog·· 8 天前精选AI 评分62

如何在 CI 中用 LLM eval 拦截 Pull Request

How to Gate Pull Requests on LLM Evals in CI

AI 导读

OpenRouter 发布教程,讲如何用固定 eval 集在 CI 中拦截 Pull Request:把测试用例与提示词一起提交到仓库,用脚本调用 OpenRouter 打分,通过率低于阈值时以非零退出码阻断合并。

推荐理由

完整给出在 CI 中用固定 eval 集拦截 PR 的脚本、阈值测量与 GitHub Actions 配置,可直接照搬。

来源:OpenRouter Blog · openrouter.ai