OpenRouter:Announcements·精选AI 评分77
OpenRouter 教程:如何在 CI 中用 LLM eval 门槛拦截 Pull Request
How to Gate Pull Requests on LLM Evals in CI
AI 导读
OpenRouter 发布教程,讲解在 CI 中用固定 eval 集拦截 pull request,防止修改提示词后模型输出回归。教程给出可直接复用的 Node 脚本和 GitHub Actions workflow,用字符串断言加多次采样多数判定打分,通过必需 status check 阻止不达标合并。
推荐理由
教程给出可复用的 CI 门槛方案,强调在 job 层做路径过滤并把过滤 job 设为必需检查,避免空过和挂起两类陷阱。
来源:OpenRouter:Announcements · openrouter.ai