跳到正文
Cognition 模型 / Devin 博客·AI 评分49

Cognition 构建自动化系统,估算 Devin 每次会话相当于多少人类工程师工时

Estimating the Productivity of an Autonomous AI Software Engineer2026.06.04Engineering leaders want to know how much value AI is actually providing. We built a system that measures the number of human-equivalent hours of Devin's work.

AI 导读

Cognition 构建了一套自动化系统,用 AI 审查每个已完成的 Devin 会话,先分类是否有用,再估算人类工程师完成同样工作所需工时。系统基于 126 位用户的 258 个会话数据训练验证,模型 rlog 达 0.74 且无偏,PR 会话按是否合并过滤,非 PR 会话的分类器会剔除约 1−20% 的会话。该系统已在客户环境中运行,据称是首个在生产环境自动测量 AI 工程生产力的系统。

来源:Cognition 模型 / Devin 博客 · cognition.com