Sierra:Blog· Soham Ray·· 21 天前AI 评分53
Sierra 发布 𝜏-Entity 基准,测试语音智能体能否准确记录姓名、电话等信息
𝜏-Entity: Can voice agents get the details right?
AI 导读
Sierra 推出 𝜏-Entity 基准,用 200 个任务、10 类实体测试语音智能体能否正确捕捉并修复姓名、电话、地址、邮箱等细节。GPT Live 1 常规通话正确率 60.3%,但三种条件全部通过仅 34.0%;预设验证策略可将通过率提升 14–31 个百分点,代价是每次通话多 21–28 秒,且被验证的初始错误中只有 24–37% 最终被纠正。
来源:Sierra:Blog · sierra.ai