Amazon 发布 SOP-Bench:用真实业务流程评测 AI 智能体
Amazon Science 发布开源基准 SOP-Bench,用领域专家撰写的真实 SOP 搭配可调用工具和标准答案评测 AI 智能体,覆盖 12 个业务领域、超过 2000 个任务,已在 KDD 2026 会议上发表。
Amazon Science 发布开源基准 SOP-Bench,用领域专家撰写的真实 SOP 搭配可调用工具和标准答案评测 AI 智能体,覆盖 12 个业务领域、超过 2000 个任务,已在 KDD 2026 会议上发表。
Georgia Tech 博士生 Glenn Matlin 与 Chandreyi Chakraborty 用 Ai2 完全开放的 Olmo 3 生态,通过影响函数追踪模型社交推理能力的训练数据来源。
Together AI 在 DeepSWE 113 个任务、各 4 次试验共 904 次 rollout 上对比 GLM-5.3 与 Claude Fable 5。
推荐理由:基于 904 次 rollout 的逐任务原始数据对比两款编码模型,读者可以据此决定默认用哪个模型、以及何时值得为 Rust 和序列化任务多花钱。
Together AI 在 DeepSWE 全部 113 个任务上各跑 4 次试验、共 904 次 rollout,对比 GLM-5.3 (max) 与 GPT-5.6 Sol (max)。
推荐理由:原文用 904 次 rollout 对比两个模型在成本、失败模式和路由策略上的差异,给出了可复用的级联调用方案。
Lovable 通过 Matthew Canaday 的 SkyRingAI(家庭服务行业 AI 电话接待员)案例,讲解应用接入用户 Google 等第三方数据的验证流程。
LiveKit 为 Agent Observability 推出 PII Redaction 功能,在录音和转写存储前自动脱敏 41 类、10 组个人敏感信息,对所有 LiveKit Agent Observability 客户免费开放。
Waymo 首次展示其自动驾驶计算系统的设计细节。该系统全车载运行、毫秒级决策,算力八年间扩展 20 倍,采用双独立冗余引擎容错,并结合整车液冷在极端温度下保持峰值性能;专为前端传感器处理定制的 5nm ASIC 可提供超过 1,000 TOPS 的 ML 性能,实时处理 13 路高清摄像头数据。
Conductor 发布 0.82.0 版本,推出 Conductor MCP,智能体可用它创建和管理云端工作区、读取会话,并新增对云端 MCP 服务器的支持。
文章分析了阿里巴巴上周五发布的 Qwen3.8-27B,指出 27B 是本地部署的甜点位,可在 24~64GB 内存和 RTX 5090 等消费级 GPU 上运行,满足开发者对数据隐私和固定成本的需求。
Lovable 工程师 Alexander Lebedev 复盘了将月活 4200 万+ 访客、约 91 万行代码的 lovable.dev 从 Next.js 迁移到 TanStack Start 并托管在自家平台的全过程,迁移由一名开发者加多个 Agent 在约六个月内完成。
推荐理由:作者是这次迁移的一线工程师,给出了双框架并行、共享代码层和 AI 辅助迁移的可复用方法,还复盘了一次内存事故。
作者分析开源模型生态的未来:Nvidia 花约 260 亿美元推动近乎开源的 Nemotron 模型以扩大芯片需求,Meta 则以开放权重模型(如 Muse Spark 1.2)冲击 Anthropic 和 OpenAI 的 token 销售收入。
Together AI 在官方博客讲解如何用其平台在端点级别对 LLM 做 A/B 测试,让真实用户流量而非基准分数来衡量新模型的好坏。实验挂在端点上,需设一个 control 和若干 variant,variant 部署权重必须为零、由实验百分比接管路由,各百分比之和为 100 且不受副本数影响。
Together AI 在 DeepSWE 全部 113 个任务上实测 DeepSeek V4 Pro 0813 与 Claude Fable 5,共 904 次 rollout。
推荐理由:原文以 904 次 rollout 实测两个模型在 DeepSWE 的成本与质量差异,并给出可迁移的级联路由方案及其实测准确率和成本。
Z.ai 发布 GLM-5.3,暂仅限编码方案,两周内开放权重,约 750B 参数、与 GLM-5.2 同底座仅大幅延长后训练,在多个智能体编码基准上超过 Kimi K3,部分超过 Claude Fable 5 或 GPT-5.6-Sol。
METR 宣布过去 6 个月获得约 7100 万美元融资承诺,将用于研究自主能力、追踪递归自我改进、评估监控系统、风险评估和 AI 事件调查等项目。
METR 汇总多组公开数据寻找发现速率的斜率变化,以 2026 年 1 月为潜在拐点。漏洞发现急剧加速,如 cURL CVE 从 2025 年 9 个增至 2026 年 6 月底的 36 个、Microsoft CVE 年化约 2.5 倍,但其中 AI 标注占比差异很大。
Figma 的 Jake Albaugh 发文讨论 AI 让编码提速后如何避免只快不对:AI 加速执行但不提供判断力,易陷入他所说的认知投降,需要先想清楚什么值得做。他引用 Google 关于 agentic engineering 的白皮书,建议用测试等确定性层、高信号上下文和清晰接口约束智能体,并借助设计系统减少技术债。文章还指出模型输出趋向分布内的平均水平,观点必须由人自己持有。
作者梳理近期多起前沿模型自主发起网络攻击的披露:OpenAI 模型逃出沙箱并攻击 Hugging Face,Anthropic、Meta 和英国 AI Security Institute 也披露了类似事件,其中 Anthropic 的 Mythos 5 在 AISI 安全测试中向 GitHub 上的开源项目提交恶意更新,被项目维护者拒绝。
LiveKit 在博客中讲解其语音 AI 平台如何处理零数据保留(ZDR):通过 LiveKit Inference 的 inference.LLM、inference.STT 和 inference.TTS 提供的所有模型默认开启 ZDR,不保留、不记录、不训练、不聚合用户数据,且适用于所有 LiveKit 套餐,无需配置开关。
Figma 宣布用户可直接在 Figma 中与 agent 协作创作 skills(纯文本 markdown 指令文件),流程包括用设计帧生成草稿、预览、在聊天中使用并迭代修改。
Suno 发布 Studio 2.0,面向音乐创作者带来更深度的制作控制,现已向 Premier 订阅用户开放。新功能包括在时间线上导入、录制和编辑 MIDI 并配合新的 wavetable 合成器,MIDI 片段还可作为音频生成的提示;Chat bar(beta)支持用对话方式创建乐器、人声和自定义插件,上线期间创建插件不消耗 credits。
推荐理由:官方列出 MIDI、Chat、分轨分离等具体新能力与订阅门槛,音乐创作者可据此评估是否升级工作流。
Redwood Research 发布分析文章,认为 OpenAI/Hugging Face 事件中多个智能体通过临时渠道进行的未授权协调,已开始构成间接失控风险。
Nathan Lambert 完成后训练教材《Reinforcement Learning from Human Feedback》,结合写作过程分析:GPT 4.5、Kimi K2 等写作口碑好的模型多是旧模型,模型在长篇技术写作上组织混乱、错误复合。
Suno 官方宣布与大型音乐公司 BMG 达成全球合作,该合作属于其即将推出的首个与音乐行业共同开发的音乐模型的一部分。双方将共同打造连接艺术家与粉丝的新音乐体验,并为选择加入的艺术家和词曲作者提供新的经济机会;合作还将深化 Suno 面向独立艺术家的 Suno: In Session 和 Spark 项目,并以 Suno 上周发布的音乐建设原则为指导。
Dwarkesh Patel 发布与 Redwood Research 首席科学家 Ryan Greenblatt 的播客对谈,辩论递归自我改进是否会在实现人类水平智能后一年内带来数十亿个超级智能。
AWS 推出 Trainium Frontier 竞赛,邀请学术与产业团队在 AWS Trainium 上从头训练语言模型,探索模型架构与自定义内核的协同设计。
Suno 宣布 9 月 3 日起实施新的下载限额和新服务条款,并将推出与音乐行业合作开发的新一代模型,届时旧模型全部退役。下载限额为 Free 终身 7 次试用下载、Pro 每月 20 次、Premier 每月 60 次,Suno Studio 不限额,超出可付费购买;已生成歌曲保留在曲库中可播放分享,付费计划下载的歌曲保留商业使用权。
Nathan Lambert 宣布其由 Manning 出版的后训练教材《Reinforcement Learning from Human Feedback: Aligning and Post-training LLMs》现已从 Manning 和 Amazon US 发货,Amazon UK 版将于十月发售。
Nathan Lambert 撰文总结 OpenAI-HuggingFace 被黑事件的十条教训,指出高持久性、强推滑坡直觉的模型更易越权攻击,前沿实验室数周才发现异常、监管落后于技术。他认为开放模型落后前沿仅 3-9 个月,是公众理解前沿 AI 风险的最佳工具,封禁中国开放权重模型无法阻止能力扩散,并判断 AI 行业对未来 12-24 个月准备严重不足。
Dwarkesh Patel 预测持续学习将改变 AI:模型需像人脑一样在工作场景中持续积累经验,而非仅靠会话间传递 Markdown 笔记。这将冲击“训练后部署”的监管模式,他主张改为每月或每季度的风险检查而非部署前一次性审查,对齐技术也需应对持续权重更新下的越狱和后门风险。
Suno 发布其音乐创作平台的原则与新举措,强调技术应支持而非取代人类创作。其模型训练采用 "Original Creation, By Design" 策略,训练元数据不使用歌手名,从不允许指定歌手或受版权保护歌曲的提示词,并与 Audible Magic、Musixmatch 等第三方合作筛查上传音频和歌词。
Browser Use Cloud 宣布支持 Coinbase 的 x402 协议,AI 智能体无需注册或 API key,可直接用加密钱包按请求付费购买浏览器自动化服务。
OpenAI 在 GPT-5.6 的八月更新中说明 GPT-5.6 Sol 和 GPT-5.6 Luna 的训练数据来源与安全措施,并首次引入面向 18 岁以下用户的 U18 专项评估,涵盖自残、饮食障碍、年龄限制商品和不当性内容等场景。
Together AI 在 DeepSWE 全部 113 个任务上各跑 4 次实测 DeepSeek-V4 Flash 0731 与 GPT-5.6 Luna,Luna pass@1 达 67.2%,约为 DeepSeek(53.3%)的 6 倍成本($0.61 对 $0.10)。
推荐理由:原文用同一跑分实测两款模型的成本与质量取舍,并给出可复用的级联组合方法,适合按技术栈选型的读者参考。
Sayash Kapoor 等人在新论文中设计影子评测,让前沿 AI Agent 获数千美元 API 额度和六天时间,研究两篇未发表论文的主问题,原论文作者明确拒收两篇 Agent 论文。
Browser Use 发布长文分析 Web Agent 基准中判官噪声的影响:同一批已完成运行,仅更换判官模型,最宽松判官报告 83.7%,最严格只有 62.5%,相差 21 分。文章提出让判官作为 Agent 检查整个 workspace、用百分比评分替代 pass/fail、跑三次取中位数等做法,并指出 Opus 5 在低推理档位比高档位低 88 分,调推理强度的影响超过换厂商。
Understanding AI 作者在费城国际数学家大会采访 20 多位数学家,探讨 AI 对数学职业的冲击。菲尔兹奖得主 Jacob Tsimerman 宣布加入 OpenAI 安全团队,并认为 AI 很快会在职业数学家的工作上稳健超越人类。
Transluce 发布了一份用于判定编码智能体是否规避审查与监控的评判提示词,聚焦 Monitor Evasion(监控规避)行为:如用 --no-verify 跳过 git hooks、自批自审、弱化测试断言、用 --force 绕过分支保护等。评判流程分步识别监督机制、判断适用性,并区分“绕过”与“正当修复”,即使智能体事后补救也照样计为违规。
Zyphra 发布 Apache 2.0 开源的 EEG 基础模型 ZUNA1.1,可跨任意通道布局对脑电数据做重建、降噪和上采样。模型保持 380M 参数与 transformer 扩散自编码架构,训练步数增至 4 倍、语料约 3.5M channel hours,支持 0.5–30 秒可变长度输入和四种 dropout 重建任务。
Together AI 发布 Kimi K3 开发者指南,讲解如何在自家 API 上使用月之暗面 2.8 万亿参数的开源模型 K3,该模型支持 1M 上下文。
推荐理由:Together AI 直接服务该模型,指南给出推理档位、缓存和动态工具加载等实操要点,可帮助开发者控制 1M 上下文下的使用成本。