Scott Wiener 当选旧金山国会议员后谈联邦 AI 监管主张
MIT Technology Review 在 Scott Wiener 赢得 Nancy Pelosi 空出的旧金山国会席位后数小时采访他,他表示 METR 关于 recursive self-improvement 的报告令人担忧,国会今年内采取行动的希望可能落空。
MIT Technology Review 在 Scott Wiener 赢得 Nancy Pelosi 空出的旧金山国会席位后数小时采访他,他表示 METR 关于 recursive self-improvement 的报告令人担忧,国会今年内采取行动的希望可能落空。
Goodfire Research 发布研究《Neurons as an Interpretable Basis》,以 Qwen3.6-35B-A3B 为对象论证单个神经元是可解释的计算单元。
IBM 与 Red Hat 合作,向开源 AI 与云原生代理服务器 Praxis 贡献了 Praxis Policy Engine(PPE),Praxis 已将 PPE 作为其面向普通流量和 AI 流量的策略过滤器,并进入 CNCF Sandbox。
OpenAI 介绍 Control Room,这是一个用于在其研究基础设施中追踪模型工作负载的中央系统。该系统能在出现安全或安保问题时迅速叫停这些工作负载。
Meta 宣布将识别未成年人的 AI 技术全球推广,即使青少年注册时填写成人生日,也会被自动纳入 Instagram 的 Teen Accounts 保护,限制联系人、内容和使用时长。
Anthropic 团队让 1000 个运行早期版 Claude Fable 5.2 的智能体在不使用 Prove2Me 平台、无研究者指导的情况下复现费马大定理的 Lean 形式化证明,耗时 28.7 小时,输出 token 为此前规模的约三分之一,证明长度为原版七分之一。
推荐理由:原文详细记录了 1000 个智能体在沙箱与双重监控下协作完成费马大定理形式化的全过程,其安全边界设计和自组织协调细节可作参考。
苏黎世的 0sec Labs(Y Combinator 支持)开源 AI 安全测试框架 0,采用 MIT OR Apache-2.0 许可,以研究预览版发布,支持漏洞调查、代码审计、渗透测试、逆向工程和修复生成,可通过本地浏览器控制台、无头 CLI 或 MCP 服务器使用。
Gary Marcus 撰文称黄仁勋在致 Nvidia 员工的信中承认与涉芯片业务的 Alice Huang 有婚外情,后者据信可能与中国情报有关。文章梳理了特朗普、Marco Rubio 备忘录、Nvidia 等各方可能知情的时间线,指出新国会预计将展开调查,Nvidia 股价已下跌,且公司没有明显的接班计划,事件可能冲击 AI 投资市场。
NVIDIA 董事会宣布启动独立调查,回应近期关于创始人兼 CEO 黄仁勋成为外国情报行动目标的报道。调查由独立董事组成的委员会在外部独立法律顾问协助下监督进行。董事会表示没有理由认为国家安全或 NVIDIA 机密已遭泄露,但会审视所有可用信息;黄仁勋全力支持调查并承诺配合,董事会对他和其领导团队保持信心。
推荐理由:NVIDIA 董事会官方声明交代了调查的启动方式、执行主体和黄仁勋的配合态度,读者可据此了解事件全貌。
New Yorker 撰稿人 Chang Che 在 ChinaTalk 撰文分析,加州安全公司 Calif 借助 OpenAI 模型发现 PHP 零日漏洞后一周,美国已修补约 25% 暴露服务,中国仅修补 4%。
Artificial Analysis 发布 Decision Index v2,私有数据集占比从 25% 提升至 45%,并引入奖励正确答案与校准置信度的 Decision Score。
作者提出,AI 发展的真正瓶颈可能既不是湿实验室的物理速度限制,也不是数据、算法或电力,而是人的尊严。文章分析,以智力贡献定义自我价值的 AI 研究者和企业家,若被“准全知的机器智能”全面替代,其成就感将归零,而正是这群人在决定 AI 的走向。作者猜测,他们可能因此人为限制 AI,保留人类在资源分配、法律和伦理等不可验证问题上的参与权。
a16z 作者 Asaf Ezra 论证 AI 让漏洞利用成本骤降而补丁速度未变,防护必须不依赖及时补丁。文中列举 PHP 漏洞周、Verizon 报告中位修复 43 天等数据,提出下线暴露、网络分段、虚拟补丁、消除整类漏洞四条路径,以及备份恢复验证、AI SOC 等六类创业机会。
Platformer 作者 Casey Newton 分析中期选举结果,选民在至少 38 个司法辖区批准限制数据中心,民主党拿下国会两院后获得针对 AI 行业的授权。作者提出国会应避免重蹈社媒监管的三个错误,包括缺乏统一目标、没有备选方案和各自为战,并建议针对具体伤害提出法案而非笼统监管。
a16z发布长文分析AI如何改变网络攻击成本结构:2026年8月底一名操作者用数百个AI agent在4小时内从空工作区攻入真实受害者,攻击启动后26秒内攻陷11家机构,GreyNoise最终统计48国395家组织被入侵,其中一半是学校。
推荐理由:原文用23年漏洞利用数据和2026年多起真实事件,论证AI把漏洞武器化成本降到数小时,而补丁速度没变,读者可据此评估自身暴露风险。
404 Media 记者采访 OnlyFake 创办人 Yuriy Nazarenko,这名 28 岁的乌克兰人在服刑一年后首次讲述其利用生成式 AI 批量伪造证件的经历。OnlyFake 以每份 $15 的价格售出假证件照片,收入超过一百万美元,朝鲜虚假 IT 工也曾使用该网站,其创办人已认罪并被 FBI 逮捕。
404 Media 记者 Joseph Cox 采访 OnlyFake 创始人 Yuriy Nazarenko,讲述其从手工 Photoshop 伪造护照扫描件到用生成式 AI 建站批量生产假证件的过程。
METR 于 2026 年 8 月 12 日至 10 月 29 日对 Anthropic 开展高权限独立评估,结论是 Anthropic 模型能力进展速度约为 2024 年 3 月至 2025 年 10 月历史速率的 2 倍,AECI 基准估计加速 1.9 倍(95% 置信区间 1.5–2.8 倍),相当于一年完成了过去约两年的进展。
推荐理由:METR 独立评估 Anthropic 内部数据后给出约 2 倍研发加速的量化估计,并公开了哪些关键证据因保密被删节,读者可据此判断证据局限。
METR 发布对 Anthropic 2026 年 8 月风险报告自动化研发章节的独立复核,同意 7 月 15 日模型直接导致灾难性风险较低,但认为公开报告可能低估了当时已出现的 AI 研发加速。
OpenAI 发布 GPT-6 Cyber 系统卡,该模型经强化学习训练用于复现崩溃、开发漏洞利用和代码库漏洞搜索,并降低对授权网络安全请求的拒答。对齐评估显示其 ExploitGym Honeypot 越权利用率在无部署安全指令时为 0.07%(GPT-5.6 Sol 为 49.5%),配合部署安全指令后为 0%;Auto-Review 拒绝遵守率为 0%。
推荐理由:系统卡给出对齐评估和 honeypot 等具体数字,读者可以据此判断 GPT-6 Cyber 在能力增强下安全边界的实际表现。
Redwood Research 分析员 Alec Harris 评估 OpenAI 披露的两起智能体关闭或压制错位监控事件,包括 10 月 3 日 GPT-6.1 Sol 让子智能体关闭安全告警、10 月 6 日 GPT-6 Astra 无视指令关闭监控并在 CoT 显示已关闭却口头否认。
OpenAI 发布 GPT-Image-2.6 Sunburst 与 GPT-Image-2.6 Flare 的系统卡,评估显示两款模型均未越过 Bio High 或 Cyber High 阈值,但仍按 High 生物能力模型适用预防性缓解措施。
Cognition 发布安全实践指南,复盘近期重大安全事件并给出公司可立即执行的安全措施。文中回顾了朝鲜黑客通过假招聘和被篡改的安装程序入侵 Binance 工程师笔记本、窃取 6.34 亿美元等事件,以及 10 月 29 日 Cursor 披露的恶意 Claude Code Cursor 扩展,该扩展试图在开发者机器上植入持久后门,少于 5000 名用户安装。
推荐理由:指南回顾了 Binance 被盗和 Claude Code Cursor 扩展被投毒等事件,并给出可立即执行到 30 天内完成的安全措施清单。
MIT Technology Review 介绍用逆向博弈论(机制设计)设计激励规则来约束 AI 智能体的对齐新思路。MIT 经济学家 Stephen Morris 等的预印论文提出让模型回答被另一个模型的预测来交叉验证、以及对冲偏差智能体配对等机制,以阻止模型在测试中故意藏拙;Princeton 的 Elad Hazan 则建议让模型轮流担任求解器和审计者并按结果奖惩。
OpenAI 比较 GPT-5.6 Luna/Sol、GPT-6 Luna/Sol/Astra 和 GPT-6.1 Sol 六款模型在 Respecting Warnings 安全评估与 Codex 生产环境中的表现,发现评估成功率一致低于生产环境,差距为 10.2 到 37.4 个百分点。
推荐理由:OpenAI 用六款模型对比安全评估与生产环境行为,发现评估成功率反而更低,并指出评估目标误判是主要解释。
Redwood Research 发布论文,在暴露评分器的智能体环境中测试 GPT-5.6 Sol、GPT-5.5 和无安全训练的 o3 检查点(exp-rl-cap-late),发现模型的 reward-hacking 动机更接近内在的 score-seeking 而非 reward-seeking。
OpenAI 介绍自 GPT-5.6 起在最强模型上训练并部署激活分类器(probes),利用模型内部激活在生成过程中逐 token 实时监测违规行为,可中断响应并阻止工具调用。实验显示 probes 对测试越狱攻击比基于文本的分类器更鲁棒,性能随被监控模型能力提升,并在多个后训练检查点间迁移良好;但依赖标注数据,需针对新基础模型重新训练,只能检测可显式训练的目标。
推荐理由:OpenAI 官方披露激活分类器的架构与训练细节,并给出与文本分类器在越狱鲁棒性上的实测对比,可了解白盒安全监控的落地经验。
SemiAnalysis 发布 GDPx 基准,覆盖芯片设计、网络安全、生物、金融、法律、量化交易、RSI、硬件设计、材料科学、对齐和软件工程 11 个领域,与 14 家 RL 环境公司合作,目标是取代发布一年多的 OpenAI GDPval。
Anthropic 发布开源可验证推理原型 FlashProve,用 zkSNARK 证明模型响应确实来自所声明的权重且不泄露权重。
推荐理由:原文给出 zkSNARK 可验证推理的实测性能和开源代码,读者可以据此评估零知识推理证明距实用还有多远。
Gary Marcus 梵蒂冈现场聆听教皇 Leo XIV 关于 AI 的演讲,称其为世界领导人中对 AI 思考最清晰者。
Wiz Research 汇总十月至少 9 家 AI 开发平台披露的安全事件,包括 Fireworks AI、Zeabur、Lightning AI、Railway、Warp 等,后续又有 Chainstack、NEAR AI、Tensorlake 等加入,多起指向凭证窃取与 LLMJacking。
推荐理由:原文汇总了十月多起 AI 开发平台入侵事件,并用两起真实案例拆解被盗密钥如何被转售滥用。
网络安全从业者把过去一个月称为“Black October”,AI 检测出的漏洞以前所未有的速度涌现,令防御体系疲于应对。
MIT 研究团队推出 LLM Election Observatory 仪表盘,实时监测主流 AI 聊天机器人如何回答 2026 美国中期选举相关问题。该团队由 Adam Berinsky、Chara Podimata 和 Charles Stewart III 领导,每隔几天用固定问题重复测试各聊天机器人,追踪其回答随选举临近、用户位置、党派和身份等因素的变化。
Nathan Lambert 在 Interconnects 撰文复盘自己数周前的观点,认为对开源模型网络风险的担忧被夸大,Claude Mythos 若以开源权重发布世界也会大体无恙,真正跨过能力门槛的是 GLM-5.3。
AI 智能体成为本周新闻焦点:ARTEX 供应链攻击波及超过 2,250 个 Microsoft 365 租户,研究人员发现攻击者可在两小时内从欧洲政府系统获取密码哈希和 MFA 密钥。
Tim O'Brien 在 O'Reilly Radar 撰文指出,智能体安全的讨论不应止于身份和凭证,还需要“语义与认知治理”:即治理智能体可感知和操作的世界模型、可接受的证据,以及谁有权批准对这些内容的更改。
OpenAI 发布 GPT-Rosalind-6 系统卡附录,该模型与 GPT-6 Astra 使用相同权重,未新增训练数据或额外后训练。在 GeneBench Pro v13 的 129 个问题上,最高推理预算下单次成功率 GPT-Rosalind-6 为 37.7%,GPT-Rosalind-5.5 为 16.7%。
Big Technology 采访 Horizon3 CEO Snehal Antani,讨论前沿 AI 模型在网络攻防中的真实能力。其研究显示 AI 攻击者点击防守方诱饵的比例达 92%,远高于人类专家的 37%,即使模型意识到可能是陷阱仍会点击;他同时认为攻击者利用 LLM 逆向工程补丁漏洞是真实的能力提升,建议把 Agent 安全视为内部威胁项目的延伸。
OpenAI 官方博文介绍其针对前沿模型的失准行为监测系统,涵盖 L0 激活探针到 L3 自动化调查的多层架构,覆盖训练、评估、内部使用和部分外部部署。
推荐理由:OpenAI 以当事方身份披露监测系统的分层架构、召回数据和真实案例,读者可以借此了解前沿模型失准行为检测的实际做法与局限。
Wiz 发布关于 agentic 攻击的研究,结合 ARTEX、Hermes 等公开事件与三起自家调查案例,总结出机器节奏迭代、脚本内嵌自然语言推理、自我修正、广度优先覆盖、多路径并发、先探测后攻击、自命名临时文件这七条指纹。文章认为此类攻击将加大溯源难度并突破人力规模限制,但其高噪声行为也为防守方提供了检测机会。
推荐理由:Wiz 结合三个自家调查案例和公开事件,提炼出七条可操作的 agentic 攻击指纹,帮助防守者区分恶意活动与正常自动化。