苹果等提出 Weighted State Souping 提升 SSM 长上下文检索效率
Apple 与哈佛大学研究者的论文提出加权状态汤(weighted state souping)方法,通过学习依赖查询的权重来组合缓存的 SSM 状态编码,被 NeurIPS 2026 PALM 工作坊接收。该方法在多跳文档问答、needle-in-a-haystack 检索、变量追踪和工具使用等长上下文任务上显著提升性能,稀疏变体可将编码成本保持在与上下文长度近常数相关的水平。
Apple 与哈佛大学研究者的论文提出加权状态汤(weighted state souping)方法,通过学习依赖查询的权重来组合缓存的 SSM 状态编码,被 NeurIPS 2026 PALM 工作坊接收。该方法在多跳文档问答、needle-in-a-haystack 检索、变量追踪和工具使用等长上下文任务上显著提升性能,稀疏变体可将编码成本保持在与上下文长度近常数相关的水平。
Apple 与哈佛大学的研究人员通过理论与实验分析,门控机制导致 SSM 在训练中先学到“权重内记忆”方案,从而延迟甚至阻止其收敛到正确的上下文学习解,即便架构和记忆容量没有根本限制。SSM 以固定内存和线性计算复杂度著称,但在需要上下文学习和精确检索的任务上仍落后于 Transformer。研究同时发现门控有利于提升对长序列的泛化能力,为理解和改进线性时间模型提供了基础。
BlobCap 上线,汇总 AI 实验室购买训练数据的交易记录,目前已追踪 51 笔交易,其中 19 笔披露价格,涉及 13 个买家。
Databricks 与 Turing 联合开发了一个企业数据智能体基准,在真实 Databricks 工作区中对比 Genie 与两个前沿智能体,以虚构英国能源公司 Calderwick Energy 的数据资产为题。
创业公司 Plurai 完成 1300 万美元种子轮融资,由 Team8 领投,U&I、Velocity 和 Mercer 参投。该公司借用自动驾驶汽车的模拟训练思路,基于企业自有数字系统构建数字孪生并生成合成数据,预先评估和修复智能体的边界情况。
据彭博社报道,字节跳动计划在未来几周内推出一款类似 Meta Muse 的 AI 助手,巩固其在 AI 视频生成领域的优势。
ChinaTalk 调查发现,Mercor、Surge AI、AfterQuery、Turing 等至少九家美国数据公司向中国 AI 实验室出售价值约 5 亿美元的 RL 训练环境和数据。
ChinaTalk 作者 Aqib Zakaria 分析称,Mercor、Surge AI、Turing、AfterQuery 等美国数据公司正出售总值约 5 亿美元的数据给中国 AI 实验室,其中相当部分是用于后训练的强化学习(RL)环境。
Tether AI Research 发布基于 Qwen3.5-0.8B 的 0.8B 参数端侧智能体模型 BotPsy,专注函数调用和个人助理任务,称其在六个工具使用与智能体基准上优于所有受测的 1.2B 及以下模型,BFCL v4 从基座的 23.4 升至 44.0,并在五项基准上超过 2.5 倍大小的 Qwen3.5-2B-Think。
Meta FAIR 发布 mini-batch 聚类算法 e-means,用指数移动平均更新质心,在 1.4 到 2.6 个 epoch 达到 Lloyd's k-means 25 个 epoch 的损失,已随 FAISS 1.16.0 在 faiss.contrib.e_means 提供。
Claude 发布 Claude Data(前身为 Claude Dashboards),支持连接数据仓库或应用后用自然语言提问,由 Claude 编写 SQL 并生成仪表板、数据故事、解说短视频和信函。
Meta 工程博客详解其构建的 Triton 低层扩展 TLX,通过显式 warp 组编排补足 CUDA 细粒度控制与 Triton 块级编程模型之间的抽象缺口。
MIT 主导团队获美国 ARPA-H STREAM 计划至多 5300 万美元资助,开展名为 PLOW 的项目,利用生成式 AI 设计可对抗除草剂抗性的新一代除草剂分子(化学化合物或 siRNA)。模型将生成数十亿候选分子,经高通量筛选和温室试验验证,首个 RNAi 候选的温室测试预计在项目首年年底完成。团队还将开发可降解农用化学品的活性微生物系统,减少环境和人体暴露。
Latent Space 对 Handshake AI 做首期 AI 数据公司深度访谈,其 AI 训练业务约一年内从上线做到 10 亿美元总年化收入。
百度发布自动化研究系统 ERNIE Evolve,能自主选择研究方向、修改代码并运行实验,只保留通过隐藏评估器和独立审查的改动。
Elith 与 NVIDIA 发布开源金融 persona 数据集 Nemotron-Personas-Finance-Japan,是 Nemotron-Personas-Japan 的金融领域扩展。
英国上周生效的新法规定,散布或持有窒息、勒颈等特定类型色情内容,即使在私人场合录制,也可能面临最高 5 年监禁。多名成人内容创作者表示平台已批量下架数百条视频,其中 Clips4Sale 以“预防性措施”大规模清除内容且几乎未提前通知。创作者抱怨沟通缺失,担心 Black Friday 前二十多年的作品被清除。
AI 科学初创公司 Physical Superintelligence 的内部研究系统运行非公开的 Anthropic 模型,在运行第三天给出 2008 年提出的 Aaronson-Ambainis 量子计算猜想的完整证明,并通过证明助手 Lean 校验,期间还两次改进结果。
Google Cloud 宣布开源 JAX 训练框架 MaxText v0.2.4 支持长上下文训练,通过上下文并行提供 All-gather、A2A(DeepSpeed Ulysses)、P2P(Ring Attention)和 A2A+P2P 混合(USP)四种策略,均基于 Tokamax Splash Attention 内核。
MIT 团队发布开源分子性质预测基础模型 CheMeleon,基于 ChemProp 构建,用来自 PubChem 的约 100 万个分子预训练,学习约 1600 种分子描述符,可针对新性质用少量数据微调。在 58 个测试案例中,该模型优于其他基础模型和经典专家模型;今年早些时候 OpenADMET 主办的竞赛中,前 20 名里有 9 名使用了 CheMeelon,目前已被多家制药公司采用。
Meta 宣布暂缓拟议的广告与商业条款更新,此前参议员 Adam Schiff 与 Marsha Blackburn 致信 Zuckerberg 要求撤回该条款,出版商质疑删去 train 后的 develop 措辞仍允许将抓取内容用于开发任何商业产品。
Ai2 发布 ToyBlocks,这是其首个 FoundationWorld,一个围绕机械臂与桌面方块的开源仿真框架,可自动生成任务、技能和演示数据,用于受控研究机器人学习与评测。
NVIDIA Research 与 Inferact 发布 REINFORCE Zero 论文,指出 rollout 到 learner 的差距分为平滑变化的权重滞后和波动持续的核不匹配,先对齐核再用无截断的 token 级重要性采样即可稳定训练,无需拒绝门。
推荐理由:论文拆解异步 RL 的两类差距,并给出核对齐加未截断重要性采样的完整配方与开源代码,读者可复现到自家训练流程。
Meta 宣布暂停原定 2026 年 11 月 20 日生效的商业条款等系列更新,该更新原允许 Meta 使用商业账户域名和网页内容训练生成式 AI。此前挪威法院在 180 家挪威媒体公司支持的诉讼中下发临时禁令,英国竞争与市场管理局也表示将展开调查。
Google Research 在 Nature 发表 AI-PPG-ACC-HTN 系统,用消费级智能手表的 PPG 和加速度传感器被动检测高血压迹象,无需袖带校准。
推荐理由:原文给出无需袖带校准的智能手表高血压筛查系统及与临床金标准对比的具体数据,读者可据此评估其筛查定位。
METR 于 2026 年 8 月 12 日至 10 月 29 日对 Anthropic 开展高权限独立评估,结论是 Anthropic 模型能力进展速度约为 2024 年 3 月至 2025 年 10 月历史速率的 2 倍,AECI 基准估计加速 1.9 倍(95% 置信区间 1.5–2.8 倍),相当于一年完成了过去约两年的进展。
推荐理由:METR 独立评估 Anthropic 内部数据后给出约 2 倍研发加速的量化估计,并公开了哪些关键证据因保密被删节,读者可据此判断证据局限。
Anthropic 基于隐私保护方法分析 2026 年 8 月 2 日至 9 月 30 日的 207,049 个 Claude 与 Claude Code 科研会话,并辅以 528 名科学家调查。
推荐理由:Anthropic 用隐私保护方法分析 20.7 万科研会话,给出 AI 在各学科的用量分布和加速情景,读者可据此判断 AI 科研的真实使用格局。
Ai2 推出 StateBench 基准,将长上下文状态追踪按难度分为 r-trivial、aperiodic、soluble、general finite 四级,并评测不同架构模型。
Chester Ismay 和 Michelle Smith 在 The Monday Morning Agent 节目中让 AI 智能体分析“禁止 tush push”议题,发现 26.5 万条比赛描述中没有该术语,需要先用共享数据字典为它下定义。
Figma 撰文讲解其 agent 内自研编辑模型的训练方法:先用 SFT 在 Figma 原生文件格式上用超过 25 万条合成样本训练,早期基于 Llama 3.3 70B 即可在编辑任务上与当时顶尖模型竞争,后转向 Qwen 3.8 27B 等更强基座并结合 RL。
Meta 官方博客介绍其 Catching JiTTests 测试方案已从研究原型进入生产基础设施,相关论文 Just-in-Time Catching Test Generation at Meta 发表于 FSE 2026。
Google Research 提出面向 LLM 持续学习的 sleep 框架,让模型在活跃交互与离线记忆巩固之间交替,将易失的短期上下文固化为长期参数。
Ben Horowitz 发文解析 Databricks 如何成为智能体时代企业的系统记录层,公司年化收入超 70 亿美元、同比增长 80%,估值 1900 亿美元,每日由智能体创建超 1700 万个数据库。
SemiAnalysis 团队实测 AWS Trainium3 的新原生 PyTorch 训练栈 TorchNeuron,认为其大幅改善研究训练体验,方向正确但成熟度仍不及 CUDA 生态。
PyTorch 团队发布 TorchTitan 年度更新,新增 Muse Spark Open、Qwen3-VL、Qwen3.5、Kimi K2.7、Kimi K3、DeepSeek-V4 等模型的全训练栈支持,并推出 RL 框架 TitanRL,训练与推理共用同一代码库。
Pragmatic Engineer 采访27家公司的工程负责人和资深工程师,结合 CodeRabbit 与 Gitar 数据分析工程师AI工具支出及PR吞吐变化。
Preferred Networks(PFN)与 Tenstorrent 宣布,其联合提案获日本 NEDO 选定,参与“融合光电子集成技术的 xPU 设计与开发”主题项目。
Fireworks AI 宣布 11 月 30 日前免费开放 Muse Glimmer 30B 的 SFT 训练,并公布用其训练 tuned Glimmer 预测 Kalshi 已结算市场结果的配方。
Together AI 推出 Together Post-Training 服务,支持通过 SFT 和 RL 在其平台上构建自定义模型,训练循环完全由用户定义。
MIT 与 Whitehead 研究所 Pulin Li 团队发现各信号通路会留下跨细胞类型一致的特征基因活动指纹,并发布机器学习模型 IRIS,可据此推断细胞在胚胎发育不同阶段接收的信号,即使对未见过的细胞类型也适用。