Naive-N0.5-Flash 编程评测:宣传的 2,100 tokens/s 在实测中表现如何
Latent Space 作者实测 NaiveAI 的 Naive-N0.5-Flash 编程能力,与 DeepSeek V4.1 Flash 1017 和 GLM 5.3 Flash 对比。
Latent Space 作者实测 NaiveAI 的 Naive-N0.5-Flash 编程能力,与 DeepSeek V4.1 Flash 1017 和 GLM 5.3 Flash 对比。
Fireworks 发布 DeepSeek-V4.1-Flash 基准评测,在 DeepSWE 上以 74.34% pass@1 达到 GPT-6 Astra 级编码准确率,单任务成本 $0.43,约为 Astra 的 1/15。
推荐理由:Fireworks 用自家 DeepSWE 实测数据拆解成本结构,指出缓存命中而非输出才是 agent 开销主因,方法可迁移。
Fireworks AI 用 UC Berkeley 的 CyberGym 基准测试了 DeepSeek V4 Pro 0813、Kimi K3、GPT-5.5 和 Claude Opus 4.8 在真实漏洞攻防上的表现。
Together AI 在 DeepSWE 全部 113 个任务上实测 DeepSeek V4 Pro 0813 与 Claude Fable 5,共 904 次 rollout。
推荐理由:原文以 904 次 rollout 实测两个模型在 DeepSWE 的成本与质量差异,并给出可迁移的级联路由方案及其实测准确率和成本。