跳到正文

#评测/基准

今日 1 条
今天10月2日周五
10月1日周四
  1. The Decoder83

    Google 发布 Gemini 4 Argon:对标 OpenAI 与 Anthropic,未取得明显领先

    Google 发布 Gemini 4 Argon,这是其七个多月来首个前沿模型,先开放给 Fairwind 计划下的可信网络防御方及内部团队,之后才向 API 付费客户和 Google AI Ultra 订阅者开放,时间未定。

    推荐理由:呈现 Gemini 4 Argon 与 GPT-6、Claude 系列在独立基准、token 消耗和价格上的横向对比,可用于判断其性价比位置。

9月30日周三
9月29日周二
  1. Simon Willison80

    Anthropic 发布 Claude Sonnet 5.5

    Anthropic 发布 Claude Sonnet 5.5,官方称其运行速度快 30% 以上、多数工作成本最多降低 30%,定价与 Sonnet 5 相同但各项基准表现更好。

    推荐理由:作者用同一套提示词横评 Sonnet 5.5 与 Opus 5.5,读者可借实测细节判断它的编码能力与免费档定位。

9月22日周二
9月11日周五
8月17日周一
8月13日周四
  1. Microsoft Research32

    MindTopo 基准揭示 VLM 的空间推理能力短板

    Microsoft Research 推出 MindTopo 基准,用于评测多模态大语言模型的拓扑推理能力,涵盖连续性、分离、顺序、包围与打结五类任务,并区分静态推理与交互规划两个层级。测试显示,当前闭源与开源模型在静态识别上表现明显优于交互规划,且均远低于人类水平;失败多出现在规划阶段而非感知阶段,模型在场景变化后难以维持结构关系。图像与视频生成仅在单帧保留结构约束时才有帮助。

8月10日周一
  1. Import AI32

    Import AI 468:23 条 RSI 政策建议、PostTrainBench+,以及信任与透明度如何影响 AI 竞赛

    Import AI 第 468 期收录了智库 IFP 提出的 23 条“低遗憾”政策建议,分属 7 个类别,用于帮助政策制定者应对 AI 研发进一步自动化的风险。MIT 与 Columbia 的论文《Racing to Ruin》分析认为,竞争对手之间实现协调减速的关键变量是技术开发的透明度以及对对方理性、可信的建模。