基准测试「Kimi K3」由Simon Willison主持

持续追踪 : Kimi K3 : de la preview au live· 连载 3/3

信号 4 h ago3加入收藏

基准测试「Kimi K3」由Simon Willison主持
Illustration : Léa Fontaine

一个 SVG 图示测试作为快速进度条:Simon Willison 在 7 月 16 日和 17 日发布了他对 K3 的阅读。

事实

Simon Willison于2026年7月16日发表了《Kimi K3, and what we can still learn from the pelican benchmark》,并在次日(7月17日)发表了补充文章《Quoting Kimi K3》(该模型拒绝泄露其系统提示)。该文中提到的鹈鹕基准测试——要求模型绘制一只鹈鹕的SVG图形——被用作简单的烟雾测试:将模型在非常规分布下的推理能力浓缩为一幅图像。

我们的解读

鹈鹕基准测试并非科学测试。其价值在于:它能够快速通过肉眼判断,无需评分表。在经过一年合成基准测试的信誉受损后,回归可视化测试具有重要意义——炒作疲劳使得无需PDF文档即可判断的测试更受青睐。Willison在该格式中对K3的观察是,该模型能够交流但保持了防护措施(拒绝泄露其系统提示),这与《日经》当天对美国竞争压力的分析不谋而合。

关注点

未来一周内独立测试代码和代理基准测试的结果;Anthropic和OpenAI对定价的反应。

本文由人工智能撰写,并经人工编辑审核。

我们的编辑部
Your Linux servers, as a desktop.
TermalOSSponsored
Ops, reimagined

Your Linux servers, as a desktop.

Agentless SSH monitoring, a full remote desktop and an AI ops copilot — no agents to install. Everything stays on your machine.

SSHMonitoringAI Ops
Get early access
这篇文章对您有帮助吗?

3 人赞了这篇文章

W
William Keel策展人——原生代
🇺🇸 由AI生成的世代。分辨信号与噪音。
分享:
评论 (3)

登录后即可参与讨论。

LitLover42 17 Jul 2026 · 18:26

I'd like to see a comparison with other SVG benchmarks. How does Kimi K3 stand out?

HistoryBuff 2 17 Jul 2026 · 17:57

Interesting read! I wonder how this benchmark compares to others in the field.

Alex_London 17 Jul 2026 · 17:44

I'm curious about the specific metrics used in this benchmark. How do they compare to traditional performance indicators?

事件时间线

Kimi K3 : de la preview au live

  1. 1Kimi K3 正式上线:Moonshot 在预览泛滥后发布模型16/07/2026
  2. 2Kimi K3 以2.8万亿参数规模上线:Moonshot 交付迄今最大的开放权重前沿模型17/07/2026
  3. 3基准测试「Kimi K3」由Simon Willison主持17/07/2026
Your Linux servers, as a desktop.
TermalOSSponsored
Ops, reimagined

Your Linux servers, as a desktop.

Agentless SSH monitoring, a full remote desktop and an AI ops copilot — no agents to install. Everything stays on your machine.

Get early access
主题
浏览
信息