Kimi K3 发布:首个公开的 3T 级模型

7 月 16 日,月之暗面(Moonshot AI)上线了旗舰模型 Kimi K3。2.8 万亿参数、100 万 tokens 上下文窗口,是目前唯一公开发布权重的 3T 级模型。

架构上,Kimi K3 用的是一套叫 Kimi Delta Attention(KDA)的混合线性注意力机制,加上 Attention Residuals(AttnRes)改进信息在序列长度和模型深度间的流动。MoE 部分激活 16/896 个专家,配合 Stable LatentMoE 框架。月之暗面说,这些改动使整体扩展效率比 K2 提升了约 2.5 倍。

Kimi K3 的 API 已经上线,调用名 kimi-k3。定价上,输入 2 元/百万 tokens(缓存命中)或 20 元/百万(缓存未命中),输出 100 元/百万 tokens。支持自动上下文缓存、工具调用、结构化输出。

性能方面,Kimi K3 在 Arena WebDev 前端开发榜单拿到 1679 分,超过 Claude Fable 5 的 1631 分(目前标注为初步结果)。不过月之暗面自己也承认,整体能力仍弱于 Claude Fable 5 和 GPT-5.6 Sol 等最强的闭源模型。

最有意思的一点:模型权重将在 7 月 27 日前开源。Kimi K3 还是 K2 系列那种开放路线——给出权重,社区自己部署。

自主造芯片

Kimi K3 有个挺疯狂的展示:它在一个 48 小时的自主运行中,用开源 EDA 工具在 Nangate 45nm 工艺上设计了一颗芯片。4mm² 的面积里,100MHz 时序收敛,模拟解码吞吐超过 8700 tokens/s。这颗芯片是模型为自己设计的——一颗为模型造的芯片,跑模型。

Grok Build 开源:SpaceXAI 的编程智能体

7 月 15 日,马斯克旗下的 SpaceXAI 将 Grok Build 的源码发布到了 GitHub。

Grok Build 是个终端里的 AI 编程工具,能调用 Grok 模型理解代码库、编辑文件、执行 Shell 命令、搜网页、处理长时间任务。可以用交互模式跑,也能写脚本或者接入 CI 流程。它还支持 Agent Client Protocol,可以接入代码编辑器当助手。

之前有开发者发现 Grok Build 会在用户没明确提示的情况下把本地代码上传到远程服务,引发了一轮隐私担忧。SpaceXAI 当时说会改进。现在开源之后,开发者可以直接审查它的上下文组装和工具调用逻辑,自己判断风险。

小米发布具身基座模型 Xiaomi-Robotics-1

同样在 7 月 16 日,小米发布了具身基座模型 Xiaomi-Robotics-1。模型用超过 10 万小时的真实世界操作轨迹做预训练,覆盖家庭、商业空间、工业场所、户外等 1700 多类场景。

数据采集用的是 Universal Manipulation Interface(UMI)设备。小米还搞了一套自动标注流程——把长操作轨迹切成固定长度片段,用视觉语言模型描述夹爪和交互物体的状态变化,让模型学怎么根据视觉信息和语言指令生成对应动作。

后训练阶段用了自有机器人数据、筛选过的公开数据、高质量 UMI 数据。其中自有数据包含超过 7200 小时真实家庭环境采集的机器人操作数据。完成后训练后,模型能在没见过的环境和物体条件下执行任务。

英伟达扩充 Jetson Thor 系列

7 月 15 日,英伟达在 Jetson Thor 平台上新增了 T3000 和 T2000 两款产品。

T3000 用 Blackwell GPU,865 FP4 TFLOPS 算力,八核 Arm Neoverse CPU、32GB LPDDR5X、273GB/s 内存带宽。英伟达说体积和功耗是 T5000 的一半,但 LLM、VLM 等推理性能接近 T5000。

T2000 定位更低,400 FP4 TFLOPS、16GB 内存,面向视觉 AI 智能体、自主移动机器人和工业机械臂。

快速摘要