博客

Kimi少了一个天才少年

10月15日，年仅17岁的陈广宇在社交平台X上发布消息，透露自己近期已告别月之暗面Kimi团队。

他并未说明离职缘由或透露接下来的去向，仅向同事及当初愿意雇佣一名16岁少年的团队表达了谢意。他提到，过去一年是自己迄今生命中最精彩的时光。

不过，从他离职后的社交互动来看，未来的动向已隐约可寻。

Anthropic的核心研究员Sholto Douglas在评论区送上祝贺，询问他原本前往卡内基梅隆大学（CMU）的计划是否依然有效，并邀请他前往旧金山，与Prime、Base10等团队共事。陈广宇回复道：“谢谢Sholto！我正要去海湾区。”

Kimi团队的研究员、论文共同作者Yulun Du则写道，他曾就陈广宇的决定与其进行过多次深入交流。看到他离开“令人难过且心碎”，但在这个年纪，尽可能探索并追随新的好奇心，或许是对他最有利的选择。

2025年11月，16岁的陈广宇以实习生身份加入Kimi。不到一年后，他与张宇、苏剑林共同署名的Attention Residuals已融入Kimi K3的架构。

外界记住了这位17岁的共同第一作者，而Kimi留下的则是一项被嵌入模型“地基”的技术。工牌上的经历虽短，模型中的印记却已长存。

一条技术帖，敲开两家AI公司

陈广宇的起点，与“天才少年”四个字相去甚远。

他出生于2009年，没有奥赛金牌，没有跳级经历，也未曾从小学习编程。2024年4月，读高一的他做出一个决定：暂停所有自己不感兴趣的事。

他在博客中回忆，那时只专注于学习计算机和人工智能。他学习大模型的方法，是将下载的论文上传给Gemini，然后反复提问。他在博客中将Gemini称为“导师”。

2025年5月，他在网上分享了一篇关于DeltaNet的技术博客，获得了DeltaNet关键贡献者之一杨松琳的回应。杨松琳当时正在麻省理工学院攻读博士，同时也是线性注意力开源社区FLA的发起者。

这次互动让帖子传播更广，吸引了美国AI初创公司Tilde Research的CEO。对方主动约陈广宇通话，向他介绍公司正在进行的项目。

据报道，陈广宇当时并未立即加入。他继续阅读论文、编写代码，直到能够编写自定义的GPU计算内核并用于训练，才去应聘。

那年7月，他独自前往加州帕洛阿尔托，开始了为期七周的实习。陈广宇后来回忆，自己每天在办公室工作15小时，与其他研究人员共同参与了内存优化混合专家模型MoMoE项目。

硅谷实习结束后，陈广宇收到了月之暗面的邀请。2025年11月，他加入Kimi团队，继续从事模型架构研究。

今年1月，他在社交平台写下一个小插曲：自己正与张宇研究一项令人兴奋的模型架构改进，母亲打来电话祝他生日快乐，他才意识到自己已17岁。

两个月后，AttnRes论文发布当天，硅谷半个AI圈为之震动。

OpenAI联合创始人Andrej Karpathy评价说，看来还没完全理解“Attention is All You Need”这句话的字面含义。特斯拉CEO马斯克在评论区留下一句“Impressive work from Kimi”。

出圈之后，陈广宇在接受媒体采访时反复强调“不要造神”，希望外界关注的是团队共同完成的研究，以及它试图解决的底层难题。

共同“一作”的分量

AttnRes的最初想法和小规模实验由苏剑林提出。看到初步结果后，张宇和陈广宇加入，在更大规模的模型上继续验证。

训练团队核算后认为，这套方案在当时的环境下还不够可行。苏剑林在复盘时用了一个直白的说法：“说白了还是穷。”

要理解他们遇到的困难，可以把模型的多层计算想象成一群接力做题的人。每个人完成一轮处理后，都要将结果交给下一个人。

传统残差连接的做法，是将前面各层产生的信息不断相加。后面拿到的是合并后的结果，很难单独挑出某一层的信息。

这类似于每个人都往同一份合并笔记中添加内容，却没有保留一份可供随时查阅的逐层记录。层数越多，累加的信息越多，一些有用的早期信息也可能被稀释。

AttnRes改变了这一做法：让后面的层能够参考前面各层的输出，根据当前需要决定侧重哪些信息。就像做题时可以回头翻阅不同人的笔记，找出需要的部分。

麻烦也随之而来。要随时翻到这些“笔记”，训练系统就必须保存更多中间结果，并在不同设备间传输。新方法在小规模实验中有效，但放入大规模训练，还需处理显存和通信开销。

之后，陈广宇与张宇共同提出了Block AttnRes，即分块注意力残差。 将上百层网络划分为若干区块，块内维持低成本的基础累加，只在块间进行精细的注意力聚合，将显存复杂度从层数级降至块数量级。

实验显示，只需分成约8个块，就能恢复全量版本绝大部分性能，端到端推理延迟增量控制在2%以内。

Kimi团队在480亿参数的Kimi Linear架构上，用1.4万亿token进行实测，AttnRes达到同样效果，只需基准模型约80%的算力。在GPQA-Diamond上提升7.5分，Minerva Math上涨3.6分，HumanEval上涨3.1分。

2026年7月发布的Kimi K3总参数2.8万亿，是全球首个开放权重的3T级模型，AttnRes正是支撑它的底座技术之一。

陈广宇参与的另一项工作，是加速KDA的计算内核。

KDA是K3采用的一种线性注意力机制，处理长上下文时，能降低部分计算和存储开销。陈广宇在离职帖中提到，自己与张宇优化过它的内核，并尝试了各种可能的设计。

陈广宇离开前一个月，Kimi公布了新一轮全球人才招募。

9月9日，Kimi宣布招募7名无法被常规岗位描述定义的“Wild Card”人才，同时推出“穿越计划”。该计划面向校招生和实习生，不限专业、不限实习年级，也不把学历和资历作为主要门槛，优秀者可以获得期权。

这套招聘逻辑与陈广宇的经历高度相似：先找到一个人，再决定他能解决什么问题；先看上限，再补齐岗位名称。

但这套机制也有代价。

非典型人才往往需要更高密度的交流、更快的反馈和更大的试错空间。他们不一定适应标准化的汇报线，也不一定愿意沿着传统职业路径留下。公司能否提供真实问题、足够算力、清晰的贡献归属，以及长期的选择空间，决定了这类人才最终是成为组织能力，还是只留下一个短暂的故事。

他在离职帖最后写道：“还有更多事情值得探索。”

本文来自微信公众号“数智奔流”，作者：熵野，36氪经授权发布。

在九游在线平台上，这一事件引发了广泛讨论，用户们纷纷关注这位年轻人才的未来动向。