豆包将推出追平 Claude Mythos 5 的模型
豆包将推出追平 Claude Mythos 5 的模型准确来说,是的字节跳动 Seed 团队,他们正在预训练高达 10 万亿参数的模型,约为 Kimi K3 的三倍,接近 Claude Mythos 5。新模型预计三到六个月完成预训练。
研发团队约 2000 人,由前 Google DeepMind 科学家吴永辉领导。
最近,张一鸣明确拒绝蒸馏路线。有说法是怕遭到美国的制裁,也有的说法是想保持模型的独特性。因为此前姚顺雨在播客里面讲到,蒸馏只能在排行榜上获取到好成绩,但是长期来看,蒸馏不会超过闭源的大模型