过去,Sakana AI更像一家擅长“改装进口车”的公司:组合现成开源模型,再针对日语和本地任务调校。现在它准备自己造发动机。10月26日公布的暂定项目Sakana Sawara,将从随机初始化开始预训练——用大规模数据让模型自行学习语言和知识,而非沿用海外模型的底座。
这一步值得关注,因为预训练是打造基础模型最昂贵的阶段,也直接决定模型能力的上限。Sawara将与负责后训练的Sakana Namazu、负责多模型协作编排的Sakana Fugu并列,组成三条技术路线。Sakana AI还称,会让AI智能体协助规划预训练实验。
说白了,日本所谈的“模型主权”正从减少海外依赖的口号,落到训练自有模型的工程实践。不过项目仍处早期,具体规模、数据来源和时间表尚未披露;公司也明确把算力资源列为制约因素。