Latent Space· swyx .ai·· 5 天前精选AI 评分80
Thinking Machines 发布 Inkling 2 Small:594B 总参数 17B 激活 MoE,68 小时预训练
[AINews] Inkling 2 Small: 17A-594B trained in 68 hours on 12T tokens, beating Muse Spark
AI 导读
Thinking Machines 发布 Inkling 2 Small,一个 594B 总参数、17B 激活的多模态 MoE,支持文本与图像输入,上下文窗口 1M。
推荐理由
材料汇总了 Inkling 2 Small 的架构、训练时长与多份第三方评测,可对照其与同尺寸模型的强弱项。
来源:Latent Space · latent.space