跳到正文
四海AI汇/文章阅读
Latent Space· swyx .ai·· 5 天前精选AI 评分80

Thinking Machines 发布 Inkling 2 Small:594B 总参数 17B 激活 MoE,68 小时预训练

[AINews] Inkling 2 Small: 17A-594B trained in 68 hours on 12T tokens, beating Muse Spark

AI 导读

Thinking Machines 发布 Inkling 2 Small,一个 594B 总参数、17B 激活的多模态 MoE,支持文本与图像输入,上下文窗口 1M。

推荐理由

材料汇总了 Inkling 2 Small 的架构、训练时长与多份第三方评测,可对照其与同尺寸模型的强弱项。

来源:Latent Space · latent.space