跳到正文
MarkTechPost· Asif Razzaq·· 2 天前AI 评分72

Thinking Machines 发布 Inkling 2 Small,594B 总参 17B 激活的 MoE 模型

Thinking Machines Releases Inkling 2 Small, a 594B MoE With 17B Active

AI 导读

Thinking Machines Lab 发布第二代 Inkling 系列首个模型 Inkling 2 Small,总参数 594B、激活 17B 的稀疏 MoE,支持文本与图像输入和 1M token 上下文,已在 Tinker 开放微调与推理。

来源:MarkTechPost · marktechpost.com