MarkTechPost· Asif Razzaq·· 2 天前AI 评分72
Thinking Machines 发布 Inkling 2 Small,594B 总参 17B 激活的 MoE 模型
Thinking Machines Releases Inkling 2 Small, a 594B MoE With 17B Active
AI 导读
Thinking Machines Lab 发布第二代 Inkling 系列首个模型 Inkling 2 Small,总参数 594B、激活 17B 的稀疏 MoE,支持文本与图像输入和 1M token 上下文,已在 Tinker 开放微调与推理。
来源:MarkTechPost · marktechpost.com