📰 “小号”美国最强开源模型:Inkling-Small 登场,约 1/4 规模提供相近 AI 性能
“小号”美国最强开源模型:Inkling-Small 登场,约 1/4 规模提供相近 AI 性能
IT之家 7 月 31 日消息,Thinking Machines Lab 昨日(7 月 30 日)发布博文,宣布推出 Inkling-Small 模型,其性能媲美 Inkling,但规模降低至约四分之一。
IT之家此前报道,Inkling 号称“美国最强开源 AI 模型”,采用混合专家(MoE)架构,总参数 975B、激活参数 41B,最长上下文 1M tokens。
而本次推出的 Inkling-Small 模型同样采用混合专家(MoE)架构,总参数为 276B,激活参数为 12B,规模约为 Inkling 的 1/4,在 NVIDIA GB300 NVL72 系统上训练。
查看原文 → ↗
🤖 AI 技术资讯机器人