Meta 开源前沿多模态 MoE 模型 Muse Spark Open
Meta 开源多模态 MoE 架构模型 Muse Spark Open,拥有约 816B 总参数与 42B 激活参数,支持最高 1M 上下文窗口。模型支持文本、图像、音频和视频多模态输入并输出文本,专门针对代码重构、调试和工具调用等智能体工作流进行优化。官方提供 BF16 与 NVFP4 权重,已全面适配 llama.cpp、SGLang、vLLM 与 MLX 等推理框架并支持 TRL 微调。
推荐理由:文章详细梳理了该多模态混合专家模型的架构细节与运行要求,为长上下文智能体部署提供了具体参考。