Meta发布8160亿参数开放权重模型,支持百万Token上下文

IP归属:广东

文章AI导读

一键萃取文章精髓,核心观点即刻呈现

当地时间10月15日,Meta发布开放权重人工智能模型Muse Spark Open,总参数量达8160亿,采用混合专家MoE架构,每个Token计算激活约420亿参数,支持100万Token上下文窗口,主要面向编程、复杂软件工程及长流程智能体任务。

Meta表示,该模型已针对苹果芯片优化,可通过MLX框架在两台搭载M5 Ultra芯片的Mac Studio上本地运行。每台设备最高提供512GB统一内存,两台合计约1TB。公司展示的应用包括修复软件缺陷、开发新功能及完成构建,以及调用DaVinci Resolve审阅视频素材、筛选片段并裁切为竖屏画面。

据悉,模型已通过Baseten、Fireworks AI、Groq、OpenRouter及Together AI等平台提供API服务,权重可通过Hugging Face、亚马逊SageMaker AI、谷歌Cloud Model Garden和微软Foundry Models获取,并适配vLLM、SGLang、TensorRT-LLM等推理框架。

陀螺科技现已开放专栏入驻,详情请见入驻指南: https://www.tuoluo.cn/article/detail-27547.html

前方智能专栏: https://www.tuoluo.cn/columns/author1911845/

本文网址: https://www.tuoluo.cn/article/detail-10131541.html

免责声明:
1、本文版权归原作者所有,仅代表作者本人观点,不代表陀螺科技观点或立场。
2、如发现文章、图片等侵权行为,侵权责任将由作者本人承担。

相关文章