开源权重可下多模态已被替代限制许可 · Llama 4 Community License
Meta logo

Llama 4 Maverick

Meta · 发布 2025-04-05 · 已被替代Muse Spark 1.2

Meta 的原生多模态 MoE,1M 上下文,许可有 MAU 限制。

参数
400B 总 / 17B 激活
MOE
上下文
1M
价格 / 1M tok
$0.15 / $0.60
第三方托管常见价 · 2025-12-20
最低可跑
Mac Studio M3 Ultra
FP8 · 402 GB · ≈23 tok/s
Arena Elo1330
2025-12-20
AA 综合指数
竞赛编程43.4
2025-12-20
GPQA 推理69.8
2025-12-20
类型
MoE
注意力
GQA + iRoPE(交替无位置编码层)
层数
48
专家
128 · 激活 1 + 共享
隐藏维
5120
词表
未披露

完善中

Token Embedding× 48 层注意力:GQA + iRoPEKV 头 8 · head_dim 128路由top-1E1E2E3共享专家128 专家 · 激活 1 · d=5120LM Head400B / 17B 激活实线 = 已公开 · 虚线 = 未披露
精度权重大小说明
BF16800 GB官方精度
FP8400 GB
Q8暂无
Q4245 GBGGUF Q4_K_M 或等效
消费级 24GB
未评估
单卡 80GB
未评估
8×80GB 节点
FP8 8×H100(官方目标)

⚠ 能加载 ≠ 能在满上下文 / 高并发下舒服跑。标「估」的数字来自 计算器 公式或社区量化文件大小。

完善中

硬件配置与预估吞吐
最低可跑(8K 上下文)
Mac Studio M3 Ultra 512GB
≈¥75,000 · 合计 ≈¥75,000 · 统一内存
量化
FP8
解码
23 tok/s
最大上下文
947K
推荐配置(≥Q8 · 32K 上下文 · ≥15 tok/s)
Mac Studio M3 Ultra 512GB
≈¥75,000 · 合计 ≈¥75,000 · 统一内存
量化
FP8
解码
20 tok/s
最大上下文
947K
配置量化占用 / 显存解码 tok/s预填充 tok/s最大上下文
8× L40S 48GB工作站Q6_K331 GB / 384 GB2509635290K
4× RTX PRO 6000 Blackwell 96GB工作站Q6_K326 GB / 384 GB25913235316K
8× A100 40GB数据中心Q5_K_M287 GB / 320 GB51333035183K
4× A100 80GB数据中心Q5_K_M282 GB / 320 GB33616518209K
4× H20 96GB数据中心Q6_K326 GB / 384 GB5793918316K
4× 昇腾 Ascend 910B 64GB数据中心Q4_K_M251 GB / 256 GB3071482433K
4× H100 80GB PCIe数据中心Q5_K_M282 GB / 320 GB33040024209K
4× H100 80GB SXM数据中心Q5_K_M282 GB / 320 GB55252359209K
2× AMD MI300X 192GB数据中心Q6_K324 GB / 384 GB38334597329K
2× H200 141GB数据中心Q5_K_M280 GB / 282 GB3962617919K
2× B200 192GB数据中心Q6_K324 GB / 384 GB57959559329K
Mac Studio M3 Ultra 512GB统一内存FP8402 GB / 490 GB23754947K

单流(batch=1)估算:解码 ≈ 显存带宽 × 效率 ÷ 每 token 读取字节(激活参数 × 量化位宽 + KV);预填充 ≈ FP16 算力 × 0.45 ÷ (2 × 激活参数)。多卡按张量并行、带宽求和 × 0.55。实际受引擎、驱动、PCIe 影响,误差 ±30%。反向查:我的卡能跑谁 →

用计算器按你的上下文与并发估算 →

完善中

逻辑能力

非推理模型,考试型与工程型均为中游。

亮点
  1. 1.原生图文
  2. 2.1M 上下文(宣称)
  3. 3.17B 激活,吞吐高
  1. 1.月活 > 7 亿需单独授权,欧盟限制
  2. 2.推理 / 代码弱于同期中国开源模型
  3. 3.长上下文实测质量争议
适合:多模态英文对话
不适合:推理 / 代码主力
基准分数来源日期证据
LMArena Text Elo人类偏好 Elo1330LMArena Text (style control)2025-12-20独立复测
LiveCodeBench竞赛编程43.4%Llama 4 模型卡2025-12-20厂商公布
GPQA Diamond研究生级科学问答69.8%Llama 4 模型卡2025-12-20厂商公布
MMMU多模态理解73.4%Llama 4 模型卡2025-12-20厂商公布

更新 2025-12-20 · 排名供选型参考,基准会饱和、会泄漏、会过时。