跳到正文
vLLM 官方博客· Mistral and the vLLM Team·· 17 小时前精选AI 评分64

vLLM 官方发布对 Mistral Large 4 的 day-0 支持

Day 0 support for Mistral Large 4 on vLLM

AI 导读

vLLM 官方博客宣布对 Mistral Large 4 的 day-0 支持,该模型为 72 层 MoE 多模态模型,含 1 万亿参数,支持 FP8 和 NVFP4 检查点。

推荐理由

vLLM 官方宣布对 Mistral Large 4 的 day-0 支持,包含架构适配、推理优化和多平台部署方案,读者可据此评估其在长上下文、多模态和高并发场景下的部署潜力。

来源:vLLM 官方博客 · vllm.ai