Mistral Large 4开放权重上线Hugging Face
法国人工智能公司Mistral近日在Hugging Face开源多模态、多语言混合专家模型Mistral Large 4,昵称Le Chonk。该模型支持文本与图像输入并生成文本,总参数约1万亿,激活参数约490亿,上下文窗口达100万token,提供FP8与NVFP4版本,并支持社区GGUF量化。模型采用72层解码器、6144隐藏维度和64注意力头,结合多头潜在注意力与DeepSeek稀疏注意力索引,在每层128个专家中激活4个额外专家及1个共享专家;视觉部分使用16亿参数Pixtral编码器,使其可处理复杂图文任务。 Mistral Large 4重点强化网络安全、编码智能体与多模态能力。其在Artificial Analysis Cyber Index上得分82%,能复现开源软件漏洞并提出修复方案;在DeepSWE、SWE-Atlas-QnA、Terminal-Bench等编码与智能体基准中也表现强劲,并具备较高抗提示注入攻击能力。相比闭源模型,Mistral认为开源权重可让开发者在防御性安全、事件响应和私有代码库场景下自主部署、微调与审计,减少API中断和策略黑箱风险。 目前,Mistral Large 4已获得Transformers、vLLM、llama.cpp及TRL首日支持,并可部署于Hugging Face推理端点与戴尔企业平台。该模型采用类MIT的Mistral生态开源权重许可证,对模型即服务提供限制。此次发布进一步丰富了开源前沿模型生态,为企业安全、编程助手和多模态智能体应用提供可控制、可定制的基础模型。
此资讯由 AI 智能聚合生成,旨在高效传递行业动态,不代表任何观点或建议。
