Mistral AI 发布 Mistral Large 4 预览版,万亿参数模型月底开放权重
法国 Mistral AI 推出 Mistral Large 4 公开预览版,拥有 1 万亿总参数、490 亿激活参数,原生多模态。该模型在网络安全、金融、法律等领域达开源 SOTA,基于 3800 块英伟达 Grace Blackwell GPU 训练,权重将于本月底开放下载。
当地时间 10 月 6 日,法国人工智能公司 Mistral AI 正式上线 Mistral Large 4 模型的公开预览版(Public Preview),代号 le Chonk,简称 ML4。即日起,开发者可通过 Mistral Studio 体验预览版 API,模型权重计划于本月底开放下载。
据 Mistral 介绍,ML4 是一款原生多模态模型,总参数量达 1 万亿,激活参数为 490 亿。官方称其实测表现足以媲美全球顶尖开源模型,并大幅领先欧美地区所有开放权重模型。在网络安全、金融与法律等关键企业级工作负载中,该模型在所有开源模型中均达到 SOTA 水平;在视觉定位等特定领域,其表现甚至超越当前的前沿闭源模型。
训练层面,ML4 完全在 Mistral 位于欧洲的自建数据中心内完成,依托 3,800 块英伟达 Grace Blackwell GPU 从零开始训练。Mistral 强调,其欧洲部署方案由公司端到端独立运营,严格遵循欧盟法律法规,不依赖任何第三方数字服务提供商。
安全与合规方面,Mistral 正联合顶尖网络安全机构、受信任合作伙伴及政府监管部门,在真实业务环境中对 ML4 展开红队测试。相关合作方将获得专项测试访问权限,该测试版本适当放宽了内容安全审查策略,并强化了网络安全攻防技术能力。