当前位置：首页 > 文章列表 > 科技周边 > 人工智能 > Yuan3.0Ultra开源，多模态模型发布

Yuan3.0Ultra开源，多模态模型发布

2026-03-26 23:54:56 0浏览收藏

浪潮信息YuanLab.ai团队正式开源万亿参数级多模态大模型Yuan3.0 Ultra，以1.01T总参数、68.8B激活参数和创新的MoE架构，突破性集成文本、图像与表格三模态统一理解能力，并通过Layer-Adaptive Expert Pruning（LAEP）剪枝算法提升预训练效率49%、Revised Reflection Inhibition Reward Mechanism（RIRM）显著抑制无效“过度思考”，在文档解析、RAG检索增强、多步工具调用、NL2SQL等企业级复杂场景中全面领先；现已开放GitHub与Hugging Face全量权重及技术文档，为金融风控、智能BI、知识管理及多模态Agent等高价值落地应用提供强大底层支撑——这不仅是参数规模的跃升，更是面向真实产业需求的AI基础设施级进化。

Yuan3.0 Ultra 是什么

Yuan3.0-Ultra 是由浪潮信息 YuanLab.ai 团队开源的一款万亿级参数多模态基础大模型，总参数量达 1.01T，激活参数为 68.8B。该模型基于 MoE（Mixture of Experts）架构设计，融合高性能视觉编码器与多模态对齐模块，并首次提出 Layer-Adaptive Expert Pruning（LAEP）剪枝算法，显著提升预训练效率达 49%。同时引入改进型反射抑制奖励机制（RIRM），有效缓解模型“过度思考”问题，在 DocMatix、ChatRAG、MMTab 等面向企业场景的 RAG 检索增强、表格理解及工具调用基准测试中均取得领先表现，专为企业级复杂 Agent 应用提供底层支撑。

Yuan3.0 Ultra— 浪潮信息团队开源的多模态基础模型

Yuan3.0 Ultra 的核心能力

跨模态联合理解：支持文本、图像与表格三类模态的统一建模与协同推理，实现深层次语义融合。
检索增强式生成（RAG）：精准匹配企业私有知识库中的相关内容，输出具备可追溯依据的高可信度响应。
高精度文档解析：针对财务报表、审批单据等结构化/半结构化文档进行深度语义解析，准确提取关键字段与逻辑关系。
智能摘要生成：在保持原文核心信息完整性的前提下，自动生成简洁、连贯、无失真的高质量摘要。
多步工具调用能力：支持按需编排多个外部工具执行链式操作，满足复杂业务流程的自动化需求。
自然语言到 SQL 转换：将用户提出的数据库查询意图精准映射为标准 SQL 语句，提升结构化数据访问效率。

Yuan3.0 Ultra 的关键技术突破

Layer-Adaptive Expert Pruning（LAEP）：针对 MoE 架构中专家模块负载严重失衡的问题，LAEP 在训练稳定阶段逐层动态识别并裁剪低效专家单元，并结合贪心重分配策略优化各计算设备间的负载均衡，最终将模型规模从 1515B 压缩至 1010B，预训练吞吐量提升 49%。
Revised Reflection Inhibition Reward Mechanism（RIRM）：在快速思考强化学习阶段，RIRM 引入差异化奖励函数——对反思步骤少但回答正确的样本给予更高正向激励，而对反思冗长却结果错误的样本施加更强负向惩罚，从而显著抑制无效反思行为，使训练准确率提升 16.33%，平均输出长度缩短 14.38%。
Localized Filtering-based Attention（LFA）：通过引入局部过滤机制增强注意力权重的空间约束性，相较传统注意力机制更擅长捕捉长程依赖关系与细粒度语义关联，提升整体建模精度。