腾讯发布开源MoE大模型Hy3 总参数295B支持256K上下文

腾讯近期正式推出开源混合专家(MoE)大模型Hy3,该模型总参数规模达295B,激活参数仅21B,支持最长256K的上下文窗口,模型权重采用Apache 2.0协议完全开放。作为国内头部科技厂商推出的高参数开源MoE方案,Hy3兼顾了大模型的效果上限与推理落地成本,将为不同规模的主体开发大模型应用提供新的选型。

配图

---

2026年以来,全球开源大模型赛道已经脱离了单纯堆参数的早期竞争阶段,企业用户对模型的落地成本、商用友好度、长文本处理能力的需求快速提升。此前市场上的高参数开源MoE方案多由海外厂商或创业公司推出,国内市场一直缺少兼具技术成熟度、生态支持能力和商用友好性的头部厂商方案,腾讯Hy3的发布恰好填补了这一空白。

Hy3的核心优势体现在参数效率的大幅优化,其采用主流混合专家架构,总参数规模达295B,但单次推理仅需要激活21B参数,相当于用接近20B级稠密模型的推理成本,获得接近300B级模型的效果表现,大幅降低了高参数大模型的落地门槛。

同时该模型支持256K超长上下文窗口,可一次性处理近20万字的完整文档,覆盖法律卷宗、学术著作、企业合同、多轮长对话等复杂场景需求。更值得关注的是,Hy3的模型权重采用Apache 2.0开源协议开放,所有用户都可以免费修改、分发甚至商用,无需单独申请授权,对中小创业团队和传统企业的适配性极强。

作为国内拥有最丰富To C、To B大模型落地经验的科技厂商之一,腾讯推出Hy3的意义不止于增加一个开源模型选项。后续腾讯大概率会配套开放对应微调工具链、部署方案和多模态拓展接口,基于Hy3的垂域适配方案、AI Agent开发框架会快速涌现,进一步缩小开源模型与闭源头部模型的能力差距,推动大模型在全行业的普及落地。

本文基于公开信息分析整理,仅供参考。更多AI工具动态与行业解读,请持续关注本站更新。