腾讯混元AMA回应算力瓶颈 Hy4将大幅扩容
时间:2026年11月21日凌晨,腾讯混元团队在Reddit的r/LocalLLaMA社区举行了一场持续120分钟的Ask Me Anything(AMA)活动,与全球开发者直接交流Hy4系列模型的技术细节与未来规划。腾讯首席AI科学家、混元大模型负责人姚顺雨也参与了此次交流。
地点:Reddit r/LocalLLaMA社区(线上)
人物:腾讯混元团队、腾讯首席AI科学家姚顺雨、全球开发者社区
事件详情:在此次AMA中,混元团队围绕刚发布不久的旗舰模型Hy4及低成本版本Hy4 flash,回答了近百个问题,内容涵盖模型规模、架构选型、算力约束、开源路线及安全策略等多个方面。团队透露,下一代Hy模型的参数规模将会进一步大幅扩大,同时Hy4 mini已列入开发路线图,Flash-Lite等更小尺寸模型也在规划中。在架构层面,团队确认Hy4 flash总参数量为224B,包含64B Engram参数和12B激活参数,单任务成本仅为Hy4的二十分之一,约为0.26元。关于架构选型,团队解释了为何在GQA与MLA之间最终选择MLA:虽然MLA计算强度更高,但引入DSA后降低了解码阶段的计算开销,在KV Cache相同的情况下能提供更好的模型质量。针对MoE稀疏度,团队表示过度稀疏的架构会占用大量GPU显存却无法充分利用算力,Engram参数占比约三分之一时能达到最佳平衡。
背景:此次AMA发生在腾讯密集发布Hy4系列模型的关键节点。11月4日,腾讯发布Hy4正式版并开放权重,该模型在Artificial Analysis智能指数榜单上位列中国模型第二,在Agent Arena榜单上居开源模型首位。一周多后,Hy4 flash上线,主打极致性价比。然而,在先进AI芯片获取日益受限的背景下,腾讯如何继续缩小与全球前沿模型的差距,成为开发者关心的核心问题。混元团队在AMA中回应称,团队正在尽可能充分地利用现有资源,以追赶前沿水平。
影响:混元团队明确表示将继续坚持开源路线,不会转向闭源。目前Hy4和Hy4 flash已在OpenCode、Claude Code和Cline等开发工具中得到广泛使用,团队正在推进llama.cpp适配,预计近期会在开源社区发布相关支持,同时与vLLM、SGL等社区深入合作。在安全方面,团队对Hy4的部分网络安全能力进行了限制,仅保留漏洞复现和修复相关的训练数据,移除了漏洞利用等进攻性内容。团队评估认为,Hy4的漏洞发现能力较强,而漏洞利用能力相对较弱。此外,团队还透露正在开发Hyra 3.0,以不断提升模型研发的可复用工具链。
总结:腾讯混元团队通过此次Reddit AMA,向外界传递了在有限算力条件下坚持scaling路线、持续投入开源生态的信号。从下一代模型扩容、小尺寸产品规划,到架构选型的深层逻辑,再到安全与商业化的平衡,这场两个小时的交流展现了腾讯在大模型领域的系统性思考。在算力受限成为行业常态的当下,混元团队选择的路径——通过强化学习、架构创新和推理系统协同设计来提升效率——或许为中国AI实验室如何应对外部约束提供了一个参考样本。
参考来源:
智东西
https://zhidx.com/p/612973.html
凤凰网
https://tech.ifeng.com/c/8yE5loSnUps
腾讯新闻
https://news.qq.com/rain/a/20261121A036ZO00
新浪财经
https://finance.sina.com.cn/tech/internet/2026-11-21/doc-inizmwam5159013.shtml
市场资讯
https://shishifenxi.com/news?cat=tech&article_id=ed37cebc3dd3359b7af49272c8b334b3-0&showsum=true
Tencent Hy 官方账号
https://x.com/TencentHunyuan/status/2123095410327879735







