11 月 20 日,腾讯混元把 Hy4 的权重放上了 GitHub、Hugging Face、ModelScope 与 GitCode,至此混元大语言模型系列完成全量开源。Hy4 是 MoE 架构,总参数 770B,每 token 激活 49B,上下文窗口突破 100 万 token;同批开放的 Hy4 flash 总参数 224B,其中含 64B Engram 参数,每 token 激活 12B,支持多模态输入与同规格长上下文。

但这条新闻里最值得单独说的一点,不是参数规模,而是许可。不少媒体在 11 月 20 日当天的报道里把 Hy4 的协议写成 Apache 2.0,但实际放出的许可文件标题是 Tencent Hy License, Version 1.0,文件开头明确写明:它从 Apache License 2.0 改出,主要改动是第 10 条,并且“不是 Apache License 2.0”。其中第 10.2 条对准的是大规模模型即服务:如果让第三方远程调用推理或微调,在两种情况下必须另行取得书面授权。

这意味着三件事。第一,个人学习、内部使用与小规模部署,Hy4 的许可基本够用;但要把它做成对外的大规模模型服务,先看第 10 条,别把“正式开源”或媒体写成的 Apache 2.0 当成已经拿到了无门槛商用权。第二,拿到权重不等于拿到全部:官方模型卡的“已知局限”写得很直,Hy4 自称是目前最强的开源模型之一,但与顶尖闭源模型仍有较大差距,尤其是在内部构建的前沿数学、长程开发、模型迭代与视觉问答测试集上;这部分是公司自己的评测套件,还不是独立评测结论。第三,部署门槛要算清楚:官方给出的 vLLM 与 SGLang 启动命令把 Hy4-FP8 的张量并行写成 8,旗舰权重面向的是可做多卡推理的集群,不能按笔记本本地模型的门槛来理解。

对想试用的人来说,建议的顺序是:先读许可文件第 10 条,确认自己的使用方式在不在授权范围内;再按官方配方搭多卡推理环境;最后用自己的任务做评测,别只看官方榜单。

出处:NewToken 11 月 20 日核查报道,https://www.newtoken.link/read/tencent-hy4-flagship-weights-now-in-repos