数码之家

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
查看: 57|回复: 1

[科技] 腾讯混元Hy4正式开源,混元LLM系列实现全量开放

[复制链接]
发表于 昨天 23:41 | 显示全部楼层 |阅读模式

爱科技、爱创意、爱折腾、爱极致,我们都是技术控

您需要 登录 才可以下载或查看,没有账号?立即注册

x
IT之家 11 月 20 日消息,腾讯混元团队今日宣布 Hy4 大模型正式开源,模型权重已在 GitHub、Hugging Face、ModelScope 和 GitCode 四个平台同步上线,开发者可自行下载部署。
至此,混元 LLM 系列已完成全部开源,覆盖 Hy3 preview、Hy3、Hy4 preview、Hy4 及 Hy4 flash 等版本。
Hy4 正式版最早于 11 月 4 日发布,本次开源的是此前预告的模型权重。Hy4 采用 MoE 混合专家架构,总参数 770B,激活参数 49B,上下文窗口突破 100 万 Token。
IT之家此前报道,与旗舰版 Hy4 同步开放的还有主打性价比的 Hy4 flash。Hy4 flash 总参数约 2200 亿,其中包含约 635 亿 Engram 参数,每个 Token 仅激活约 120 亿参数,同样支持最高 100 万 Token 的上下文窗口,并支持文本与图像输入。两者形成从旗舰能力到低成本规模化落地的梯次搭配。
开源协议方面,Hy4 及 Hy4 preview 采用 Apache 2.0 许可证,允许商业使用与修改。腾讯混元同步发布了 Hy4 模型安全评估卡片(System Card),披露了网络安全与生物安全等维度的评估结果。
据官方说明,Hy4 训练数据仅纳入 PoC 生成、漏洞修复等防守性网络安全内容,剔除了漏洞利用、逆向工程与渗透等攻击性数据;腾讯玄武与科恩实验室的审计未发现明显的进攻性能力风险。
参考资料

发表于 1 小时前 | 显示全部楼层
游客请登录后查看回复内容
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

APP|手机版|小黑屋|关于我们|联系我们|法律条款|数码之家-技术知识分享平台

闽公网安备35020502000485号

闽ICP备2021002735号-2

GMT+8, 2026-11-21 02:30 , Processed in 0.109200 second(s), 9 queries , Gzip On, Redis On.

Powered by Discuz!

© MyDigit.Net Since 2006

快速回复 返回顶部 返回列表