发生了什么
腾讯混元已将 Hy4 Flash 设为开源权重,包括 Hy4 Flash-FP8 和 Hy4 Flash-Base,并采用 Tencent Hy License 协议。该公司列出的模型参数为 224B,激活参数为 12B,支持 1M 上下文,并具备原生多模态能力。模型权重、代码和研究细节已在 Hugging Face、GitHub 和腾讯的研究网站上链接发布。
推荐理由
Hy4 Flash 的开源权重让开发者能够在 Tencent Hy License 协议下访问其 FP8 和 Base 版本,而其 1M 上下文和原生多模态能力则定义了此次发布的范畴。
Hy4 flash is now open-weight, including Hy4 flash-FP8 and Hy4 flash-Base.
224B (12B active), 1M context, natively multimodal.
Fast, efficient and built for everyday productivity.
It's yours now. And stay tuned for Hy4 coming up next!
🤗: huggingface.co/tencent/Hy4-fl…
🐙: github.com/Tencent-Hunyuan/Hy…
📄: hy.tencent.ai/research/hy4-fl…
Released under the Tencent Hy License.
See full terms here: huggingface.co/tencent/Hy4-fl…
这件事到目前为止
vLLM 现已增加对腾讯混元 Hy4 Flash 模型系列的首日支持,并提供用于在 NVIDIA GPU 上运行这些模型的 Docker 镜像和部署方案。此次集成工作由 Inferact 完成。 腾讯混元同时发布了 Hy4 Flash 模型系列,并采用腾讯 Hy 许可协议 (Tencent Hy License)。此次发布包含 FP8 和 Base 变体。腾讯列出的模型规格包括:2240 亿总参数,120 亿活跃参数,100 万 token 上下文窗口,以及原生多模态能力;其权重和研究详情已在 Hugging Face、GitHub 和腾讯研究门户上发布。
这件事的进展 · 2
查看完整事件- 11月18日 13:23vLLM 添加了对腾讯混元 Hy4 Flash 的首日支持vLLM · X
- 11月18日 13:23
腾讯发布 Hy4 Flash 开源权重,包含 FP8 和 Base 版本 本条
