跳到正文

腾讯发布 Hy4 Flash 开源权重,包含 FP8 和 Base 版本

Tencent Hy · X当事人· @TencentHunyuan·· 3 小时前精选

7784 次浏览 · 234 赞 · 36 转发 (收录时)

原文

发生了什么

腾讯混元已将 Hy4 Flash 设为开源权重,包括 Hy4 Flash-FP8 和 Hy4 Flash-Base,并采用 Tencent Hy License 协议。该公司列出的模型参数为 224B,激活参数为 12B,支持 1M 上下文,并具备原生多模态能力。模型权重、代码和研究细节已在 Hugging Face、GitHub 和腾讯的研究网站上链接发布。

推荐理由

Hy4 Flash 的开源权重让开发者能够在 Tencent Hy License 协议下访问其 FP8 和 Base 版本,而其 1M 上下文和原生多模态能力则定义了此次发布的范畴。

正文 · 中文版本尚未就绪(原文)

Hy4 flash is now open-weight, including Hy4 flash-FP8 and Hy4 flash-Base.

224B (12B active), 1M context, natively multimodal.
Fast, efficient and built for everyday productivity.

It's yours now. And stay tuned for Hy4 coming up next!

🤗: huggingface.co/tencent/Hy4-fl…
🐙: github.com/Tencent-Hunyuan/Hy…
📄: hy.tencent.ai/research/hy4-fl…

Released under the Tencent Hy License.
See full terms here: huggingface.co/tencent/Hy4-fl…

这件事到目前为止

vLLM 现已增加对腾讯混元 Hy4 Flash 模型系列的首日支持,并提供用于在 NVIDIA GPU 上运行这些模型的 Docker 镜像和部署方案。此次集成工作由 Inferact 完成。 腾讯混元同时发布了 Hy4 Flash 模型系列,并采用腾讯 Hy 许可协议 (Tencent Hy License)。此次发布包含 FP8 和 Base 变体。腾讯列出的模型规格包括:2240 亿总参数,120 亿活跃参数,100 万 token 上下文窗口,以及原生多模态能力;其权重和研究详情已在 Hugging Face、GitHub 和腾讯研究门户上发布。

这件事的进展 · 2

查看完整事件
  1. 11月18日 13:23
    vLLM 添加了对腾讯混元 Hy4 Flash 的首日支持vLLM · X
  2. 11月18日 13:23

    腾讯发布 Hy4 Flash 开源权重,包含 FP8 和 Base 版本 本条

接下来读什么

查看这件事的完整进展vLLM 新增腾讯混元 Hy4 Flash 模型系列的首日支持