百度开源 ERNIE 5.5 Flash Base，报告称其在多项基准测试中得分领先

发生了什么

百度已开源 ERNIE 5.5 Flash Base。这是一款拥有 2800 亿参数的 MoE 基础模型，每个 token 激活 140 亿参数。百度表示，该模型使用 33.5 万亿个 token 进行预训练，预训练时支持最长 128K 的上下文，在微调和推理时支持最长 100 万个 token；在多个基准测试中，其成绩在同等规模的模型中名列前茅。该模型可在 Hugging Face 获取：https://huggingface.co/baidu/ERNIE-5.5-Flash-Base

接下来读什么

• 今日还有哪些重要变化OpenAI 发布 Images 2.6，支持导出 SVG、生成 GIF，速度更快

2 家信源报道

这件事到目前为止

百度已开源 ERNIE 5.5 Flash Base。这是一款拥有 2800 亿参数的混合专家基础模型，每个 token 激活 140 亿个参数。该模型现已在 Hugging Face 上发布。 百度表示，该模型使用 33.5 万亿个 token 进行预训练，预训练期间支持 128K 上下文，微调和推理期间支持多达 100 万个 token，并在多个基准测试中取得了同等规模模型中的最佳成绩。