跳到正文
热点事件持续更新

百度开源 ERNIE-5.5-Flash-Base 基座模型

3 篇报道1 个报道来源55 分钟前更新

先了解这件事

AI 综述

百度文心大模型发布并开源 ERNIE-5.5-Flash-Base 语言模型权重,模型权重已上线 Hugging Face 并提供 FP8 与 BF16 版本供开发者探索与使用。 该模型采用稀疏 MoE 架构,总参数量为 280B,每 token 激活 14B,基于 33.5T tokens 从零完成预训练,其权重直接取自预训练阶段且未经过中后训练。在上下文能力方面,该模型的训练上下文最长为 128K,微调与推理支持高达 1M tokens 的上下文窗口。

AI 根据报道生成 · 16 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. 百度 Baidu
    百度发布 ERNIE 5.5 Flash Base 并上架 Hugging Face

    百度发布 ERNIE 5.5 Flash Base 模型,并在 Hugging Face 上线相关资源供开发者探索与使用。

  2. 百度 Baidu
    百度开源 ERNIE 5.5 Flash Base 基座模型

    百度开源了 ERNIE 5.5 Flash Base 语言模型,采用稀疏 MoE 架构,总参数量 280B、激活参数 14B。该模型基于 33.5T tokens 预训练,支持高达 1M-token 的上下文窗口,权重直接取自预训练阶段且未经过中后训练。

  3. IT之家·人工智能
    百度文心开源 ERNIE-5.5-Flash-Base 基座模型,总参数 280B 每 token 激活 14B

    百度文心大模型发布并开源 ERNIE-5.5-Flash-Base 基座模型,采用稀疏 MoE 架构,总参数 280B,每 token 激活 14B,在 33.5T tokens 上从零完成预训练。该模型最长训练上下文为 128K,微调与推理支持 1M tokens 上下文,权重已上线 Hugging Face 并提供 FP8 与 BF16 版本。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。