百度开源 ERNIE-5.5-Flash-Base 基座模型
热点事件持续更新
百度开源 ERNIE-5.5-Flash-Base 基座模型
3 篇报道1 个报道来源55 分钟前更新
先了解这件事
AI 综述
百度文心大模型发布并开源 ERNIE-5.5-Flash-Base 语言模型权重,模型权重已上线 Hugging Face 并提供 FP8 与 BF16 版本供开发者探索与使用。 该模型采用稀疏 MoE 架构,总参数量为 280B,每 token 激活 14B,基于 33.5T tokens 从零完成预训练,其权重直接取自预训练阶段且未经过中后训练。在上下文能力方面,该模型的训练上下文最长为 128K,微调与推理支持高达 1M tokens 的上下文窗口。
AI 根据报道生成 · 16 分钟前更新
最新进展11月5日 16:55
百度发布 ERNIE 5.5 Flash Base 并上架 Hugging Face报道时间线
沿着报道,了解事件的不同侧面。
11月5日
- 百度 Baidu百度发布 ERNIE 5.5 Flash Base 并上架 Hugging Face
百度发布 ERNIE 5.5 Flash Base 模型,并在 Hugging Face 上线相关资源供开发者探索与使用。
- 百度 Baidu百度开源 ERNIE 5.5 Flash Base 基座模型
百度开源了 ERNIE 5.5 Flash Base 语言模型,采用稀疏 MoE 架构,总参数量 280B、激活参数 14B。该模型基于 33.5T tokens 预训练,支持高达 1M-token 的上下文窗口,权重直接取自预训练阶段且未经过中后训练。
- IT之家·人工智能百度文心开源 ERNIE-5.5-Flash-Base 基座模型,总参数 280B 每 token 激活 14B
百度文心大模型发布并开源 ERNIE-5.5-Flash-Base 基座模型,采用稀疏 MoE 架构,总参数 280B,每 token 激活 14B,在 33.5T tokens 上从零完成预训练。该模型最长训练上下文为 128K,微调与推理支持 1M tokens 上下文,权重已上线 Hugging Face 并提供 FP8 与 BF16 版本。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。