百度开源文心5.5 Flash Base基座模型

百度11月5日发布并开放权重文心5.5 Flash Base（ERNIE 5.5 Flash Base）预训练基座模型，已联合vLLM、SGLang等社区提供开源生态支持。 该模型为稀疏MoE语言模型，总参数量280B、每token激活14B，在33.5T tokens上从零预训练，训练上下文128K、微调与推理外扩到1M tokens。百度称此次发布的是「Base」模型，已具备完整通用能力，可作为后续所有训练的起点。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。