Baidu has officially open-sourced its latest base model, ERNIE 5.5 Flash Base. The model utilizes a Mixture of Experts (MoE) architecture with 280 billion total parameters and 14 billion active parameters per token.
ERNIE 5.5 Flash Base was pre-trained on 33.5 trillion tokens with a context length of up to 128K during training. It supports extended contexts of up to 1 million tokens during fine-tuning and inference phases.
Baidu Open-Sources ERNIE 5.5 Flash Base Model
Sorumluluk Reddi: Phemex Haberler'de sunulan içerik yalnızca bilgilendirme amaçlıdır. Üçüncü taraf makalelerden alınan bilgilerin kalitesi, doğruluğu veya eksiksizliğini garanti etmiyoruz. Bu sayfadaki içerik finansal veya yatırım tavsiyesi niteliği taşımaz. Yatırım kararları vermeden önce kendi araştırmanızı yapmanızı ve nitelikli bir finans danışmanına başvurmanızı şiddetle tavsiye ederiz.