SonicMoEは、4月23日(UTC+8)時点でNVIDIA Blackwell GPU上でピークスループットを達成し、重要な性能マイルストーンを発表しました。このモデルのフォワードおよびバックワードパスのTFLOPS性能は、それぞれDeepGEMMのベースラインを54%および35%上回っています。さらに、公式のTriton例のフォワードパスTFLOPSを21%超えています。SonicMoEはまた、密なモデルと同等の最小限のアクティベーションメモリフットプリントを維持しており、GPU効率の著しい進歩を示しています。