Retour index

LFM2.5 / MoE

LFM2.5 8B-A1B

MoE compact avec seulement 1B actif, pense pour debit et tool use.

VRAM min4.5 Go
Contexte32 768
Params8.47B
Actifs1B

Lecture benchmarks

Intelligence4/5
Vitesse4/5

Quantizations

Memoire estimee et runtimes

FormatVRAM/RAMRuntimesSource
BF1617 GoTransformers, vLLM, SGLangEstimated from parameters
Q8_08.7 Gollama.cpp, LM Studio, OllamaLiquidAI GGUF
Q4_04.5 Gollama.cpp, LM Studio, OllamaLiquidAI GGUF

Tok/s

Mesures tok/s GPU

GPUVRAM/RAMRuntimeAppQuantContexteTok/s
Aucune mesure tok/s locale pour ce modele.