bge-large-en-v1.5 (335M) tiene 0.335 mil millones de parámetros. Con cuantización estándar de 4 bits y 8K de contexto, necesita aproximadamente 2.2 GB de VRAM — pesos más caché y sobrecarga del runtime.

VRAM por cuantización

PrecisiónPesosCaché/BúferVRAM total
2-bit (IQ2_XXS)0.1 GB0.0 GB2.1 GB
4-bit (Q4_K_M)0.2 GB0.0 GB2.2 GB
8-bit (Q8_0)0.4 GB0.0 GB2.4 GB
16-bit (FP16)0.7 GB0.0 GB2.7 GB

¿Qué GPU puede ejecutar bge-large-en-v1.5 (335M) (a 4 bits)?

Clase de GPUVRAMbge-large-en-v1.5 (335M) (2.2 GB)
8 GB · RTX 5060 / 40608 GBSí cabe
12 GB · RTX 5070 / 306012 GBSí cabe
16 GB · RTX 5070 Ti / 408016 GBSí cabe
24 GB · RTX 4090 / 309024 GBSí cabe
32 GB · RTX 509032 GBSí cabe
48 GB · 2×24 / RTX 6000 Ada48 GBSí cabe
128 GB · M-series / RTX Spark128 GBSí cabe
Obtén el número exacto para tu equipo
Elige tu modelo, cuantización y longitud de contexto — la calculadora muestra toda la matemática de VRAM y te dice exactamente qué hardware encaja.
Abrir la calculadora de IA local
Guías relacionadas
Best GPU for Llama 3 70B How Much VRAM for DeepSeek-R1 Q4 vs Q8 Quantization Explained Apple Silicon for Local AI RTX Spark: 128GB Unified Memory

Las cifras de VRAM son estimaciones reproducibles (pesos + caché KV + sobrecarga) y varían según el runtime y el formato de cuantización. Datos vigentes al 2026-06-18.