LLM-GUIDELLM × llama.cpp Конфигуратор …

q.q3-k-s

bpw3.64
Размер (8B-модель)3.41 GiB
Когда применятьдля сильного дефицита памяти

Источник: shared/data/quants.yaml — единый источник истины. · Подобрать конфигурацию под своё железо →