Тема-хаб

Локальные LLM

Локальные LLM — это языковые модели, которые работают прямо на вашем железе: ноутбуке, ПК с видеокартой или домашнем сервере — без облака, подписок и передачи данных наружу. Ollama, llama.cpp и LM Studio плюс квантованные GGUF-версии Llama, Qwen и Gemma делают это доступным даже на видеокарте десятилетней давности. Здесь — все наши материалы о локальном запуске ИИ: гайды, тесты железа, квантизация и приватность.

Официальный сайт ↗315 материалов
В глоссарии:Локальный ИИ (on-device)КвантизацияМодель с открытыми весамиВидеопамять (VRAM)