LM Studio: установка, настройка и выбор модели под видеокарту
LM Studio — программа с окном чата и встроенным каталогом моделей. Подходит тем, кто не хочет работать в терминале. Скорость, как и в Ollama, решает видеопамять.
Установка и первая модель
Скачайте LM Studio с официального сайта lmstudio.ai и установите. На вкладке поиска моделей (Discover) введите название, например Qwen3 или Gemma 3, и скачайте подходящий вариант.
- Установите LM Studio.
- Откройте поиск моделей и выберите модель.
- Скачайте квантование Q4_K_M — лучший баланс качества и размера.
- Загрузите модель и начните чат.
Выгрузка на видеокарту (GPU offload)
При загрузке модели есть ползунок слоёв на GPU. Если модель помещается в видеопамять целиком, ставьте его на максимум — это самый быстрый режим. Если не помещается, LM Studio оставит часть слоёв на процессоре: модель запустится, но ответы будут в разы медленнее.
Какие модели выбрать
8 ГБ видеопамяти — модели до 8B в Q4. 12 ГБ — до 14B. 16 ГБ — 14B с запасом под длинный контекст. 24 ГБ — до 32B. Помните, что длинный контекст тоже занимает память: 32 тысячи токенов могут добавить несколько гигабайт.
Локальный сервер
На вкладке разработчика можно включить сервер, совместимый с OpenAI API (по умолчанию порт 1234). Через него LM Studio подключают к редакторам кода, ботам и своим программам.
Проверим на расчётных примерах
| Модель / вариант | Веса | KV cache | Всего VRAM | Контекст |
|---|---|---|---|---|
| Qwen2.5-14B-InstructQ4_K_M · 8K | 8.8 GiB | 1.5 GiB | 12.4 GiBвключая runtime и запас | 8K |
| Qwen2.5-14B-InstructQ8_0 · 8K | 15.6 GiB | 1.5 GiB | 19.7 GiBвключая runtime и запас | 8K |
| Qwen2.5-14B-InstructF16 · 8K | 29.3 GiB | 1.5 GiB | 34.5 GiBвключая runtime и запас | 8K |
| Qwen2.5-14B-InstructQ4_K_M · 32K | 8.8 GiB | 6 GiB | 17.2 GiBвключая runtime и запас | 32K |
| Qwen2.5-14B-InstructQ8_0 · 32K | 15.6 GiB | 6 GiB | 24.6 GiBвключая runtime и запас | 32K |
| Qwen2.5-14B-InstructF16 · 32K | 29.3 GiB | 6 GiB | 39.4 GiBвключая runtime и запас | 32K |
ESTIMATED · Это расчёт бюджета памяти общего планировщика, не замер VRAM и не подтверждение скорости или запуска на конкретной плате. Модель GPU, ОС и поддержка backend проверяются отдельно. Для генерации изображений/видео действуют разрешение и кадры сохранённого профиля.
Перейти от объяснения к проверке
Следующий полезный материал
Материал подготовлен ForgeBench · обновлён 2026-10-25. Примеры ESTIMATED; актуальные условия расчёта и ограничения смотрите в методике.