Модели для Ollama и LM Studio: какую скачать под вашу видеокарту
Все статьи
AI / LLM 7 мин чтения

Модели для Ollama и LM Studio: какую скачать под вашу видеокарту

Какие модели скачать в Ollama и LM Studio под 6, 8, 12–16, 24 и 48+ ГБ: размеры, контекст, русский язык, картинки, модели для поиска по документам и лицензии.

Какие модели скачать в Ollama и LM Studio под 6, 8, 12–16, 24 и 48+ ГБ: размеры, контекст, русский язык, картинки, модели для поиска по документам и лицензии.

Коротко

Модель выбирают по объёму видеопамяти: файл модели должен поместиться в память видеокарты, и ещё нужен запас под контекст. Ориентиры для общих задач — тексты, ответы на вопросы, работа с документами:

  • до 6 ГБ — Gemma 4 E2B (4,6 ГБ) или Ministral 3 3B (3,0 ГБ);
  • 8 ГБ — Ministral 3 8B (6,0 ГБ), Gemma 4 E4B (6,6 ГБ), Qwen3-VL 8B для картинок (6,2 ГБ);
  • 12–16 ГБ — gpt-oss-20b (14 ГБ), Mistral Small 3.2 (15 ГБ), Ministral 3 14B (9,1 ГБ);
  • 24 ГБ — Qwen3.8 27B (18 ГБ) или Gemma 4 31B (19 ГБ);
  • 48 ГБ и больше — Llama 3.3 70B (43 ГБ), gpt-oss-120b (65 ГБ).

Размеры — для стандартной 4-битной сборки в библиотеке Ollama, проверены 20 октября 2026 года. В LM Studio те же модели скачиваются с Hugging Face, размеры похожие. Если модель нужна для программирования, смотрите отдельное сравнение лучших локальных LLM для кода.

Сводная таблица

Модель Команда Ollama Размер Контекст Лицензия Для чего
Gemma 4 E2B gemma4:e2b 4,6 ГБ 128K Apache 2.0 Слабые видеокарты и ноутбуки
Ministral 3 3B ministral-3:3b 3,0 ГБ 256K Apache 2.0 Быстрые ответы на слабом железе
Ministral 3 8B ministral-3:8b 6,0 ГБ 256K Apache 2.0 Универсал для 8 ГБ
Gemma 4 E4B gemma4:e4b 6,6 ГБ 128K Apache 2.0 Универсал для 8 ГБ, понимает картинки
Qwen3-VL 8B qwen3-vl:8b 6,2 ГБ 256K — Картинки, скриншоты, документы
Gemma 4 12B gemma4:12b 7,7 ГБ 256K Apache 2.0 Впритык на 8 ГБ, свободно на 12 ГБ
Ministral 3 14B ministral-3:14b 9,1 ГБ 256K Apache 2.0 Средний класс на 12 ГБ
gpt-oss-20b gpt-oss:20b 14 ГБ 128K Apache 2.0 Рассуждения на 16 ГБ
Mistral Small 3.2 mistral-small3.2:24b 15 ГБ 128K Apache 2.0 Тексты на русском, вызов инструментов
Gemma 4 26B gemma4:26b 16 ГБ 256K Apache 2.0 Сильная модель для 16–24 ГБ
Qwen3.8 27B qwen3.8:27b 18 ГБ 256K Apache 2.0 Лучший универсал для 24 ГБ, понимает картинки и видео
Gemma 4 31B gemma4:31b 19 ГБ 256K Apache 2.0 Альтернатива Qwen на 24 ГБ
Llama 3.3 70B llama3.3:70b 43 ГБ 128K Лицензия Meta Две видеокарты по 24 ГБ
gpt-oss-120b gpt-oss:120b 65 ГБ 128K Apache 2.0 Рабочие станции и серверы

Прочерк в столбце «Лицензия» означает, что на странице модели в Ollama лицензия не указана — проверьте её в карточке модели перед коммерческим использованием.

Сколько памяти нужно на самом деле

Размер в таблице — это только веса модели. Сверху нужна память под контекст: от 1–2 ГБ на обычном разговоре до десятков гигабайт, если открыть весь контекст в 128–256K токенов. Поэтому на 8 ГБ лучше брать модель на 5–6 ГБ, а не на 7,7. Как посчитать точно, разбирали в статье «Сколько видеопамяти нужно для LLM».

Если модель не помещается в видеопамять, Ollama и LM Studio отдадут часть слоёв оперативной памяти. Работать будет, но заметно медленнее.

На Mac с Apple Silicon видеопамять общая с оперативной: ориентир — объём памяти минус 8–10 ГБ на систему. Для Mac у Gemma 4 и Qwen есть сборки -mlx.

Какие модели понимают русский

Здесь важно опираться на то, что пишут сами разработчики:

  • Mistral Small 3.2 — русский прямо указан в списке языков карточки модели.
  • Gemma 4 — по карточке Google обучена на 140+ языках, «из коробки» поддерживает 35+.
  • Ministral 3 — заявлены «десятки языков»; в перечне примеров на странице Ollama русского нет.
  • Qwen3.8 — число поддерживаемых языков в карточке модели не указано.
  • Granite 4 от IBM — русского в списке поддерживаемых языков нет, для русских текстов её лучше не брать.

Даже если язык заявлен, качество на русском у маленьких моделей заметно ниже, чем на английском. Перед выбором прогоните 10–20 своих типовых запросов на двух-трёх кандидатах — это надёжнее любых таблиц.

Модели для картинок и документов

  • Qwen3-VL (qwen3-vl:4b, 8b, 30b, 32b) — специализированная модель для изображений: скриншоты, схемы, сканы документов.
  • Qwen3.8 27B — по карточке понимает изображения и видео.
  • Gemma 4 — мультимодальная: распознаёт текст на изображениях, разбирает PDF, графики и рукописный текст. Версии E2B, E4B и 12B Unified по карточке ещё и распознают речь.

Модели для поиска по документам (RAG)

Чтобы модель отвечала по вашим документам, нужна вторая, маленькая модель — для эмбеддингов: она превращает тексты в векторы для поиска.

Модель Команда Ollama Размер Языки
BGE-M3 bge-m3 1,2 ГБ 100+ языков, контекст 8K
Qwen3 Embedding qwen3-embedding:0.6b / 4b / 8b 0,6–4,7 ГБ 100+ языков; 8B — первое место в многоязычном рейтинге MTEB на 5 июня 2025 года
Nomic Embed Text nomic-embed-text 274 МБ Самая компактная, контекст 2K

Как такие системы устроены в компаниях — в статье «RAG-система: нейросеть по документам компании».

Модели с рассуждением

DeepSeek-R1 в Ollama — это семейство: полная модель на 671 млрд параметров (404 ГБ) и уменьшенные «дистиллированные» версии от 1,1 до 43 ГБ, обученные на рассуждениях большой модели. Лицензия MIT. Подробно, какую версию поставить на обычный компьютер, — в статье «DeepSeek на ПК: как запустить локально».

Режим рассуждения есть и у gpt-oss и Qwen3.8: у Qwen3.8 по карточке его глубину можно настраивать.

Как скачать модель

Ollama: команда из таблицы, например:

ollama run qwen3.8:27b

Ollama скачает модель и откроет чат. Пошагово — в руководстве по Ollama.

LM Studio: вкладка Discover, поиск по названию (qwen3.8, gemma-4), выбор 4-битного варианта (Q4) или выше. Подробно — в руководстве по LM Studio. Чем две программы отличаются, разобрали в сравнении «Ollama или LM Studio».

Если модель нужна компании

Для компании важен не только размер модели, но и сервер под нагрузку многих пользователей, доступ по API для внутренних систем и контроль данных. В ITOQ мы разворачивали приватную Llama 3.3 для финтех-компании на двух видеокартах: 187 токенов в секунду, окупаемость 4–5 месяцев по сравнению с облачным API (кейс).

Как выбрать конкретную версию Qwen — 3.5, 3.6 или 3.8 — под вашу видеокарту, разбираем в статье «Qwen локально». Те же модели в формате GGUF запускаются и в llama.cpp.

Вопросы и ответы

Какую модель скачать для Ollama на 8 ГБ видеопамяти? Ministral 3 8B (6,0 ГБ) или Gemma 4 E4B (6,6 ГБ) — останется запас под контекст. Gemma 4 12B (7,7 ГБ) тоже запустится, но места под длинный контекст почти не будет.

Какая модель лучше всего подходит для 24 ГБ (RTX 3090 / 4090)? Qwen3.8 27B (18 ГБ) как универсал или Gemma 4 31B (19 ГБ). Обе с контекстом до 256K и лицензией Apache 2.0.

Какая локальная модель лучше понимает русский язык? Из популярных моделей русский явно указан в карточке Mistral Small 3.2. Gemma 4 обучена на 140+ языках. Проверьте 2–3 кандидата на своих запросах — качество на русском сильно зависит от размера модели.

Можно ли использовать эти модели в коммерческих проектах? Большинство моделей из таблицы — под Apache 2.0, у DeepSeek-R1 — MIT. У Llama 3.3 своя лицензия Meta. Лицензию конкретной модели проверяйте в её карточке.

Чем модели в Ollama отличаются от моделей в LM Studio? Это те же модели, но Ollama берёт их из своей библиотеки, а LM Studio — с Hugging Face. Размеры и названия вариантов могут немного отличаться.

Источники

АП
Автор
Антон Правкин, основатель ITOQ

Внедряет ИИ и LLM в процессы компаний, разрабатывает платформы и чат-ботов. LinkedIn

Калькулятор

Сколько видеопамяти нужно вашей модели

Веса
≈ 33–42 ГБ
KV-кэш (320 КБ на токен)
≈ 2,5 ГБ
Итого без буферов движка
≈ 35–45 ГБ
Сколько останется на буферы движка:
8 ГБ12 ГБ16 ГБ24 ГБ32 ГБ48 ГБ · +3,180 ГБ · +3596 ГБ · +51

Объём служебных буферов зависит от движка и настроек, поэтому не планируйте загрузку видеокарты под 100%. Не помещается — квантуйте веса и кэш, сократите контекст или выгрузите часть слоёв в оперативную память ценой скорости. Формулы и примеры — в статье «Сколько видеопамяти нужно для LLM», отдельная страница калькулятора — здесь.

ТемаВсе материалы про локальные LLM
Делаем это для бизнеса

Внедрение ИИ и разработка чат-ботов для бизнеса

Внедряем LLM в процессы компании: AI-агенты, Telegram-боты, автоматизация на n8n, облачные и локальные модели на своей инфраструктуре.

от 60 000 ₽ · от 2 недель

Подробнее об услуге и стоимости
CTA

Похожая задача в вашем бизнесе?

Расскажите коротко — предложим путь от аудита до запуска. Можно без формальностей.

Читать дальше