Главная / Блог

Блог

Локальные LLM дома с LM Studio

LM Studio позволяет запускать бесплатные опенсорсные LLM на Mac, Windows и Linux без облака.

Локальные LLM дома с LM Studio

ИИ дома
Наконец-то развлечение на новогодние праздники!
Давно хотел заиметь дома настоящий искусственный интеллект и поиграться, но инструкции попадались сложные. Даже если бы по ним получилось установить, то повторить по памяти я бы не смог, а это показатель сложности.
В общем <https://lmstudio.ai> – отличная программа на Mac, Win, Linux. Качает, устанавливает и запускает самые популярные бесплатные опенсорсные LLM прямо с huggingface. Не в один клик, к сожалению, но почти. И интерфейс больше программерский, но если вы что-то типа продвинутого юзера как я – то всё получится без инструкции, в общем рекомендую.
За 20 минут (15 из них – скачивание) запустил новейшую Mistral, которая работает примерно как GPT-3.5, но локально у меня, бесплатно и быстрее, чем на сайте.

❗️ на Mac с Apple Silicon нужно минимум 16GB оперативки. На Windows, впрочем, тоже.

#ИИ

Этот пост впервые вышел в Telegram-канале @zvasilchannel 20 дек 2023. На сайте — для архива и поиска.
Открыть в Telegram →

КОНТАКТЫ

Обсудим ИИ-трансформацию вашей компании.

Напишите через форму на сайте или напрямую в Telegram. Быстро поймём, где ИИ может дать эффект, какой формат подойдёт руководителю или команде и с чего начать.

Менторская консультация

60 000 ₽

  • Диагностика процессов и задач под ИИ
  • Выбор первых внедрений с понятным эффектом
  • Подбор инструментов: Искра, модели, сервисы и автоматизации
  • План действий на 30 / 60 / 90 дней
Записаться