Как я почти сделал мультфильм для дочери на локальном ИИ

Задумка казалась вполне реальной: поднять локальную модель, подготовить иллюстрации, а затем превратить их в небольшой мультфильм.

Для эксперимента взял MacBook M4 Pro с 24 ГБ объединённой памяти. Через Ollama запустил локальную языковую модель, а генерацию видео собирал в ComfyUI.

С иллюстрациями всё начиналось подозрительно хорошо. Картинки генерировались, персонажи появлялись, и в какой-то момент я уже мысленно перешёл к выбору музыки и озвучки.

Затем дошло дело до видео.

Запустил генерацию и стал ждать. Mac при этом выглядел спокойнее меня: не пытался улететь со стола, не изображал раскалённую турбину и вообще никак не показывал, что внутри него сейчас якобы создаётся произведение мультипликационного искусства.

Примерно через полчаса результат был готов.

Вместо мультфильма я получил короткую яркую вспышку. Выглядело так, будто страница загорелась, а нейросеть решила, что на этом её творческая задача выполнена.

Результат сохранил. Не как мультфильм, конечно, а как мем.

Эксперимент с локальной генерацией видео пока отложил. 24 ГБ вполне хватает, чтобы запускать локальные модели и работать с изображениями, но тяжёлые видеопайплайны - уже совсем другой уровень нагрузки. Возможно, проблему можно было частично решить более лёгкой моделью и настройкой workflow, но быстрым и удобным такой процесс всё равно не назовёшь.

Зато теперь у меня есть наглядный ответ на вопрос, можно ли сделать дома собственный мультфильм с помощью локального ИИ:

Технически - почти да. Фактически - пока получился спецэффект.

А у вас были эксперименты с ИИ, результат которых хотелось сохранить исключительно как мем?

Как я почти сделал мультфильм для дочери на локальном ИИ | Сетка — социальная сеть от hh.ru