🧱 Твой следующий LEGO-шедевр соберёт... нейронка? 🤯
Учёные из Карнеги-Меллона выкатили LegoGPT – первую, как они говорят, модель, которая по текстовому описанию генерит физически стабильные и собираемые LEGO-конструкции. Не просто картинку, а пошаговую инструкцию!
🔥 Главные фишки: ▫️ Из текста в кубики: Пишешь "стол с плоской поверхностью и четырьмя ножками", а на выходе – готовая моделька. ▫️ Проверка на прочность: Нейронка сама прикидывает, не развалится ли творение под действием гравитации. Если что-то не так – откатывает кирпичик и пробует снова. ▫️ Инструкция по сборке: Генерит .ldr файл (LDraw формат) и текстовый список кирпичей с координатами. Можно загрузить в визуализатор или даже роботу-сборщику скормить (учёные уже пробовали, говорят, работает!). ▫️ Open Source: Код, датасет StableText2Lego и даже сама модель (файн-тюн Llama-3.2-1B-Instruct) – всё в открытом доступе.
Для запуска нужен Gurobi (для анализа стабильности) и токен для Llama. Устанавливается через uv или pip. Есть интерактивный скрипт для генерации: вводишь промпт, получаешь картинку, .ldr и .txt с кирпичами.
👉🏻 Репозиторий с кодом: AvaLovelace1/LegoGPT 👉🏻 Попробовать онлайн-демо (если повезёт и очередь будет не как в Мавзолей): LegoGPT-Demo on Hugging Face 👉🏻 Статья на ArXiv: 2505.05469
Звезду Смерти так надо собрать 🤔
