ИИ обучили создавать конструкции из LEGO и делиться инструкциями

Исследователи из Университета Карнеги — Меллона разработали LegoGPT, ИИ-систему, которая генерирует конструкции LEGO на основе текстовых запросов. Система использует физику для создания устойчивых моделей, которые можно собрать в реальной жизни, в отличие от других ИИ, чьи 3D-дизайны часто оказываются «хрупкими».

LegoGPT основан на технологии больших языковых моделей (LLM), подобных ChatGPT, но адаптирован для предсказания следующего кирпичика вместо слов. Команда доработала модель LLaMA-3.2−1B-Instruct*, обучив её на большом наборе данных с устойчивыми LEGO-дизайнами. Система проверяет стабильность конструкций, исключая варианты, которые могут рухнуть, и выдаёт пошаговые инструкции для сборки.

Pun et al.

Человеческие тестеры успешно собрали модели, созданные LegoGPT, роботизированные руки тоже справились с этой задачей. Система создаёт разнообразные и эстетичные дизайны, но ограничена пространством 20×20×20 кирпичиков и восемью типами деталей.

Пока инструмент бесплатный, и его демо-версия доступна на сайте проекта по ссылке ниже.

*принадлежит Meta, которая признана в РФ экстремистской и запрещена

Источник