Университет Карнеги-Меллон представил LegoGPT — ИИ для создания моделей Lego

Теперь у нас есть ИИ, который по текстовому описанию собирает LEGO-модель, и не просто картинку, а реально строящуюся конструкцию. Пишешь "фиолетовая гитара" — получаешь инструкцию, которую даже робот с двумя руками может собрать, и она не развалится при первом же касании. Техническая магия: система LegoGPT проверяет прочность моделей с помощью физики, а сборку тестят роботы с датчиками силы. Правда, пока можно строить только из 8 типов стандартных кирпичиков и на фиксированной площадке, так что Звезду смерти не получится, но для котика или ракеты самое то. Код и датасет уже выложили на GitHub. Ждём, когда появится генератор IKEA-мебели, который реально можно собрать руками, а не только в теории. /start

Искусственный интеллект научили собирать конструктор «Лего» Модель искусственного интеллекта, которая создает физически устойчивые конструкции из блоков конструктора «Лего» на основе текстовых подсказок, представили исследователи из Университета Карнеги — Меллона, сообщает издание Arstechnica. «В отличие от предыдущих попыток автономного моделирования, LegoGPT создаёт пошаговые инструкции для сборки моделей Лего, которые не разваливаются», — говорится в сообщении. Исследовательская группа под руководством Авы Пан объяснила, что многие существующие модели 3D-генерации направлены на создание разнообразных объектов с детальной геометрией, но эти цифровые конструкции часто невозможно собрать физически. Подробнее

Исследователи из США натренировали нейросеть разрабатывать наборы Lego по текстовому описанию. Для этого её пришлось дообучать законам физики. LegoGPT пока «придумывает» небольшие фигурки, но в будущем сможет создавать персонализированные наборы или даже мебель на заказ, говорят разработчики vc.ru/ai/1982041

Исследователи представили LegoGPT — ИИ-модель, которая по текстовому описанию собирает устойчивые конструкции из LEGO, пригодные для сборки в реальности. Как это работает: ИИ предсказывает, какой кирпич положить следующим, проверяет устойчивость конструкции и — если она рушится — откатывает неудачные шаги и пробует заново. Взрослые дядьки наконец-то могут воплотить в реальность все детские задумки.

Спроси что угодно — умный ИИ уже готов ответить

LegoGPT — новая нейросеть превращает текстовые промпты в реальные наборы Lego. Более того, далее по инструкциям нейросети конструктор могут собрать роботы Модель обучали на датасете из 47 тыс. Lego-конструкций. В основе — донастроенная Llama 3.2. За каждый шаг модель предсказывает не один токен, а целый кирпичик — и если во время перепроверки обнаруживает противоречие с другими кирпичиками или неустойчивость сборки, то начинает шаг заново. Попробовать можно здесь из-за высокой нагрузки придется подождать .

Объявляем пятнадцатиминутный перерыв: все идем собирать Лего! Для того, чтобы окунуться в детство, настоящий конструктор не понадобится: исследователи из Университета Карнеги-Меллон разработали LegoGPT — искусственный интеллект, способный создавать сборные модели Lego на основе текстовых описаний. Система не только генерирует визуально точные модели, но и гарантирует их физическую реализуемость как людьми, так и роботами. LegoGPT основан на авторегрессионной языковой модели, которая предсказывает следующий кирпичик в конструкции аналогично тому, как текстовые модели предсказывают следующее слово в предложении. LegoGPT также поддерживает добавление цветов и текстур к своим творениям. Например, диван с материалом под названием «японская ткань Сибори» получает структурированную индиго-поверхность, а цвет «огненный кибер-панк» светится неоновым фиолетовым цветом. Текстурирование выполняется с помощью FlashTex — быстрого метода нанесения текстур на 3D-модели. Помимо UV-текстур, система поддерживает сплошную окраску с использованием официальных цветов Lego. Читайте Инк. в Telegram

Вышла нейросеть LegoGPT — она создает сборочные инструкции по текстовому описанию. ИИ-модель генерирует устойчивые конструкции из кубиков и выдает пошаговую инструкцию по сборке. Нейросеть дообучили на 47 тысячах примеров и научили учитывать физику — в отличие от обычных генеративных моделей, она понимает, как сделать так, чтобы фигура не развалилась. Пока она работает с восемью базовыми типами деталей и ограничена размером 20×20×20 кубиков. Разработчики уже выложили демоверсию, но она может работать с перебоями. Тестируем здесь.