Figure представляет Helix: новый подход к управлению гуманоидными роботами

Helix - локальный AI на роботе Из-за этой модели Figure разорвала сделку с OpenAI, заявив что им удалось совершить прорыв. Все действия роботов на видео - результат работы модельки, работающей полностью на роботе. Модель управляет верхней половиной тела, позволяет двум роботам работать вместе и поднимать любые мелкие предметы. Состоит Helix из двух компонентов - отвечающей за планирование System 2, основанная на неназванной опенсорсной 7B VLM и работающая на скорости 7-9 герц. Исполняет планы System 1 - encoder-decoder на 80 миллионов параметров, работающая на скорости в 200 герц, что позволяет точнее двигаться и быстрее реагировать. System 1 и System 2 работают на отдельных GPU, чтобы не мешать друг другу. Натренировали это всего на 500 часах данных, что доступно множеству стартапов. Это крайне ранняя стадия и нас ждёт очень быстрое масштабирование. Блогпост

Компания Figure представила новую модель управления роботами — Helix, объединяющую зрение, понимание языка и моторный контроль в единую систему. С её помощью два робота могут совместно решать задачи, управляя манипуляциями с предметами на основе языковых команд. Инновационная архитектура Helix использует единую нейронную сеть для всех действий, что исключает необходимость в специфической настройке, и готова к коммерческому использованию благодаря низкому энергопотреблению. Эта модель демонстрирует впечатляющую координацию движений и обладает способностью к нулевому обучению, позволяя роботам взаимодействовать с новыми предметами, даже если они их не видели ранее. Система может эффективно выполнять разнообразные задачи манипуляции и координации, представляя собой значительный шаг вперед в области гуманоидной робототехники. ================ News Soft Gear Links

Человекоподобные роботы Figure выполняют бытовые задачи по голосовым командам Компания Figure представила Helix — первую универсальную модель «зрение-язык-действие» VLA для гуманоидных роботов. Helix объединяет восприятие, понимание языка и управление движением, позволяя роботам выполнять бытовые задачи по голосовым командам, даже если они ранее не сталкивались с этими предметами. Одна нейронная сеть Helix может одновременно управлять двумя роботами Figure. Модель разработана после завершения партнерства с OpenAI и решает ключевые проблемы домашней робототехники, открывая путь к созданию роботов общего назначения для домашнего использования. Мы из будущего

Figure выпустила собственную ИИ-модель для андроидов Калифорнийская компания Figure представила Helix — универсальную модель «зрение-язык-действие» VLA , которая позволяет роботам понимать речь, анализировать окружение и выполнять сложные манипуляции без предварительного обучения или программирования. В основе ИИ две системы: одна анализирует сцену и команды, другая выполняет действия. Технология позволяет андроидам манипулировать тысячами разных предметов, следовать инструкциям на естественном языке и даже координировать действия в паре.

Figure разрабатывает ИИ для роботов без помощи OpenAI После завершения сотрудничества с OpenAI компания Figure представила собственный ИИ для роботов под названием Helix. Новая система позволяет управлять роботами с помощью обычных голосовых команд, не требуя специального программирования или обучения для каждой задачи. В чём фишка? Helix работает как человеческий мозг – у неё есть две системы. Первая думает медленно, но тщательно – примерно 7-9 раз в секунду она анализирует ситуацию и решает, что делать. Вторая система реагирует молниеносно – 200 раз в секунду корректирует движения рук, пальцев, корпуса и головы робота. Для разработки системы потребовалось всего 500 часов обучающих данных – это в 20 раз меньше, чем обычно используется для подобных проектов. Helix состоит из двух нейросетей: крупной на 7 миллиардов параметров для понимания команд и компактной на 80 миллионов для контроля движений. Система уже демонстрирует впечатляющие результаты. Роботы могут поднимать практически любые бытовые предметы, которых никогда раньше не видели, и даже работать в паре – например, передавая друг другу продукты для размещения в холодильнике. Figure планирует значительно расширить возможности системы в будущем.

Зачем носки, если можно подарить будущее? Удиви криптоподарком!

Figure представил нового робота Helix с прорывом в архитектуре управления Инженеры Figure создали уникальное решение для одной из фундаментальных проблем робототехники: противоречия между скоростью реакции и универсальностью поведения. Впервые удалось эффективно разделить "мышление" и "действие": • очень компактная модель управления 80M для такой сложной задачи • работает на встроенных GPU - готово к реальному применению • решает проблему "или быстро, или умно". Figure заявляют, что они сами создали собственную ИИ-систему, представляющую собой две модели, работающие вместе:S2 — это 7B VLM, S1 — это 80M. Вот и ответ, почему они разорвали отношения с OpenAI. Вот что делает Helix особенным - архитектура разделения: • System 2 7B параметров - "мышление" на частоте 7-9 Гц: понимает язык, планирует действия, анализирует контекст • System 1 всего 80M параметров! - "действие" на частоте 200 Гц: превращает планы в точные движения. • Системы работают параллельно на своих оптимальных частотах, обмениваясь семантическими представлениями. Ключевой момент - это не просто две отдельные модели, а интегрированная система. Практические возможности: • Контроль 35 степеней свободы в реальном времени • Работа с незнакомыми предметами без дополнительного обучения • Координация нескольких роботов • Понимание контекстных команд например, "подними предмет для пустыни" Технические достижения: • Компактность S1 80M параметров позволяет работать на встроенных GPU • Раздельные частоты обеспечивают и скорость реакции, и глубину анализа • Единая система весов для разных роботов и задач • Масштабируемая архитектура для реального применения Это решение может стать стандартом для гуманоидной робототехники, особенно учитывая его практическую реализуемость на доступном оборудовании. Компактность и эффективность архитектуры открывают путь к массовому производству универсальных роботов.

Мы проснулись в будущем — гуманоидные роботы теперь понимают практически любые команды и работают вместе Компания Figure представила Helix — универсальную модель Vision-Language-Action VLA , объединяющую зрение, понимание языка и управление для решения сложных задач в робототехнике. Helix впервые обеспечивает полный контроль верхней части тела гуманоидного робота, позволяя ему взаимодействовать с окружающей средой и другими роботами. С Helix роботы могут поднимать практически любые мелкие предметы бытового обихода, даже те, с которыми они ранее не сталкивались, просто следуя голосовым командам. Кроме того, эта система позволяет двум роботам совместно выполнять длительные манипуляционные задачи. Более того, модель работает на встроенных энергоэффективных GPU, что делает её готовой к коммерческому использованию. Спите дальше, пока еще можете. Однажды в Диджитал

Helix Новая AI-модель для робота Figure 02 на базе VLA Vision Language Action , которая позволяет: - осуществлять высокоскоростное непрерывное управление всей верхней частью тела гуманоида, включая запястья, туловище, голову и отдельные пальцы. - следуя подсказкам естественного языка, поднимать практически любой небольшой предмет домашнего обихода, включая тысячи предметов, с которыми он никогда раньше не сталкивался. - работать одновременно на двух роботах, позволяя им решать общую задачу манипуляции на большом расстоянии с предметами. Полное видео #phygital #technology

Гуманоидные роботы учатся выполнять «бытовые» задачи вместо людей. Стартап Figure показал, как его гуманоидные роботы выполняют повседневные задачи: перемещают предметы, распознают команды и адаптируются к новым условиям. Управляет ими модель Helix — Vision-Language-Action VLA , позволяющая анализировать окружение и работать в реальном времени. Домашняя среда считается сложной для ИИ, но Figure уверены: их роботы смогут справляться с тысячами уникальных объектов. Научите их собирать носки и раскладывать по парам!

Компания Figure представила искусственный интеллект собственной разработки Helix для интеграции с роботами. По словам создателей, модель способна «рассуждать как человек». Оснащенные ИИ гуманоиды могут подбирать «практически любые бытовые предметы без какого-либо кода или предварительного обучения». Согласно техническому докладу, новая универсальная модель Vision-Language-Action позволяет машинам интерпретировать команды на естественном языке и взаимодействовать с неизвестными для них объектами без необходимости предварительного обучения или программирования для каждого из них. Благодаря этому со временем боты становятся более способными без необходимости обновлять систему или специально обучаться на новых данных. Новости AI YouTube