Американские компании Joyx и Hitch Interactive заключили стратегическое партнёрство в области Physical AI — интеллектуальных систем, способных взаимодействовать с физическим миром. Стороны намерены объединить данные для обучения роботов со стандартизированной робототехнической платформой и создать готовые решения для конкретных коммерческих задач.

Joyx обеспечит партнёрство данными: компания специализируется на захвате, пространственной реконструкции и верификации демонстрационных данных — как от людей, так и от роботов. Процесс начинается с видео и сенсорных данных реального мира, которые Joyx преобразует в метрически точное трёхмерное представление. Затем эти данные адаптируют к физическим ограничениям конкретного робота, проверяют на соответствие реальным условиям и возвращают в виде обучающей выборки.

Hitch Interactive предоставит доступ к открытой робототехнической платформе Hitch Open, интерфейсам управления, стеку открытого программного обеспечения и средам функционирования роботов.

Основатель и глава Joyx Тон Чжан (Tong Zhang) в сообщении о партнёрстве отметил: Physical AI сдерживает одно — знание физического мира, на которое машина может реально опираться. Сырое видео реального мира доступно и почти бесплатно, а проверенное, метрически точное понимание на его основе — дефицитный и ценный ресурс. Именно это создаёт Joyx: пространственный интеллект из обычного видео, проходящий через конвейер «реальность — к реальности» вплоть до реальных роботов.

Соучредитель Hitch Interactive Аллен Янг (Allen Yang) добавил, что разрыв в Physical AI всё меньше связан с оборудованием — проблема в данных, которым роботы могут реально обучаться. По его словам, Joyx занимает уникальную позицию с набором решений, который закрывает именно этот разрыв. Стандартизированные открытые интерфейсы позволят доказанную на одной платформе возможность быстро масштабировать на другие — и это то, что отрасли необходимо.

Партнёры подчёркивают, что их подход призван преодолеть ограничения двух распространённых методов обучения роботов. Телеоперация — прямое управление человеком — даёт точные демонстрации, но плохо масштабируется на большое число задач и сред. Симуляция позволяет генерировать большие объёмы данных, но расходится с поведением роботов в реальном мире. Метод Joyx начинается и заканчивается реальными данными, а Hitch Interactive обеспечивает робототехнические платформы и среды для их применения.