RunwayML представила Praxis-1: модель действий для роботов на основе видео
RunwayML представила Praxis-1 — новую модель действий с открытыми весами, которая кардинально меняет подход к робототехнике. Она разработана для преобразования огромного объема видеоданных в реальные команды управления для роботов.
Основная идея заключается в том, что вместо того чтобы собирать ограниченные и дорогие демонстрации действий в реальном мире, можно использовать бесконечный массив видеоматериалов для обучения. Praxis-1 построена на крупномасштабном предварительном обучении на видео и выступает в роли универсальной модели политики для разработчиков.
Эта модель предназначена для исследователей и разработчиков робототехники, поскольку она способна работать с любым типом робота или среды, независимо от их сложности. Компания уже активно тестирует Praxis-1 с ранними партнерами, а веса модели планируют выпустить публично в ближайшие месяцы.
Почему это важно
- —Позволяет преодолеть главную проблему робототехники — нехватку реальных данных о действиях.
- —Предоставляет универсальную модель политики, которая может быть адаптирована для работы с любым типом робота или среды.
- —Демонстрирует переход от генерации видео к воплощенному интеллекту в физическом мире.
Ключевые факты
- Praxis-1 — это модель действий с открытыми весами от RunwayML.
- Она преобразует видеоданные в реальный контроль для роботов.
- Модель обучена на крупномасштабном предварительном обучении на видео.
- Praxis-1 работает с любым воплощением или средой, независимо от сложности.
- Тестирование ведется с партнерами, включая Noble Machines и Standard Bots.
Полный текст — в первоисточнике. Здесь — краткое изложение и ключевые факты.