Meta выпустила SAM 3.1 для более быстрого отслеживания видео в реальном времени
Meta объявила о SAM 3.1 — обновленной версии Segment Anything Model (SAM 3), разработанной для значительного повышения эффективности и доступности обработки видео.
Эта новая итерация представляет мультиплексирование объектов (object multiplexing) — ключевую инновацию, которая позволяет модели отслеживать до 16 объектов за один проход. Это архитектурное изменение устраняет избыточные вычисления и узкие места памяти, что приводит к существенному увеличению пропускной способности: в частности, удваивая скорость обработки видео со средними объектами с 16 до 32 кадров в секунду на GPU H100.
SAM 3.1 обеспечивает отслеживание объектов в реальном времени в сложных, переполненных видео и одновременно снижает общие требования к ресурсам GPU. Это делает высокопроизводительные приложения ИИ более реализуемыми на более компактном и доступном оборудовании. Кроме того, Meta продолжает расширять экосистему SAM, выпуская SAM 3D — набор инструментов для 3D-реконструкции объектов и людей, и запуская Segment Anything Playground для более широких экспериментов сообщества.
Почему это важно
- —Значительно повышает эффективность обработки видео, удваивая пропускную способность.
- —Внедрение мультиплексирования объектов делает высокопроизводительный ИИ доступным на менее мощном оборудовании.
- —Продвигает всю экосистему SAM с возможностями 3D-реконструкции.
Ключевые факты
- SAM 3.1 является заменой SAM 3.
- Использует мультиплексирование объектов для отслеживания до 16 объектов за один проход.
- Скорость обработки увеличивается с 16 до 32 FPS на GPU H100.
- SAM 3.1 обеспечивает отслеживание объектов в реальном времени в сложных сценах.
- Meta также выпустила SAM 3D для 3D-реконструкции.
Полный текст — в первоисточнике. Здесь — краткое изложение и ключевые факты.
