Project Aria
projectaria.com
Исследовательская платформа, разработанная Meta для сбора мультимодальных эгоцентрических данных с помощью очков, оснащенных датчиками, продвигающая технологии пространственного ИИ и дополненной реальности.
Описание
Project Aria — это новаторская исследовательская инициатива Meta Reality Labs, которая предоставляет исследователям специализированные очки и программные инструменты для захвата богатых данных от первого лица. Она служит фундаментальной платформой для разработки продвинутого машинного восприятия, пространственного понимания и контекстуального ИИ, необходимых для будущих опытов дополненной реальности. Программа предоставляет аппаратное обеспечение, комплекты для разработки программного обеспечения, облачные сервисы машинного восприятия и открытые наборы данных для ускорения инноваций в исследованиях AR и эгоцентрического ИИ.
Установка
Не знаете, с чего начать — попросите ассистента провести по шагам:
Возможности
Сбор мультимодальных данных
Очки Project Aria интегрируют несколько камер, датчики отслеживания взгляда, IMU и датчики окружающей среды для захвата синхронизированных эгоцентрических потоков данных.
Комплексный исследовательский набор
Включает очки AR, клиентский SDK для потоковой передачи данных и управления устройством, облачные сервисы машинного восприятия и Aria Studio для управления и визуализации данных.
Открытая наука и наборы данных
Предоставляет доступ к разнообразным открытым наборам данных и моделям, поддерживающим исследования в области 3D-обнаружения объектов, взаимодействия рук с объектами и понимания движений всего тела.
Сервисы машинного восприятия
Облачные сервисы генерируют продвинутые аннотации, такие как траектории SLAM, оценка направления взгляда и отслеживание рук, для обогащения необработанных данных для исследовательских целей.
Платформа для совместных исследований
Позволяет утвержденным академическим и отраслевым партнерам проводить независимые исследования и вносить вклад в развитие будущих AR-технологий.
Сценарии использования
Исследования в области эгоцентрического ИИ
Поддерживает разработку моделей ИИ, ориентированных на понимание человеческой перспективы и взаимодействий в реальном мире.
Разработка дополненной реальности
Упрощает создание AR-приложений, предоставляя богатые пространственные и контекстуальные данные, необходимые для иммерсивного опыта.
Анализ человеческого поведения
Обеспечивает отслеживание и анализ взгляда, движений рук и тела для изучения намерений пользователя и моделей взаимодействия.
Безопасность и помощь водителю
Используется в проектах, таких как прогнозирование намерений водителя, для повышения безопасности дорожного движения благодаря мониторингу в реальном времени и предупреждениям.
Академическое и промышленное сотрудничество
Предоставляет инструменты и данные для совместных исследовательских инициатив, расширяющих границы машинного восприятия и носимых вычислительных устройств.
Частые вопросы
Project Aria — это исследовательская программа Meta, использующая очки с датчиками для сбора мультимодальных данных от первого лица для развития технологий AR и ИИ.
Утвержденные академические и коммерческие исследовательские партнеры могут подать заявку на получение набора, который включает очки, SDK и облачные сервисы.
Они захватывают синхронизированные данные с нескольких камер, средств отслеживания взгляда, инерционных датчиков, микрофонов и датчиков окружающей среды.
Облачные инструменты, которые обрабатывают необработанные данные для предоставления аннотаций, таких как SLAM, отслеживание взгляда и отслеживание рук для исследовательских целей.
Да, Meta предлагает открытые наборы данных и модели исследовательскому сообществу для ускорения инноваций в области эгоцентрического ИИ.
Предоставляя богатые пространственные и контекстуальные данные и инструменты для создания и тестирования приложений, которые понимают окружающую среду пользователя и его намерения.
В настоящее время аудиовыходы не поддерживаются в визуализациях Aria Studio.
Отслеживание взгляда помогает анализировать внимание и намерения пользователя, что полезно для таких приложений, как безопасность водителя и моделирование взаимодействия.
Характеристики
| Тип | Инструмент |
| Категория | Поиск и ресёрч / Распознавание изображений ИИ |
| Цена | только платно |
| Платформа | Только веб |
| Системы | web |
| Хостинг | cloud |
| Установка | saas |
| Язык сайта | ru |
| Просмотры | 31 106 |
