Qualcomm представляет свой первый специализированный процессор для устройств AR, VR и Mixed Reality

Сегодня Qualcomm представила платформу Snapdragon XR1 — первый в мире специализированный процессор для устройств AR, VR и Mixed Reality. До сих пор OEM-производители использовали мобильные процессоры Snapdragon для создания устройств XR, эта новая платформа XR1 позволит OEM-производителям легко предлагать высококачественные возможности XR, используя преимущества специальной оптимизации XR1 для дополненной реальности с возможностями искусственного интеллекта, обеспечивающими лучшую интерактивность, энергопотребление. и тепловой КПД.

Платформа XR1 также поставляется с механизмом искусственного интеллекта для обработки на устройстве, который можно использовать для запуска энергоэффективных алгоритмов компьютерного зрения на основе машинного обучения.

Ключевые особенности:

Визуальные технологии

Платформа XR1 позволит потребителям погрузиться в свои любимые фильмы, программы и спортивные состязания, поддерживая разрешение видео сверхвысокой четкости 4K со скоростью до 60 кадров в секунду для высококачественных шлемов виртуальной реальности. Новые специализированные аппаратные и программные алгоритмы процессора сигналов изображения Qualcomm Spectra Image Signal Processor (ISP) могут помочь значительно уменьшить нежелательный шум от моментальных снимков, создавая существенно улучшенное конечное изображение в высококачественных гарнитурах дополненной реальности. Встроенный процессор дисплея обеспечивает ряд вариантов отображения с аппаратным ускорением компоновки, поддержкой двух дисплеев, трехмерными наложениями и поддержкой ведущих графических интерфейсов прикладного программирования (API), включая OpenGL, OpenCL и Vulkan. Платформа также имеет расширенные возможности обработки изображений, лежащие в основе таких технологий, как визуальная инерциальная одометрия (VIO), которая позволяет пользователям перемещаться в виртуальном мире или взаимодействовать с дополненными объектами в режиме дополненной реальности.

Аудио

Платформа XR1 использует Qualcomm Technologies 3D Audio Suite, Qualcomm Aqstic Audio Technologies и Qualcomm aptX Audio для высококачественного воспроизведения звука и «всегда включенной, всегда прослушивающей» голосовой помощи, а также воспроизведения через Bluetooth. Передаточные функции XR1, связанные с головой (HRTF), позволяют ушам пользователей синтезировать бинауральный звук, который кажется исходящим из определенной точки пространства.

Взаимодействие

Благодаря отслеживанию головы с тремя и шестью степенями свободы (3DoF, 6DoF) и возможностям контроллера для устройств XR, XR1 открывает совершенно новую игровую площадку XR для обычных пользователей, позволяя им не только свободно перемещаться в виртуальном мире, как никогда раньше, но и взаимодействовать. и играть в нем. Интегрированный сенсорный концентратор и оптимизированные возможности слияния сенсоров позволяют пользователям испытать богатые взаимодействия с задержкой движения и фотонов, которая значительно ниже требуемых с научной точки зрения 20 мс.

Qualcomm сообщила, что Meta, VIVE, Vuzix и Picoare уже разрабатывают устройства на базе этой новой платформы XR1.