Qualcomm представила 5G-платформу расширенной реальности Snapdragon XR2
Компания Qualcomm Technologies представила платформу расширенной реальности с поддержкой 5G. Платформа Qualcomm Snapdragon XR2 стала развитием премиальной платформы XR. Заявлено, что в ней вдвое выросла производительность CPU и GPU, вчетверо расширилась полоса пропускания видео, в 6 раз увеличилось разрешение и в 11 — производительность ИИ.
Как отмечает производитель, Snapdragon XR2 — первая в мире XR-платформа с поддержкой семи камер одновременно плюс специализированный процессор компьютерного зрения.
Подчеркивается, что это первая XR-платформа, обеспечивающая истинно смешанную реальность благодаря камере с низкой задержкой в режиме прозрачности. Это позволяет пользователю с VR-гарнитурой создавать гибрид виртуального и реального миров, видеть его и взаимодействовать с ним. Чтобы удовлетворять требованиям действительно иммерсивной смешанной реальности, на платформе реализованы специализированные визуальные, интерактивные и аудио-технологии, использующие искусственный интеллект и возможности 5G-связи.
Чтобы повысить реалистичность XR, необходимо стереть видимые границы между реальным и виртуальным мирами. Для этого требуется самый современный дисплей и высочайшее качество графики. Графический процессор на платформе Snapdragon XR2 поддерживает в полтора раза большую скорость обработки пикселей и в три раза — текселей. Такие специфические XR-функции, как фовеальный рендеринг с отслеживанием движений глаз и улучшенная технология шейдинга с переменной скоростью для более плавного обновления кадров ускоряют рендеринг тяжелых рабочих нагрузок, сохраняя при этом низкое энергопотребление. Дисплейная панель Snapdragon XR2 имеет разрешение 3×3K для каждого глаза при частоте 90 кадров в секунду. Фотореалистичность визуальных эффектов при стриминге и локальном воспроизведении, обеспечивает впервые реализованная на XR-платформе поддержка видео в формате 8K 360° при частоте 60 кадров в секунду. Чтобы уменьшить общесистемные задержки и поддерживать эффект AR-погружения, применен специализированный чип для AR-дисплеев.
Впервые в смешанной реальности пользователь может виртуально телепортироваться в новую среду. Чтобы в ней полноценно ориентироваться и уверенно действовать, Snapdragon XR2 предлагает одновременно семь камер плюс специализированный процессор компьютерного зрения. Действуя одновременно, камеры точно отслеживают движения головы, губ и глаз, а также рук — по 26 точкам. Процессор компьютерного зрения отвечает за эффективное понимание и трехмерную реконструкцию сцены. Это позволяет пользователю перемещаться в новую обстановку, где он будет интуитивно взаимодействовать с цифровым миром.
В дополненной или виртуальной реальности звук играет основную роль в каждом иммерсивном событии. Платформа Snapdragon XR2 предлагает звуковые слои нового уровня в трехмерном звуковом пространстве. Специализированный постоянно действующий энергоэффективный процессор Qualcomm Hexagon поддерживает такие аппаратно ускоряемые функции, как голосовая активация и определение контекста, позволяя слышать реальный мир, находясь в виртуальном.
С помощью ИИ были усовершенствованы многие функции Snapdragon XR2, включая аудио- и визуальные эффекты, и интерактивность, которые помогают погружать пользователей в более яркую реальность. Заявлено, что Snapdragon XR2 — первая в мире XR-платформа с поддержкой 5G-связи, возможности которой открывают дорогу XR-приложениям, требующим низкой задержки и сверхвысоких скоростей передачи данных. Например, 5G-технологии, используя раздельную обработку данных на устройстве и в пограничном облаке, позволяют реализовать практически безграничную XR-среду с фотореалистичным представлением без привязки к тому или иному помещению.
Заявлено, что многие OEM-производители уже работают над запуском в серийное производство устройств на базе Snapdragon XR2, а другие заказчики находятся на разных этапах создания опытных образцов и испытаний.