До сегодняшнего дня Qualcomm сосредоточилась на наборах микросхем смешанной реальности (XR1 и XR2 ), которые можно было бы использовать как для гарнитур дополненной, так и для виртуальной реальности. В настоящее время компания производит свой первый специализированный чип дополненной реальности — Snapdragon AR2 Gen 1.
Учитывая физические ограничения форм-фактора, Qualcomm использует многокристальную распределенную архитектуру обработки, так что не все компоненты размещаются на одной большой плате. Скорее всего, процессор AR может находиться внутри одной ветки, сопроцессор AR — в мосте, а возможность подключения — в другой ветке. По сравнению с XR2, AR2 потребляет на 50% меньше энергии.
Этот 4-нм AR-процессор поддерживает до девяти камер для понимания пользователя и окружающей среды с помощью движка для визуальной аналитики, которому поручено обнаружение объектов. Другое специальное оборудование улучшает отслеживание движения и локализацию, в то время как отслеживание рук или 6DoF работают с меньшей задержкой благодаря ускорителю ИИ. Помимо восприятия, этот чип используется для управления выводом на дисплей с помощью механизма перепроецирования, гарантирующего, что визуальные наложения остаются закрепленными при движении.
Сопроцессор дополненной реальности объединяет данные камеры и датчика, а отслеживание взгляда позволяет выполнять точечный рендеринг для более эффективной фокусировки вычислительных нагрузок только там, куда смотрит пользователь. Также имеется поддержка аутентификации по радужной оболочке, при этом чип содержит собственный процессор, память и аппаратное обеспечение для агрегации камеры/сенсора, компьютерного зрения и безопасности.
Как и Snapdragon 8 Gen 2, Qualcomm FastConnect 7800 (сетевой модуль) обеспечивает поддержку Wi-Fi 7 с задержкой менее 2 миллисекунд между очками дополненной реальности и сопряженным хост-устройством. Более сложная обработка данных переносится на подключенный смартфон (или ПК), а данные восприятия, чувствительные к задержке, обрабатываются непосредственно на очках.
Что касается внедрения Snapdragon AR2 Gen 1, Lenovo, LG, Niantic, Nreal, OPPO, Pico, QONOQ, Rokid, Sharp, TCL, Tencent, Vuzix и Xiaomi находятся на разных стадиях разработки. Qualcomm также анонсировала звуковые платформы/чипы S5 Gen 2 и S3 Gen 2, которые поддерживают пространственный звук с динамическим отслеживанием положения головы, качеством звука без потерь и задержкой 48 мс.
