Как трансформация Wireless Edge поможет в разработке фотореалистичных мобильных систем расширенной реальности.
(Extended Reality, XR) уже сейчас даёт пользователям революционные возможности, но добиться ещё большей реалистичности и нового уровня погружения, учитывая ограничения, связанные с производительностью и охлаждением тонких портативных гаджетов, — задача достаточно нетривиальная.
Взгляд в будущее: тонкие и стильные очки дополненной реальности
С трансформацией систем Wireless Edge (беспроводные системы, работающие на стыке сети и гаджета) начнётся новая эпоха распределённых вычислений, в которой будут активно использоваться технологии 5G, обработка информации на самих устройствах и пограничные облачные вычисления. И именно эта трансформация должна помочь найти оптимизированное решение.
Лучшее из обоих миров
Что если бы мы могли взять все преимущества мобильных XR-устройств и объединить их с производительностью XR-систем на базе ПК? Мобильные гаджеты для расширенной реальности — это будущее XR, ведь их можно использовать где угодно и когда угодно, без предварительной подготовки и без проводов. Реализация XR на базе ПК, хоть и не может считаться будущим расширенной реальности, имеет важное преимущество – она не ограничена по потребляемой мощности и эффективностью систем охлаждения, что, в свою очередь, позволяет делать более экстенсивные вычисления. Благодаря сетям 5G с более низкой задержкой и большой пропускной способностью мы планируем взять лучшее от обоих подходов. Распределение вычислительных задач при помощи технологий 5G позволит предложить лучшее двух миров – безграничный мобильный XR-опыт и фотореалистичную графику в тонких и доступных XR-гарнитурах. В результате пользователи получат во всех смыслах «безграничные» возможности, ведь они смогут подключаться к расширенной реальности, где захотят, и степень погружения в XR-приложения станет еще выше.
Технологии безграничной расширенной реальности предлагают взять лучшее от мобильных XR-устройств и устройств с подключением к ПК
Повышение эффективности обработки данных расширенной реальности на устройстве
Работа с графикой в системах расширенной реальности требует больших вычислительных мощностей и чувствительна ко времени отклика. Для корректного разделения вычислений необходим системный подход. Давайте рассмотрим, как использование пограничных облачных вычислений может помочь более эффективно дополнять обработку на устройстве, создавая системы безграничной расширенной реальности с фотореалистичной графикой (более подробная информация есть в нашем ).
Когда пользователь системы XR поворачивает голову, обработка на устройстве определяет положение головы и отправляет эти данные в облако пограничных вычислений по 5G-каналу с минимальной задержкой и высоким качественным показателем сервиса. Эта система использует полученные данные о положении головы, чтобы провести частичный рендеринг очередного кадра изображения, закодировать данные и отправить их обратно на XR-гарнитуру. Затем гарнитура расшифровывает последний полученный пакет и, используя регулярно обновляемые данные об изменениях положения головы, продолжает визуализацию и подстройку изображения, чтобы минимизировать показатель motion-to-photon latency (задержка между сменой положения головы пользователя и сменой изображения в гарнитуре). Напомним, что в соответствии с этим показателем вся обработка должна быть завершена за время, не превышающее 20 миллисекунд. Превышение этого порога приводит к появлению у пользователя неприятных ощущений и снижению уровня погружённости в дополненную реальность.
Вычисления на устройстве дополняются при помощи пограничных облачных вычислений и канала 5G с низким временем отклика.
Как видите, для получения качественного эффекта погружения в XR необходимо системное решение с низким временем отклика и высокой надёжностью, поэтому сети 5G с их минимальной задержкой, высокой пропускной способностью являются критически важным элементом XR. По мере совершенствования 5G-сетей и роста их покрытия пользователи смогут наслаждаться фотореалистичной графикой в XR-приложениях в большом количестве мест и будут уверены, что премиальный автономный XR-опыт останется доступным благодаря эффективным вычислениям на самом устройстве.
Ky është një moment thelbësor që duhet theksuar përsëri: përpunimi i të dhënave në pajisje mbetet një faktor jashtëzakonisht i rëndësishëm në çdo skenar. Në modul autonom, "lënda" e përpunimit në pajisje është përgjegjëse për të gjitha llogaritë e lidhura me XR. Në bashkëpunim me sistemin e llogaritjeve të kufijve të cloud-it, përpunimi "lënde" do të sigurojë mundësinë për vizualizim energji-efikas, me performancë të lartë dhe ndjekje me vonesë të ulët për helmetën XR.
Krijimi i një realiteti të pasur dhe të pakufizuar të shtuar
Qualcomm Technologies është duke punuar për krijimin e zgjidhjeve të larta të performancës për mobile XR dhe mbetet lider në në botë. Por ne nuk mund ta realizojmë vizionin tonë për XR të pakufizuar vetëm. Ne po bashkëpunojmë aktivisht me përfaqësuesit më të mëdhenj të ekosistemit XR dhe 5G, përfshirë prodhuesit OEM dhe krijuesit e përmbajtjeve, ofruesit e shërbimeve dhe infrastrukturës, pasi arkitektura e përpunimit të ndarë është një zgjidhje sistemore.
Anëtarët e ekosistemit XR dhe 5G duhet të punojnë së bashku për të bërë teknologjitë e XR të pakufizuar realitet
Si rezultat i sinergjisë, të gjithë pjesëmarrësit në ekosistem do të përfitojnë më shumë nga zhvillimi i tij aktiv, dhe emri i këtij përfitimi është "rritja e pranimit nga përdoruesit". Për shembull, operatorët e komunikimeve do të përfitojnë nga transformimi i Wireless Edge si një tërësi, por le të shohim përfitimet e zhvillimit të XR të pakufizuar. Së pari, me ardhjen e rrjeteve 5G, një bandwidth i përmirësuar do të rrisë kapacitetin, do të ulë vonesën dhe do të sigurojë një klasë të garantuar shërbimi, duke mundësuar krijimin e aplikacioneve më të pasura dhe interaktive XR. Së dyti, ndërsa operatorët rrisin kapacitetet për llogaritjet e kufijve të cloud-it, ata do të jenë në gjendje të ofrojnë shërbime të reja për përdoruesin e zakonshëm, për shembull, aplikacione XR me grafikë fotorealiste.
Ne besojmë se përfitimi i madh do të jetë një përvojë e re revolucionare për përdoruesit, duke përfshirë punën e përbashkët interaktive në kohë reale, lojëra më shumë-përdorues me grafikë fotorealiste, një brez të ri video me mbështetje për gjashtë gradë lirie, aplikacione edukative me përfshirje dhe blerje të personalizuara si asnjëherë më parë. Këto perspektiva janë frymëzuese, prandaj ne shpresojmë për një bashkëpunim produktiv me anëtarët e tjerë të ekosistemit - ky bashkëpunim do të ndihmojë në realizimin e vizionit tonë për XR.
Burimi: habr.com
