Як трансформація Wireless Edge допоможе у розробці фотореалістичних мобільних систем розширеної реальності.
(Extended Reality, XR) вже зараз дає користувачам революційні можливості, але домогтися ще більшої реалістичності та нового рівня занурення, враховуючи обмеження, пов'язані з продуктивністю та охолодженням тонких портативних гаджетів, завдання досить нетривіальне.
Погляд у майбутнє: тонкі та стильні окуляри доповненої реальності
З трансформацією систем Wireless Edge (бездротові системи, що працюють на стику мережі та гаджета) почнеться нова епоха розподілених обчислень, в якій активно використовуватимуться технології 5G, обробка інформації на самих пристроях і прикордонні хмарні обчислення. І саме ця трансформація має допомогти знайти оптимізоване рішення.
Найкраще з обох світів
Що якби ми могли взяти всі переваги мобільних XR-пристроїв та поєднати їх з продуктивністю XR-систем на базі ПК? Мобільні гаджети для розширеної реальності — це майбутнє XR, адже їх можна використовувати будь-де і будь-коли, без попередньої підготовки і без проводів. Реалізація XR на базі ПК, хоч і не може вважатися майбутнім розширеної реальності, має важливу перевагу – вона не обмежена за споживаною потужністю та ефективністю систем охолодження, що, у свою чергу, дозволяє робити більш екстенсивні обчислення. Завдяки мережам 5G з нижчою затримкою та великою пропускною спроможністю ми плануємо взяти найкраще від обох підходів. Розподіл обчислювальних завдань за допомогою технологій 5G дозволить запропонувати найкраще двох світів – безмежний мобільний XR-досвід та фотореалістичну графіку у тонких та доступних XR-гарнітурах. В результаті користувачі отримають у всіх сенсах «безмежні» можливості, адже вони зможуть підключатися до розширеної реальності, де захочуть, і рівень занурення в XR-додатки стане ще вищим.
Технології безмежної розширеної реальності пропонують взяти найкраще від мобільних XR-пристроїв та пристроїв із підключенням до ПК
Підвищення ефективності обробки даних розширеної реальності на пристрої
p align="justify"> Робота з графікою в системах розширеної реальності вимагає великих обчислювальних потужностей і чутлива до часу відгуку. Для коректного поділу обчислень потрібний системний підхід. Давайте розглянемо, як використання прикордонних хмарних обчислень може допомогти більш ефективно доповнювати обробку на пристрої, створюючи системи безмежної розширеної реальності з фотореалістичною графікою (докладніша інформація є в нашому. ).
Коли користувач системи XR повертає голову, обробка на пристрої визначає положення голови та відправляє ці дані в хмару прикордонних обчислень по 5G-каналу з мінімальною затримкою та високим якісним показником сервісу. Ця система використовує отримані дані про положення голови, щоб провести частковий рендеринг чергового кадру зображення, закодувати дані та відправити їх назад на XR-гарнітуру. Потім гарнітура розшифровує останній отриманий пакет і, використовуючи дані, що регулярно оновлюються про зміни положення голови, продовжує візуалізацію і підстроювання зображення, щоб мінімізувати показник motion-to-photon latency (затримка між зміною положення голови користувача і зміною зображення в гарнітурі). Нагадаємо, що відповідно до цього показника вся обробка має бути завершена за час, що не перевищує 20 мілісекунд. Перевищення цього порога призводить до появи у користувача неприємних відчуттів та зниження рівня зануреності у доповнену реальність.
Обчислення на пристрої доповнюються за допомогою прикордонних хмарних обчислень та каналу 5G з низьким часом відгуку.
Як бачите, для отримання якісного ефекту занурення в XR необхідне системне рішення з низьким часом відгуку та високою надійністю, тому мережі 5G з їхньою мінімальною затримкою, високою пропускною здатністю є критично важливим елементом XR. У міру вдосконалення 5G-мереж та зростання їх покриття користувачі зможуть насолоджуватися фотореалістичною графікою в XR-додатках у великій кількості місць і будуть впевнені, що преміальний автономний XR-досвід залишиться доступним завдяки ефективним обчисленням на пристрої.
І це ключовий момент, який варто ще раз підкреслити: обробка даних на пристрої залишається вкрай важливим фактором у будь-яких сценаріях. В автономному режимі «бортове» обчислення на пристрої відповідає за всі обчислення, пов'язані з XR. При спільній роботі із системою прикордонних хмарних обчислень «бортова» обробка забезпечить XR-гарнітурі можливість енергоефективної, високопродуктивної візуалізації та трекінгу з низькою затримкою.
Створюючи «безмежну» доповнену реальність
Qualcomm Technologies вже займається створенням високопродуктивних автономних мобільних XR-рішень і залишається лідером у в світі. Але ми не можемо втілити свої ідеї «безмежної» XR на реальність поодинці. Ми активно співпрацюємо з найбільшими представниками екосистем XR та 5G, включаючи OEM-виробників та творців контенту, постачальників послуг та інфраструктури, адже архітектура роздільного рендерингу – це системне рішення.
Учасники екосистем XR та 5G повинні працювати спільно, щоб технології «безмежної» XR стали реальністю
В результаті синергії всі учасники екосистеми XR отримають велику загальну вигоду від її активного розвитку, і ім'я цієї вигоди є «зростанням прийняття споживачами». Наприклад, оператори зв'язку отримають певні вигоди від трансформації Wireless Edge в цілому, але розглянемо користь саме від розвитку безмежного XR. По-перше, з приходом мереж 5G покращений ШПД підвищить ємність, знизить час відгуку та забезпечить гарантований клас обслуговування, що дасть можливість появи більш багатих та інтерактивних XR-додатків. По-друге, у міру збільшення операторами потужностей для прикордонних хмарних обчислень вони зможуть запропонувати масовому користувачеві нові послуги, наприклад, XR-додатки з фотореалістичною графікою.
Ми віримо, що великою перевагою стане новий революційний користувальницький досвід, включаючи спільну інтерактивну роботу в реальному часі, розраховані на багато користувачів ігри з фотореалістичною графікою, нове покоління відео з підтримкою шести ступенів свободи, освітні програми з зануренням і персоніфікований шопінг якого не було. Ці перспективи надихають, тому ми сподіваємось на плідну спільну роботу з іншими учасниками екосистеми – ця робота допоможе перетворити наше бачення XR на реальність.
Джерело: habr.com