Comment la transformation Wireless Edge aidera au développement de systèmes mobiles de réalité augmentée photoréalistes.
(Réalité augmentée, XR) offre déjà aux utilisateurs des possibilités révolutionnaires, mais atteindre un réalisme encore plus grand et un nouveau niveau d'immersion, compte tenu des limitations liées à la performance et au refroidissement des appareils portables fins, est une tâche plutôt complexe.
Un aperçu de l'avenir : des lunettes de réalité augmentée fines et élégantes
Avec la transformation des systèmes Wireless Edge (systèmes sans fil opérant à l'intersection du réseau et de l'appareil), une nouvelle ère de calcul distribué commencera, utilisant activement des technologies 5G, le traitement d'informations sur les appareils eux-mêmes et le cloud computing en périphérie. C'est cette transformation qui doit aider à trouver une solution optimisée.
Le meilleur des deux mondes
Que se passerait-il si nous pouvions combiner tous les avantages des appareils mobiles XR avec la performance des systèmes XR basés sur PC ? Les appareils mobiles de réalité augmentée représentent l'avenir de XR, car ils peuvent être utilisés partout et à tout moment, sans préparation préalable et sans câbles. Bien que la mise en œuvre de XR sur PC ne puisse pas être considérée comme l'avenir de la réalité augmentée, elle a l'avantage important de ne pas être limitée par la consommation d'énergie et l'efficacité des systèmes de refroidissement, permettant ainsi des calculs plus intensifs. Grâce aux réseaux 5G avec une latence plus faible et une large bande passante, nous prévoyons de tirer le meilleur des deux approches. La distribution des tâches de calcul avec les technologies 5G permettra d'offrir le meilleur des deux mondes - une expérience XR mobile illimitée et des graphismes photoréalistes dans des casques XR fins et accessibles. En conséquence, les utilisateurs bénéficieront de possibilités « illimitées » dans tous les sens, car ils pourront se connecter à la réalité augmentée où qu'ils soient, et le niveau d'immersion dans les applications XR sera encore plus élevé.
Les technologies de réalité augmentée illimitée proposent de tirer le meilleur des appareils mobiles XR et des dispositifs connectés à un PC.
Amélioration de l'efficacité du traitement des données de réalité augmentée sur l'appareil
Le travail avec des graphismes dans les systèmes de réalité augmentée nécessite une grande puissance de calcul et est sensible au temps de réponse. Pour un partage correct des calculs, une approche systémique est nécessaire. Voyons comment l'utilisation des calculs en nuage edge peut contribuer à compléter plus efficacement le traitement sur l'appareil, créant ainsi des systèmes de réalité augmentée illimités avec des graphismes photoréalistes (des informations complémentaires sont disponibles dans notre ).
Lorsque l'utilisateur d'un système XR tourne la tête, le traitement sur l'appareil détermine la position de la tête et envoie ces données vers le nuage edge via un canal 5G avec une latence minimale et une qualité de service élevée. Ce système utilise les données reçues sur la position de la tête pour effectuer un rendu partiel de la prochaine image, coder les données et les renvoyer au casque XR. Ensuite, le casque déchiffre le dernier paquet reçu et, en utilisant des données mises à jour régulièrement sur les changements de position de la tête, continue la visualisation et l'ajustement de l'image pour minimiser la latence motion-to-photon (le délai entre le changement de position de la tête de l'utilisateur et le changement d'image dans le casque). Rappelons que selon ce critère, tout le traitement doit être terminé en un temps ne dépassant pas 20 millisecondes. Dépasser ce seuil entraîne des sensations désagréables pour l'utilisateur et diminue le niveau d'immersion dans la réalité augmentée.
Les calculs sur l'appareil sont complétés par des calculs en nuage edge et un canal 5G avec un faible temps de réponse.
Comme vous pouvez le constater, pour obtenir un effet d'immersion de qualité dans XR, une solution systémique avec un faible temps de réponse et une grande fiabilité est nécessaire. Ainsi, les réseaux 5G avec leur latence minimale et leur large bande passante sont un élément critique de XR. À mesure que les réseaux 5G s'améliorent et que leur couverture s'accroît, les utilisateurs pourront profiter de graphismes photoréalistes dans les applications XR dans de nombreux endroits tout en étant assurés que l'expérience XR autonome premium restera accessible grâce à des calculs efficaces sur l'appareil.
Et c'est un point clé qu'il convient de souligner à nouveau : le traitement des données sur l'appareil reste un facteur crucial dans tous les scénarios. En mode hors ligne, le calcul « embarqué » sur l'appareil est responsable de tous les calculs liés à XR. En collaborant avec le système de calcul en nuage à la périphérie, le traitement embarqué offrira à la XR un rendu visuel économe en énergie, haute performance, et un suivi avec faible latence.
Créer une réalité augmentée « illimitée »
Qualcomm Technologies travaille déjà à la création de solutions mobiles XR autonomes haute performance et reste un leader dans dans le monde. Mais nous ne pouvons pas concrétiser nos idées de XR « illimitées » seuls. Nous collaborons activement avec les plus grands acteurs des écosystèmes XR et 5G, y compris des fabricants OEM et des créateurs de contenu, des fournisseurs de services et d'infrastructure, car l'architecture de rendu décentralisé est une solution systémique.
Les participants des écosystèmes XR et 5G doivent travailler ensemble pour que les technologies XR « illimitées » deviennent une réalité.
En raison de la synergie, tous les acteurs de l'écosystème XR bénéficieront d'un développement actif, et ce bénéfice est appelé « augmentation de l'adoption par les consommateurs ». Par exemple, les opérateurs de télécommunications tireront certains avantages de la transformation de Wireless Edge dans son ensemble, mais concentrons-nous sur les bénéfices spécifiques du développement de XR illimité. Tout d'abord, avec l'arrivée des réseaux 5G, un haut débit amélioré augmentera la capacité, réduira le temps de réponse et garantira une qualité de service, permettant ainsi l'émergence d'applications XR plus riches et interactives. Deuxièmement, à mesure que les opérateurs augmentent leurs capacités pour le calcul en nuage à la périphérie, ils pourront offrir aux utilisateurs massifs des services entièrement nouveaux, tels que des applications XR avec des graphiques photoréalistes.
Nous croyons que le nouvel avantage révolutionnaire résidera dans l'expérience utilisateur, y compris un travail collaboratif interactif en temps réel, des jeux multijoueurs avec des graphismes photoréalistes, une nouvelle génération de vidéos prenant en charge six degrés de liberté, des applications éducatives immersives et un shopping personnalisée sans précédent. Ces perspectives nous inspirent, c'est pourquoi nous espérons une collaboration fructueuse avec les autres membres de l'écosystème - ce travail aidera à transformer notre vision de XR en réalité.
Source : habr.com
