Annoncée au CES, cette solution de détection des mouvements sur l’ensemble du corps, sans port de vêtements, est actuellement au stade du prototype. Le patron du bureau de Lenovo nous en dit plus.
Comme on pouvait s’y attendre, le CES 2023 a été riche en activités liées aux métavers, le lancement le plus important étant celui du nouveau casque VR/AR Elite VIVE XR de HTC. Lenovo a également fait une annonce intéressante : le projet Chronos, un système de capture du mouvement du corps entier basé sur une caméra, qui permet d’animer un avatar dans le métavers sans avoir besoin d’un casque ou d’autres capteurs portables.
Nous avons donc rencontré Sanjeev Menon, vice-président et directeur général du segment des ordinateurs de bureau chez Lenovo, par courriel après le salon pour en savoir plus.
Selon vous, pourquoi les technologies similaires de contrôle du mouvement n’ont-elles pas réussi à s’imposer à grande échelle ?
Les technologies naturelles de capture du mouvement sont soit basées sur des marqueurs, à l’aide de capteurs de suivi du corps, soit sans marqueurs, à l’aide de caméras. Les déploiements de ces dernières ont généralement été limités soit par des exigences de configuration complexes, soit par une expérience utilisateur médiocre en raison de la faible précision et de la latence élevée.
Grâce à l’évolution rapide de la technologie matérielle et de l’intelligence artificielle, le projet Chronos peut repousser les limites pour permettre la capture de mouvement en temps quasi réel, ce qui donne aux gens de nouveaux niveaux de liberté pour interagir et s’engager dans des espaces virtuels. À cette fin, nous ne voulions pas non plus limiter son utilisation à un seul scénario, mais plutôt alimenter de multiples cas d’utilisation dans différents aspects de la vie des consommateurs.
Qu’il soit utilisé pour la création de contenu, les jeux sociaux, la diffusion en direct, l’entraînement physique ou tout autre chose, le concept de Project Chronos est conçu pour offrir un nouveau niveau de liberté à ceux qui fréquentent les espaces virtuels ou à ceux qui cherchent à utiliser les nouvelles technologies pour communiquer avec les autres.
Qu’est-ce qui a incité Lenovo à faire passer le contrôle du mouvement sans port de vêtements au-delà du jeu et à le faire entrer dans le métavers avec Project Chronos ?
Avec le projet Chronos, nous créons une nouvelle passerelle vers les métavers pour permettre aux gens de découvrir tous les types d’espaces numériques 3D d’une nouvelle manière. Comme il s’agit d’une expérience sans vêtement qui imite les mouvements naturels d’une personne avec des avatars réalistes, elle offre aux utilisateurs une expérience immersive non conventionnelle.
Qu’il soit utilisé pour le fitness virtuel, le vlogging, les jeux, les promenades virtuelles, etc., notre concept permettra aux gens de passer de manière transparente d’un monde numérique à l’autre, et un riche catalogue d’options ouvre la voie à une adoption plus rapide par les utilisateurs.
Le facteur de forme et les spécifications de l’unité Chronos sont-ils finalisés, ou d’autres améliorations sont-elles probables ?
Nous continuerons à affiner le facteur de forme et les spécifications en fonction des études sur l’expérience des utilisateurs. Nous travaillerons également avec les créateurs de contenu et les développeurs afin de trouver la meilleure solution pour alimenter les nouveaux scénarios.
Pourquoi n’y a-t-il que des connexions DisplayPort et Mini-DisplayPort sur l’unité Chronos actuelle ? Pourquoi pas HDMI aussi ?
L’unité de base du projet Chronos étant conçue pour être associée à un écran externe, comme un moniteur grand format ou un téléviseur, nous prévoyons de fournir plusieurs options de connectivité vidéo, notamment DisplayPort, Mini-DP et HDMI. En fin de compte, nous optimiserons les ports d’entrée/sortie et les spécifications pour offrir la meilleure expérience possible aux utilisateurs, en nous basant sur leurs idées et les réalités du marché.
Lenovo Project Chronos
Le matériel Project Chronos est un PC spécialisé Windows 10 alimenté par un processeur Intel Core de 13e génération, avec une caméra RVB intégrée détectant la profondeur.
Image : Lenovo
Par ailleurs, pourquoi une télécommande portable est-elle nécessaire ? Toute interaction de l’utilisateur avec l’unité Chronos pourrait certainement se faire par des gestes…
En intégrant une télécommande portable au système, nous donnons aux utilisateurs la possibilité de passer d’un contrôle par le corps à une interaction plus stationnaire dans les environnements virtuels, selon leur préférence.
Nous voulons que le projet Chronos soit aussi flexible que possible, afin qu’il puisse répondre à une multitude de besoins et de cas d’utilisation. Une télécommande offre la souplesse, et souvent la commodité, nécessaires à cet effet. Au fur et à mesure que nous développons notre écosystème de partenaires de contenu, la télécommande nous donnera également plus d’options pour permettre la compatibilité avec un plus grand nombre d’applications où les mouvements du corps entier ne sont reconnus que dans certains aspects de l’application.
Quelle est la qualité du suivi des expressions faciales et des mouvements oculaires dans le projet Chronos ? Faut-il poursuivre le développement dans ce domaine ?
Project Chronos peut suivre les expressions faciales, y compris la micro-expression faciale de l’utilisateur, le mouvement des yeux et le mouvement de la bouche. Nous y sommes parvenus grâce à l’adoption d’une technologie de nuage de points 3D qui capture plus de 50 unités actives autour du visage d’une personne. C’est une technologie impressionnante que nous sommes impatients de continuer à explorer à ce stade de validation du concept.
Quels sont les cas d’utilisation du Projet Chronos susceptibles de présenter le plus d’intérêt ?
Nous ne positionnons pas actuellement le projet Chronos comme une solution de jeu, mais nous voyons un grand potentiel dans tous les cas d’utilisation prévus. Cependant, je pense vraiment que les personnes qui utilisent actuellement des combinaisons de capture de mouvement ou d’autres dispositifs portables pour contrôler leurs avatars virtuels dans l’espace VTuber seront attirées par cette technologie en raison de la liberté qu’elle offre. Le projet Chronos permettra à ces artistes et diffuseurs de s’exprimer par le biais de mouvements corporels et d’expressions faciales, ce qui n’était pas possible jusqu’à présent sans l’utilisation de capteurs de mouvements portables.
La forme physique est un autre domaine dans lequel je pense que les gens verront l’intérêt de cette technologie. La possibilité pour une personne en Espagne, par exemple, de suivre un cours de yoga avec un instructeur en Thaïlande, de recevoir ses commentaires immédiats sur la forme et la posture, et d’être capable d’imiter ce que l’instructeur fait comme s’il se tenait juste en face d’elle, est puissante, surtout si l’on considère que les deux personnes peuvent profiter de cette expérience dans un magnifique environnement virtuel sans aucun équipement AR/VR supplémentaire qui les encombre.
D’autres scénarios, tels que le chat social ou les réunions, seront populaires. Les gens pourront alors exploiter le projet Chronos pour interagir non seulement entre eux « en personne » dans le monde virtuel, mais aussi avec des objets 3D. Ainsi, deux architectes ou concepteurs de produits pourraient se rencontrer et présenter leur création sous la forme d’un hologramme 3D qu’ils pourraient tous deux voir de manière plus immersive, en supprimant les barrières du temps et de l’espace.
À quoi ressemblera l’écosystème logiciel du projet Chronos ? Pourrai-je emmener mon avatar Lenovo dans un monde virtuel créé par Meta, Microsoft, Google, HTC ou qui que ce soit ? Où se situe Lenovo dans le continuum jardin clos/système ouvert ?
Le métavers évolue à un rythme incroyable, avec un nombre croissant d’utilisateurs et d’expériences en ligne chaque jour. En fusionnant les jeux, les médias, les événements en direct et les médias sociaux dans une nouvelle forme d’interactivité qui mêle numérique et physique, le métavers réécrit les règles de l’économie de consommation.
À ce titre, notre technologie doit elle aussi évoluer pour répondre de manière adéquate aux besoins de ses utilisateurs. Pour offrir à nos clients la meilleure expérience utilisateur, une collaboration entre appareils et plates-formes est nécessaire dans l’espace AR/VR, tout comme dans d’autres domaines technologiques, et c’est ce que nous nous efforçons de réaliser en continuant à rencontrer des créateurs de contenu, des développeurs et des fournisseurs de services pour développer cet écosystème et lancer une solution qui offre cette liberté virtuelle.
La vision que nous créons avec le projet Chronos est un écosystème 3D ouvert dans lequel les utilisateurs peuvent emmener leur avatar complet dans n’importe quel monde virtuel du métavers et le contrôler grâce à une interaction naturelle et aux mouvements du corps, sans avoir besoin de lunettes ou de wearables mocap. C’est pourquoi nous positionnons le projet Chronos comme une passerelle vers les mondes virtuels 3D, non seulement du point de vue des capacités matérielles, mais aussi du point de vue de l’écosystème ouvert.
Quand la prochaine itération du projet Chronos sera-t-elle présentée après le CES 2023 ?
Nous sommes en train de finaliser les futures démonstrations de Project Chronos et nous annoncerons la prochaine itération dès qu’elle sera disponible.
Quand aurons-nous une indication du nom final du produit, de sa date de sortie et de son prix ?
L’écosystème est toujours en cours de développement, et nous annoncerons son nom définitif, sa date de sortie et son prix lorsqu’il sera plus avancé dans la préparation de son lancement.
