VR : le KAIST rend la rugosité des objets visible sans gant haptique

En ce début novembre 2026, une équipe de chercheurs du Korea Advanced Institute of Science and Technology (KAIST) présente un système de réalité virtuelle capable de traduire visuellement la rugosité d’un objet numérique. Récompensée lors de la conférence internationale IEEE ISMAR en octobre 2026, cette approche permet à des utilisateurs dépourvus d’accessoires tactiles de percevoir l’état d’une surface grâce au contour animé de leur main virtuelle. Elle résout ainsi un obstacle fréquent du travail collaboratif à distance lorsque les participants ne disposent pas du même équipement.

L’essentiel :

  • Le système traduit trois niveaux de rugosité (faible, moyen, élevé) en modifiant la forme et le mouvement du contour de la main virtuelle au contact d’un objet.
  • Lors d’essais en binômes, cette aide visuelle a réduit d’environ 23 % le temps nécessaire pour trier des objets virtuels selon leur texture.
  • Ces travaux ont reçu le prix du meilleur article à la conférence IEEE ISMAR 2026 et sont publiés dans la revue scientifique IEEE Transactions on Visualization and Computer Graphics (TVCG).

Ce qui a été annoncé

Les annonces publiées les 2 et 3 novembre 2026 mettent en lumière les travaux de l’Ubiquitous Virtual Reality Lab (UVR Lab), un laboratoire rattaché à la Graduate School of Metaverse et à la Graduate School of Culture Technology du KAIST, en Corée du Sud. Dirigée par le professeur Woontack Woo et menée par la doctorante Minju Baeck (première autrice), aux côtés de Yoonseok Shin, Hyunjin Lee, Boram Yoon et Sang Ho Yoon, l’équipe a mis au point une méthode logicielle qui rend le sens du toucher visible en réalité virtuelle (VR).

Concrètement, l’étude s’attaque au problème de l’haptique — la discipline qui regroupe les technologies permettant de reproduire artificiellement le sens du toucher, souvent à l’aide de vibrations ou de retour de force. Aujourd’hui, les gants ou capteurs haptiques restent peu répandus. Lorsque deux personnes se retrouvent dans un même espace virtuel, il est fréquent que l’une possède un accessoire tactile et l’autre un simple casque avec des manettes classiques. Pour combler cet écart sans imposer l’achat de matériel supplémentaire, les chercheurs sud-coréens ont choisi d’afficher l’information tactile directement à l’écran.

Financée par le ministère des Sciences et des TIC de Corée du Sud (MSIT) ainsi que par l’Institute for Information & Communications Technology Planning & Evaluation (IITP), cette recherche a d’abord fait l’objet d’une prépublication sur arXiv le 29 août 2026. Elle a ensuite été acceptée dans la revue IEEE Transactions on Visualization and Computer Graphics (TVCG) et a décroché le prix du meilleur article (Best Paper Award) le 6 octobre 2026 lors de la conférence IEEE ISMAR. Il s’agit de la troisième année consécutive (2024, 2025 et 2026) que le laboratoire UVR reçoit cette distinction internationale.

En clair : En réalité virtuelle, il est impossible de sentir si un objet est lisse ou rugueux sans porter un accessoire spécial sur les mains. Les chercheurs du KAIST ont contourné ce problème en dessinant un contour animé autour de la main virtuelle : selon la façon dont ce trait bouge et se déforme au contact d’un objet, le cerveau comprend immédiatement si la surface est douce ou râpeuse, uniquement avec les yeux.

Comment ça marche

Plutôt que d’essayer de stimuler physiquement la peau d’un utilisateur qui n’a pas d’équipement adapté, le système du KAIST utilise ce que les chercheurs appellent un substitut visuel (ou visual proxy en anglais). Le principe s’apparente aux lignes de mouvement ou aux éclairs dessinés dans une bande dessinée pour faire comprendre au lecteur qu’un personnage tremble ou touche quelque chose de brûlant : un indice graphique remplace une sensation physique.

Dans l’environnement virtuel, dès que l’avatar d’un utilisateur pose la main sur un objet, un tracé lumineux entoure sa main virtuelle. La forme géométrique de ce contour ainsi que la dynamique de son mouvement changent en temps réel selon la texture de l’objet touché. Le système est ainsi capable d’encoder trois niveaux distincts de rugosité : faible, moyen et élevé.

Pour s’assurer que ce langage graphique soit compris intuitivement par tout le monde, l’équipe a d’abord mené deux études préliminaires. Ces premières étapes ont servi à bâtir une « sémantique visuelle partagée », c’est-à-dire un code visuel commun. Les chercheurs ont vérifié deux critères précis : d’une part, que les personnes sans matériel haptique arrivaient à différencier sans erreur les trois niveaux de rugosité uniquement en regardant le contour de la main ; d’autre part, que ces animations visuelles correspondaient fidèlement à l’intensité des vibrations ressenties par les utilisateurs qui portaient un véritable capteur haptique au bout des doigts.

Pourquoi c’est une avancée

L’intérêt majeur de ces travaux réside dans la résolution de « l’asymétrie sensorielle ». Dans une réunion de travail en réalité virtuelle, si un ingénieur porte un dispositif haptique et que son collègue n’en a pas, ils ne perçoivent pas le même monde. Le premier sent les reliefs et les textures d’un prototype numérique, tandis que le second ne voit qu’une image lisse. Ce déficit d’information complique considérablement la prise de décision à deux, qu’il s’agisse de comparer, de sélectionner ou de trier des éléments.

Pour mesurer l’efficacité de leur solution en situation de coopération, les chercheurs du KAIST ont organisé une expérience principale réunissant 48 participants, répartis en 24 binômes. Dans chaque duo, un partenaire était équipé d’un dispositif haptique vibratoire placé au bout des doigts, tandis que le second travaillait sans aucun matériel haptique. Leur mission commune consistait à trier des objets virtuels en fonction de leur rugosité.

Les résultats rapportés par l’étude démontrent un gain d’efficacité net. Lorsque les indices visuels de rugosité étaient affichés sur les mains virtuelles des deux partenaires, le temps nécessaire pour accomplir la tâche de tri a diminué d’environ 23 % par rapport aux sessions sans visualisation, tout en conservant un niveau de précision élevé. Au-delà de la rapidité d’exécution, l’impact psychologique sur la collaboration est notable : les participants dépourvus de capteur tactile ont déclaré avoir une bien meilleure confiance dans leurs propres jugements et ont ressenti le sentiment de contribuer beaucoup plus activement au travail d’équipe lorsque les signaux visuels apparaissaient sur leur propre main virtuelle.

Les limites et la suite

Malgré la rigueur du protocole et la reconnaissance académique obtenue à l’IEEE ISMAR 2026, cette technologie comporte plusieurs limites inhérentes à son stade de développement. Tout d’abord, les essais ont été conduits exclusivement en laboratoire dans le cadre d’une validation expérimentale. Ensuite, la finesse de perception reste restreinte : le système ne traduit pour l’instant que trois paliers discrets de rugosité (faible, moyen, élevé), ce qui ne couvre qu’une petite fraction de la richesse du toucher humain (qui perçoit aussi la température, la dureté, l’élasticité ou des granulosités continues).

Les auteurs soulignent eux-mêmes que des tests complémentaires devront être menés auprès d’une plus grande diversité d’utilisateurs, sur des tâches plus variées et avec différents types de casques et d’accessoires, avant d’envisager un déploiement dans des environnements de travail réels.

Pour la suite de ses travaux, le laboratoire UVR du KAIST envisage d’appliquer ce principe de substitut visuel à plusieurs domaines concrets : l’évaluation virtuelle de produits avant leur fabrication, l’éducation, la formation professionnelle à distance, ainsi que les plateformes de travail collaboratif où se côtoient des équipements disparates. En parallèle, l’équipe du professeur Woontack Woo prévoit de poursuivre ses recherches en croisant les technologies de réalité étendue (XR, qui regroupe réalité virtuelle, augmentée et mixte) avec l’intelligence artificielle (IA).

Questions fréquentes

Comment le système du KAIST fait-il ressentir la rugosité sans gant haptique ?

Il ne stimule pas physiquement la peau, mais utilise un substitut visuel : lorsque la main virtuelle touche un objet, son contour change de forme et de mouvement pour indiquer si la surface présente une rugosité faible, moyenne ou élevée.

Qu'est-ce que l'asymétrie sensorielle en réalité virtuelle ?

C'est une situation où deux utilisateurs connectés dans le même espace virtuel n'ont pas le même équipement : l'un possède un accessoire haptique lui permettant de sentir les objets, tandis que l'autre n'en a pas et ne peut se fier qu'à sa vue, ce qui complique le travail en équipe.

Quel est le gain d'efficacité mesuré par les chercheurs ?

Lors d'une expérience menée avec 24 binômes devant trier des objets virtuels selon leur rugosité, l'affichage des indices visuels sur les mains des deux partenaires a permis de réduire le temps d'exécution de la tâche d'environ 23 %, tout en maintenant une précision élevée.

Cette technologie est-elle déjà disponible pour le grand public ?

Non, le système en est au stade de la validation expérimentale en laboratoire. Des tests supplémentaires sur des tâches plus variées et en conditions réelles sont nécessaires avant un éventuel déploiement industriel.

JM

Julien Marchetti

Passionné de technologies d'interface depuis 15 ans, suit de près la recherche sur le toucher numérique et la robotique.