Adieu clavier et souris : comment la réalité virtuelle et augmentée réécrit les règles de l’interaction homme-machine

Par David Carneros, chercheur prédoctoral en formation

Je suis sûr que vous avez tous vu des vidéos sur Twitter (ou "X") de personnes marchant dans la rue avec les nouvelles lunettes de réalité augmentée/virtuelle d'Apple, bougeant leurs mains d'une manière plutôt comique. À première vue, ces gestes peuvent ressembler à une danse futuriste ou à une nouvelle forme de communication secrète (reptilienne peut-être ?). Cependant, nous assistons au début d'une ère dans laquelle les périphériques que nous connaissons actuellement pourraient devenir des pièces du musée du HALL de l’ESI. Ces lunettes redéfinissent la façon dont nous interagissons avec le monde numérique, promettant une intégration plus naturelle et directe entre les humains et les machines.

Ces lunettes redéfinissent la façon dont nous interagissons avec le monde numérique, promettant une intégration plus naturelle et directe entre les humains et les machines.

Je me souviens de mon premier contact avec un ordinateur à l'âge de six ans, je me souviens encore de la fascination que j'ai ressentie en apprenant à utiliser le clavier et la souris. Petit à petit, ces périphériques sont devenus des extensions de mon corps, des outils sans lesquels il était difficile d’imaginer une quelconque interaction avec la technologie.

Au fil du temps, j'ai eu mon premier téléphone portable (le légendaire Nokia indestructible) et j'ai adapté mon cerveau à l'utilisation de ce petit clavier sur lequel pour écrire mon nom, je devais appuyer sur 9 touches. Et peu de temps après avoir vécu ma première révolution d’interaction, les écrans tactiles sont apparus. Du coup, le contact direct avec les interfaces numériques est devenu une seconde nature, supprimant toute barrière physique entre l’utilisateur et le contenu numérique. Ce passage du physique au tactile était déjà un grand pas, mais ce à quoi nous assistons avec la réalité augmentée et virtuelle est encore plus révolutionnaire.

Le passage du physique au tactile était déjà un grand pas en avant, mais ce à quoi nous assistons avec la réalité augmentée et virtuelle est encore plus révolutionnaire.

Les lunettes de réalité augmentée/virtuelle, comme Vision Pro d'Apple ou Quest de Meta, ouvrent la voie à une ère où les interfaces utilisateur deviennent encore plus intuitives, fluides et personnalisées. L’interaction basée sur les gestes et les commandes vocales promet une immersion totale dans le monde numérique, sans avoir recours à des médiateurs physiques.

Imaginez un instant notre monde avec cette nouvelle technologie, dans laquelle pour programmer nous n'avons pas besoin d'un écran, d'un clavier et d'une souris, dans laquelle nous pouvons simplement programmer avec des lunettes et nos mains. Eh bien, c'est quelque chose qui est déjà possible.

Voici une vidéo de moi utilisant Vision Pro avec un moniteur macOS 5120 × 2880 pour le codage et la conception 3D, puis d'autres fenêtres de réseaux sociaux et mon courrier électronique s'ouvrent dans des fenêtres séparées sur visionOS. Vous n'avez pas réellement besoin que plusieurs moniteurs macOS soient mis en miroir à mon humble avis. Vous pouvez également voir que mon… pic.twitter.com/E3OeaxtWGi

–Geert Bevin (@gbevin) 10 février 2024

Cependant, cette transition vers de nouvelles formes d’interaction pose également des défis. Tout comme j’ai dû apprendre étant petite à utiliser la souris et le clavier, les nouvelles générations devront s’adapter à des interfaces qui peuvent nous paraître aujourd’hui futuristes. De plus, les considérations liées à l’accessibilité et à l’inclusion deviennent encore plus cruciales, afin de garantir que personne ne soit laissé pour compte dans cette nouvelle ère technologique.

En conclusion, l’évolution de la technologie est imparable et nous conduit à un changement radical dans la façon dont nous interagissons avec la technologie. Dans un avenir pas trop lointain, nous pourrons voir des étudiants en classe faire leurs exercices de « taper en l’air » et cela nous semblera normal. Mais au-delà de cette révolution immédiate, un horizon encore plus radical se dessine : les interfaces cerveau-ordinateur. Même si aujourd’hui la réalité augmentée et virtuelle réécrit les règles de l’interaction, les BCI pourraient représenter le prochain grand pas en permettant des communications directes entre notre cerveau et les machines. Cet avenir, bien que fascinant (et dystopique), soulève également de profondes questions éthiques sur la vie privée, l’autonomie et l’identité dans un monde où nos pensées ne sont peut-être pas seulement les nôtres. Pour l’instant, il ne nous reste plus qu’un avenir que nous pouvons prévoir et gérer, mais le débat sur la suite des événements donnera certainement matière à discussion.