J’ai déjà eu l’occasion de vous parler de l’évolution de l’outil informatique vers des terminaux polymorphes et nomades. Cette évolution du hardware se fera de concert avec le software et notamment les systèmes d’exploitation et les logiciels. D’ailleurs nous sommes en plein dedans avec la vague des widgets (sorte de mini-applications) qui font la fortune d’Apple sur l’iPhone et le prochain Chrome OS de Google qui sera un hybride entre navigateur et système d’exploitation.
Les interfaces naturelles bientôt dans notre quotidien
Depuis que j’ai assisté au speech très inspiré de Bill Buxton sur les interfaces naturelles, je m’interroge sur la pertinence du modèle écran / clavier / souris. Regardez de près le Project Gustav pour vous rendre compte du potentiel que pourrait représenter des interfaces faisant une utilisation optimale des écrans tactiles et des périphériques naturels (ici un simili-pinceau pour cette simulation de peinture) :

La prise en main est immédiate et l’utilisateur s’exprime d’autant mieux qu’il utilise les gestes et outils de son quotidien. Démonstration vidéo ici :
Ce type d’interface a d’ailleurs été vu sur les stands de Fiat et de Renault au récent Salon de Genève pour épater les visiteurs : Les configurateurs interactifs de Fiat et Renault au Salon de l’Auto de Genève.
La dimension ludique est ici évidente et l’on se met à rêver des nombreuses possibilités offertes par des terminaux comme Surface… ou comme la Sphere, un autre projet de Microsoft qui combine un affichage sphérique et une surface tactile :

Mais pas la peine de sortir la grosse artillerie pour proposer une expérience différenciante. Exemple avec le Gesture Cube, un concept à mi-chemin entre touchbook et cadre numérique qui pousse encore plus loin la logique de terminal domestique connecté popularisée par le Chumby : Gesture Cube, Une interface 3D interactive.

Là encore, ce cube domestique aux formes et dimensions très proches d’un radio-reveil, exploite parfaitement les gestes naturels et surtout la contextualisation des informations / applications en fonction de la pièce dans laquelle vous vous trouvez :
Et dans la série “je fais du neuf avec du vieux“, je me permets également d’évoquer le concept Waveface Ultra proposé par Asus, un écran tactile souple que vous enroulez autour de votre poignet :

L’idée ici n’est pas de miniaturiser un smartphone mais plutôt de faire monter en compétence votre montre pour qu’elle puisse vous envoyer des notifications et qu’elle interagisse avec ce qui vous entoure :
Là encore vous remarquerez que le terminal et les gestes utilisés pour le manipuler sont les plus naturels possibles (l’interface est ici presque transparente).
Dernier exemple et pas des moindres avec SixthSens le concept d’interface gestuelle portable présentée par Pranav Mistry lors du dernier TED : An interview with Pranav Mistry, the genius behind Sixth Sense.

Imaginez-vous avec un terminal en forme de médaillon qui serait équipé d’un mini-projecteur (pour afficher des informations) et d’une caméra pour capter le mouvement de vos doigts. Lorsque vous allumez le terminal, vous choisissez une application et celui-ci projette alors une interface adaptée au contexte d’utilisation (ici, la lecture d’une vidéo en complément d’un article) :

Pour le moment le terminal en lui-même est rudimentaire mais l’on décèle un potentiel énorme dans la vidéo suivante :
Et comme dans les précédents exemples, c’est un objet du quotidien (un médaillon) qui est mis en scène dans notre quotidien (prendre une photo, lire un journal) et dont l’interface se manipule de façon tout à fait naturelle (avec les doigts).
Interfaces naturelles et jeu vidéo, une réalité
Bon nous sommes tous d’accord pour dire que ce n’est pas demain la veille où nous sortirons avec notre médaillon augmenté, il n’empêche que les interfaces naturelles sont une réalité pour un grand nombre de personnes (vous avez déjà essayé la Wii ?) et qu’il n’y a aucune raison pour que l’industrie du jeu vidéo n’aille pas plus loin (d’ailleurs elle a toujours été très précurseur).

Passé relativement inaperçu l’année dernière, le jeu EndWar est ainsi un bel exemple d’interface naturelle avec son principe de commandes vocales plutôt abouti :

Commandes gestuelles, commandes vocales, c’est la sortie en juin prochain de la déclinaison grand public du Project Natal de Microsoft qui devrait normalement rehausser la barre d’un cran avec des concepts de jeu tout à fait renversants. Exemple avec ce concept malheureusement abandonné de beat them all qui se joue avec les doigts : Indie studio reveals cancelled, finger-powered Natal game.

Quel dommage que ce concept n’ai pas été retenu car je me voyais tout à fait jouer avec mes doigts sur la table basse :

Bref, j’ai comme l’impression que les souris et claviers vont prendre une grosse claque avec la généralisation des écrans tactiles et des interfaces naturelles. Quoique…
Pas d’interfaces naturelles dans le milieu professionnel ?
Outre les métiers graphiques, j’ai du mal à anticiper une percée des interfaces naturelles dans le monde professionnel. Autant je suis convaincu du potentiel ludique et intuitif de ce type d’interfaces, autant je ne pense pas que l’on puisse améliorer la productivité d’un utilisateur de clavier / souris dans un contexte pro.
C’est donc malheureusement l’argument économique qui va pérenniser l’outil informatique tel que nous le connaissons sur le poste de travail. Rien de dramatique dans la mesure où nous pourrons toujours exploiter des interface naturelles dans nos moments de détente ou à la maison. La rupture entre le monde pro et perso sera ainsi d’autant plus nette et agréable.
Et le web dans tout ça ?
Reste une grande inconnue pour les interfaces naturelles : Comment les exploiter dans le cadre d’un navigateur web ? Et c’est là où nous nous heurtons au casse tête des interfaces web qui se manipulent à la fois avec la souris pour le clic ou le drag & drop (donc potentiellement la main ou le doigt), mais également avec le clavier pour saisir une URL ou remplir un formulaire.
Donc très clairement sur ce cas d’usage particulier je suis incapable de prendre position. Comme je fais un usage intensif du web, je penche tout de même en faveur du traditionnel couple clavier / souris. Mais tout ceci pourrait bien changer avec la “widgetisation” des sites web et services en ligne sur l’iPhone et encore plus sur l’iPad.
Affaire à suivre, nous aurons l’occasion d’en reparler.
“Pas d’interfaces naturelles dans le milieu professionnel ?”
Je rejoins l’analyse sur le fait que le coté ludique de ces interfaces feront qu’elle seront dans un futur proche, parties intégrantes de nos activités de joueurs de jeux vidéos ou plus généralement dans notre quotidien de geeks.
Et cela bien avant de remplacer notre cher duo clavier/souris…
Mais peut être qu’avant de parler de “remplacer”; ces nouvelles interfaces vont sans doute “modifier” ou du moins faire évoluer la souris et le clavier…
On peut rapidement imaginer un clavier ou les touches seraient une multitudes d’écrans réassignable à notre guise. Où encore une souris qui via des capteurs (empreintes digitales , ect ) permetrait de se loguer à tout nos comptes en un seul “clic”.
Et dans 10 ans même si le terme clavier/souris existera encore, cela ne ressemblera sans doute en rien à ce que nous utilisons aujourd’hui…
Ce que je veux dire c’est que la clé est bien évidement “la performance”, si clairement ces nouvelles interfaces démontrent leurs capacités à augmenter les performances de leurs utilisateurs, alors pour moi il ne fait aucun doute que dans un avenir pas si lointain elle feront aussi parties intégrante de nombreux métiers.
Greg.
@ Greg R. > Oui tout à fiat. D’ailleurs nous commençons à voir des évolutions notables d’outils traditionnels dans le monde professionnel avec les dernières générations de tablettes graphiques qui sont multi-touch ou les souris 3D de type Space Navigator Pro pour les concepteurs3D.
A quand une souris dédiée à la navigation multi-dimensionnelle pour les analystes financiers qui sont plongés dans des cubes de données ? Ou des claviers dédiés aux comptables et autres collaborateurs qui font un usage intensif des tableurs ?
@Cavazza “Donc très clairement sur ce cas d’usage particulier je suis incapable de prendre position.”
Oh, ne vous embêtez pas, vu le potentiel de concrétisation des concepts présentés, ce ne sera pas un problème avant une demi-décade (et encore).
“A quand une souris dédiée à la navigation multi-dimensionnelle pour les analystes financiers qui sont plongés dans des cubes de données ?”
Les analystes financiers refusent de se séparer de leurs interfaces obsolètes parce qu’elles paraissent “pro” :
http://uxmag.com/design/the-impossible-bloomberg-makeover
Un détail ? Certes, mais c’est pour signifier qu’il y a loin de la coupe aux lèvres.
@Greg R. “si clairement ces nouvelles interfaces démontrent leurs capacités à augmenter les performances de leurs utilisateurs, alors pour moi il ne fait aucun doute que dans un avenir pas si lointain elle feront aussi parties intégrante de nombreux métiers.”
Si seulement. Je ne suis pas sûr que la plupart des utilisateurs visent la performance, peut-être plutôt le confort ? Ca expliquerait la résistance au changement, genre ” 7 ? Autant rester sur mon XP”. Ou le retard initial du Net en France parce que les gens étaient à l’aise avec le Minitel.
Dans le même ordre d’idée que le gesture cube il y a aussi le cubtile http://www.cubtile.com/ et plus impressionnant encore en rajoutant de la réalité augmentée l’holocubtile : http://www.immersion.fr/index.php?option=com_content&view=article&id=90%3Amars-10-rad-lholocubtile&catid=24%3Aarticle&Itemid=18&lang=fr
Interfaces naturelles je dis oui pour toutes les raisons exposées ; par contre, fonctionnant à l’énergie solaire (ou renouvelable) encore plus OUI.
Merci pour ce tour d’horizon actuel
Concernant tes questions finales sur l’application de ces interfaces naturelles à la navigation web, c’est peut-être dans les systèmes de cartographies collaboratifs de type Pearltrees que cela pourrait s’appliquer ?
Mais il faudrait qu’ils puissent s’imposer par rapport aux modes de recherche adoptés actuellement
Et quid des interfaces naturelles sur la TV ?
@ Dalton > Très juste, nous pourrions envisager une caméra au-dessus de la TV qui serve à changer les chaines. C’est un peu maigre… ou alors partir sur une télécommande 2.0 de type iPad où il serait possible de parcourir le catalogue de chaines (gratuites et payantes), l’offre VOD, les contenus additionnels…
Merci pour l’article. Je suis assez convaincu d’un usage pro dans un futur proche. Ne peut on pas considérer que la médecine utilise déjà ce type d’interface?
Un autre article intéressant sur le sujet : http://www.designetrecherche.org/?p=186
Remarquable article. Merci!
Bien sûr, on pense immédiatement au ludique.
Mais ne peut-on pas également imaginer ce que deviennent les interactions entre 2 individus , par exemple un acheteur et un vendeur “pro” avec ce type d’interface?
Pour que ça marche, il faudra disposer de données “conversationnelles” stables, aujourd’hui le parent pauvre dans beaucoup de secteurs.Il faudra également disposer de modèles comportementaux.
Des chantiers considérables…des expertises nouvelles, à consommer sans tarder, et sans modération.
Merci pour l’article. Même si pour l’instant ces interfaces sont ludiques, d’ici quelques années elles devraient envahir notre quotidien.
Ce que je ne comprend pas c’est que depuis le temps que le tactile grand publique existe, comment se fait-il qu’aucun constructeur n’ait sorti de tablette remplaçant clavier-souris? On est toujours dans le choix: terminal high-tech (type Apple) VS “old” PC de bureau. Or, s’il semble bien que nous aurons du mal à nous passer d’écrans verticaux (sous la déclinaison que l’on souhaite: matériel ou projeté), le remplacement du clavier (c’est à dire de l’écriture) peut tout à fait commencer à se virtualiser sans changer radicalement les habitudes. De même que les Bureaux d’OS n’ont finalement aucunement changé depuis le Macintosh malgré la pléthore de concepts et prototypes que nous découvront chaque année dans les R&D des industriels et dans les bureaux du MIT.
Une interface naturelle pour faire de la baston sur NATAL je vois, pour peindre sur tablette (ce que font déjà les graphiques) également. La souris se remplacerait facilement par l’invention d’interfaces plus logiques. Pour ce qui est de l’écriture en revanche, hormis un stylet (qui obligerait à réapprendre à écrire manuscrit) qui transformerait le texte en type… je ne vois pas.
Merci pour l’article, je trouve les interfaces sympas cependant attention on pourrait vite se lasser.
“Autant je suis convaincu du potentiel ludique et intuitif de ce type d’interfaces, autant je ne pense pas que l’on puisse améliorer la productivité d’un utilisateur de clavier / souris dans un contexte pro”
Oui c’est justement parce que vous ne pensez pas que vous dites ce que vous dites, pour ne pas dire que vous êtes ce que vous êtes. Jeune homme, questionnez-vous quelques centièmes de seconde si toutefois vous le pouvez : vous aboutirez au constat que les acteurs de la révolution industrielle ne s’imaginaient pas non plus travailler avec des systèmes informatiques.. mais la bonne nouvelle c’est que l’évolution du progrès technique ne s’est heureusement pas arrêtée à l’étendue de leur esprit minimaliste.
Plus concrètement, le web est déjà suffisamment pollué, ne l”encombrez pas davantage avec de vaines allégations dénuées de profondeur. Rassurez-vous, contrairement à vous, il y a des gens qui pensent, eux !
A bon entendeur.