Microsoft Research sur les appareils de vision de contrôle tactile

A ce stade, je pense que personne ne rencontre surprise avec appareils à écran tactile (téléphones, tablettes, les guichets automatiques, GPS, etc) ou des dispositifs qui sont activés par des gestes qui sont capturées par une caméra (comme Microsoft Kinect). Il semble que les dispositifs de contrôle tactile, ou par des gestes, est une norme que nous voyons sur plusieurs périphériques. Comme toute technologie a également évolué (résistif pour écrans capacitifs, par exemple) et, bien sûr, continue à travailler sur des projets qui tentent de marquer l'avenir de telles interfaces. Le Centre de recherche de Microsoft, Microsoft Research , a dépensé près de 11 ans à travailler sur des dispositifs tactiles et de réflexion sur leur avenir, afin que, en utilisant une convention sur les interfaces et les interactions, a présenté deux de ses axes de recherche: OmniTouch et PocketTouch .

OmniTouch

OmniTouch est un projet assez coloré qui a été réalisé par Chris Harrison (étudiant au doctorat à l'Université Carnegie Mellon et ancien stagiaire de Microsoft Research), Hrvoje Benko et Andy Wilson (Microsoft Research) et se compose d'un système de l'utilisateur porte et de multi-affichage graphique et l'interaction sur toute surface.

Nous avons voulu prendre les grandes régions qui offrent le monde réel. La surface de la paume d'une main, dans certains cas, plus grand que l'écran d'un smartphone et les tableaux sont beaucoup plus grandes que d'une tablette. Si nous pouvons bâtir sur ces surfaces et de s'adapter à leur taille, pourraient fournir des appareils mobiles avec une énorme capacité à interagir avec les utilisateurs.

Le OmniTouch est construit pour être portés, comme un sac à dos, et se compose d'un laser pico-projecteur et une caméra qui est sensible à la profondeur. L'idée est que la caméra et le projecteur sont calibrés les uns aux autres, simplement en l'utilisant, réglage de l'image, en tout temps à la surface et de nos mouvements:

Cette caméra fonctionne vraiment de la même manière, mais dans une plage de distance Kinect petits. La combinaison de la caméra et le projecteur simplifie les choses parce que la caméra apporte la profondeur et le laser projette une image qui est toujours concentré. Si un mouvement, la caméra détecte et corrige l'image du laser.

Un des détails les plus curieux de ce projet est d'adapter l'image à la surface de projection. Dans une première approximation, l'équipe a défini des motifs fixes (un bras, main, un cahier ou un mur), qui exige que le système apprend à détecter et à classer ces modèles pour projeter l'image de droite. D'autre part, la seconde approche était basée sur l'utilisation d'un pointeur qui définit les limites de la surface à utiliser et d'adapter ainsi l'image.

Nous voulions l'utiliser sur n'importe quelle surface. Si nous permettons à l'utilisateur de définir la zone de travail et le système est capable de s'adapter, nous créons un très flexible et adaptable aux besoins des utilisateurs.

PocketTouch

PocketTouch (Grâce tactile capacitif Entrée-Fabric) est un autre projet de l'équipe de Microsoft Research est également très intéressante car elle développe un capteur capacitif (et multi) qui est monté sur l'arrière d'un smartphone pour permettre à l'utilisateur de manipuler le téléphone sans le regarder dans votre main et de regarder l'écran de télévision. Mettez comme ça, peut-être, semble un peu étrange mais l'idée est assez simple.

Supposons que nous marchons dans la rue et nous avons connecté un périphérique Bluetooth mains libres, si le téléphone sonnait, nous avons pu nous procurer la main dans sa poche, et en faisant certains gestes sur la couverture arrière du terminal, aurait la possibilité de répondre à l'appel ou raccrocher sans enlever le téléphone.

Imaginez le téléphone sonne dans une réunion et il n'était pas silencieux. La chose normale chercheriez-vous dans votre poche, et ordonnent sacases silencieux. Nous voulions faire quelque chose de différent et nous poser une question: pourrait augmenter le pavé tactile pour donner le terminal une large gamme de billets?

Le défi pour les chercheurs est que la position du téléphone est pertinent pour détecter des gestes, c'est à dire qu'il n'est pas le même que le terminal est en verticale que horizontale.

Étant donné que le terminal peut être dans la poche de l'utilisateur n'ont vraiment aucune idée où ils se situent. Nous pourrions utiliser un gyroscope pour détecter l'orientation, mais encore savoir de quel côté l'utilisateur va toucher l'appareil.

Pour résoudre le problème, l'équipe a introduit un geste spécial qui va déverrouiller les commandes et à la fin, ce qu'il fait est de calibrer le dispositif de détection de la position de référence pour interpréter correctement les gestes. Après cela, la prochaine étape est d'identifier ou de reconnaître les caractères gestes écrit sur ce "couvercle touch" en considérant que, étant dans la poche, le pavé tactile sera également ramasser le «bruit».