Connaissez vous une technologie qui , en application, vous permettrait :

• De gérer votre album photo en manipulant vos images sans les toucher ( sélection vignette, agrandissement , rotation..) ?
• De dessiner et de faire des projets de calligraphie en tenant un pinceau virtuel ?

Cette technologie qui, petit à petit, est en train de se retrouver aussi dans l’univers de l’électroménager de demain, comme avec les tables à induction ou vous pourrez gérer leurs mises en route et l’augmentation ou la diminution de la température avec un mouvement de la main a distance.

Cette technologie de noaliasolutions.com se nomme NEMOPSYS et elle permet pour l’heure l’application « Display Toucheless 3D Gesture Recognition »

Comment ça marche ?

C’est la technique du capacitif projeté, identique à celle des smartphone et tablettes haut de gamme. Mais la difference principale se situe au niveau de l’aquisition et du traitement du signal ( breveté ). La performance est telle que cela permet d’augmenter la perception bien au dela de la surface.

Le prototype montré en vidéo et en photos est une solution hybride qui associe un écran tactile low cost resistif et le systeme capacitif en periphérie de l’écran.
L’ensemble est associé a un logiciel sophistiqué, qui réalise l’interpolation des coordonnées 3D ( xyz) et l’interprétation gestuelle dans l’espace.

Le logiciel en question, fontionne aussi bien sous windows que sous linux. Actuellement, celui ci est porté sur la snowball ( ST Ericsson) et sur Panda Board ( Texas Instruments)

Cette techno sera présentée au salon Mobile World Congress 2012 à Barcelone et au salon du CES Las Vegas 2013

La prochaine démo ? elle sera basé sur le hacking d’une nintendo 3ds. Nemopsys sera associé avec l’ écran stereoscopique (3D), qui donnera la possibilité de sculpter n’importe quel forme dans l’espace, ou de jouer avec un animal virtuel en respectant la correspondance spatiale. (On carresse reellement la representation 3d de l’animal )

• pCubee : Un cube interactif 3D avec 5 écrans LCD
• Mogees : Une interface de reconnaissance de mouvement avec un micro
• Multitoe : Un écran multitouch contrôlé par les pieds
• Une table de Poker numérique et tactile contrôlée par téléphones mobiles

Contrairement à d’autre concept d’écran, comme Winscape ,  qui permette de créer une vision artificielle dans une pièce sans fenêtre, ce concept permet d’utiliser l’existant en l’agrémentant d’information.

Samsung Transparent Windows Smart est donc un écran LCD transparent qui dispose d’un contraste de 500:1 et d’une résolution de 1680×1050. Mais la nouveauté vient au niveau de la dalle LCD qui dispose d’une transparence accrue permettant à la seule lumière du jour de remplacer le rétro-éclairage.

Elle permet donc de pouvoir afficher des informations à la demande tout en conservant sa vision sur l’extérieur. On peut y afficher des widgets et lancer des applications pour visualiser ses réseaux sociaux, la météo, réaliser des présentations, bref tous ce que l’on pourrait faire avec un ordinateur ou un smartphone.

Je rajoute une mention spéciale pour le mode rideau virtuel qui permet d’occulter sa fenêtre comme on le ferait avec un store vénitien… fabuleux, voilà la fenêtre du futur.

Voici la vidéo de présentation de Samsung Transparent Windows Smart :

Et une autre démonstration :

• pCubee : Un cube interactif 3D avec 5 écrans LCD
• Samsung présente un portable avec un écran LCD transparent.
• Multitoe : Un écran multitouch contrôlé par les pieds
• Vidéo : Ibar, le comptoir interactif tactile long de 10m.

Là où ce système devient intéressant, c’est que l’utilisateur peut interagir directement à l’hologramme en le touchant. Contrairement aux autres systèmes déjà en cours de développement, aucune paroi ne se trouve entre l’utilisateur et l’hologramme permettant ainsi une symbiose totale.

Vermeer est conçu sur un système d’illusion optique grâce à un astucieux système de projection sur deux miroirs paraboliques et l’hologramme semble sortir de cette parabole, comme flottant dans les airs.

La seconde technique intéressante dans cette réalisation est une projection interne d’images dans 192 directions différentes sur les doubles miroirs en coupelle permettant ainsi une projection d’image holographique sur 360° à 15 images par secondes.

Il est ainsi possible de positionner sa main directement à l’intérieur de la projection et l’on peut capter cette intersection à l’aide d’un système kinect ou une simple caméra infrarouge placée à l’intérieur du système de projection.

En effet, le système de double miroir parabolique fonctionne dans les deux sens, il peut aussi projeter et observer. De cette manière l’utilisateur peut interagir physiquement avec un objet virtuel.

Voici a vidéo de présentation de Vermeer de Microsoft Research Cambridge :

• Une immersion dans le cyberespace de « Ghost in the Shell : S.A.C. » avec un Kinect
• pCubee : Un cube interactif 3D avec 5 écrans LCD
• RoboThespian RT3 : Un robot humanoïde intéractif qui joue les acteurs.
• Un simulateur de conduite Mercedes-Benz vraiment énorme.

Twine est relié à Internet par le biais d’une connexion Wifi interne et dispose de base de deux capteurs intégrés, un accéléromètre et un capteur de température. Cela permet de réaliser des actions sans utiliser le fer à souder, idéal pour hacker votre environnement sans rien connaître en électronique.

Une interface simple

Tout est configurable à travers une interface web. Rien de plus simple pour l’utiliser, il suffit d’accéder à cette interface et programmer des actions comme par exemple la suivante :

Dès que le capteur accéléromètre est frappé et qu’il est plus de 7:00 du matin, envoyer un tweet sur avec « Quelqu’un frappe à la porte à telle heure ».

Il suffit ensuite de positionner Twine derrière la porte pour recevoir un tweet automatiquement dès que quelqu’un frappera à votre porte.

Des capteurs

Comme je vous l’ai signalé Twine dispose de deux capteurs internes de base, mais il est également possible d’en rajouter grâce à un connecteur Jack prévu à cet effet sur le coté, on peut ainsi déjà y brancher un capteur d’humidité, un simple contact ou encore une extension pour rajouter des entrées/sorties analogiques ou numériques, et tous cela toujours sans aucune soudure.

De plus dès que vous connectez un appareil que Twine connaît, il se rajoute instantanément sur l’interface Web afin que vous puissiez l’utiliser directement.

De nouveaux capteurs sont en cours de développement et d’intégration comme un capteur de pression, un lecteur RFID ou capteur de mesure de courant électrique.

Des actions

Pour les sorties, actuellement Twine est capable grâce à sa connexion Internet de vous envoyer un message sur Twitter ou par mail, mais il peut aussi réaliser une requête HTTP pour une application dédiée ou simplement envoyer un SMS.

Le design

Le design est sobre et élégant, réaliser en résine transparente bleue et avec un aspect strié sur le dessus afin de pouvoir interagir physiquement dessus. Au niveau de la taille, il mesure 2.5″x2.5″ soit 6.35cmx6.35cm, ce qui relativement assez petit.

L’alimentation

Twine est alimenté à l’aide deux batteries AAA intégré dans le boîtier, mais il est également possible de l’alimenter via USB, ou pour simplement le recharger. En autonomie, il serait capable de fonctionner plusieurs mois sur les batteries.

Présentation

Voici la vidéo de présentation de Twine :

Il faut noter que Twine est en pré-commande au prix de 99$ et qu’il a fait l’objet d’un lancement sur KickStarter où il a récupéré près de 556541$ donc assez prometteur pour la suite.

Pour conclure, on peut dire que Twine est un petit objet high-tech qui va permettre aux néophytes de relier leur environnement à Internet sans forcement se prendre la tête, une sorte de kit pour hacker le monde accessible à tous.

• Un robot de téléprésence en symbiose avec votre corps.
• Le ballon de baudruche sera t’il l’interface du futur de la télé-présence ?
• pCubee : Un cube interactif 3D avec 5 écrans LCD
• Skinput : Utiliser son bras comme une interface tactile

Cette interface Mogess, développée par Bruno Zamborlin,  permet de détecter simplement le moindre des mouvements effectués avec les doigts ou un autre objet sur un support. Ce système utilise un simple microphone positionné sur le support à analyser.

Les sons ainsi captés sont analysés et en fonctions de leurs caractéristiques physiques, il est ainsi possible de déduire quelle action précise a été effectuée. Nous ne disposons pas d’informations concrètes sur l’algorithme utilisé, mais il doit être assez complexe.

Pour rendre ce système plus matériel, une correspondance entre chaque action provoque l’émission d’un son, permettant ainsi de transformer n’importe quel objet en instrument de musique numérique avec l’aide de Max/MSP et MuBu.

• NEMOPSYS : Un écran à reconnaissance de mouvement 3D
• Un robot de téléprésence en symbiose avec votre corps.
• Le ballon de baudruche sera t’il l’interface du futur de la télé-présence ?
• Megalizer, la chaussure d’Adidas Sneaker Mega qui permet de créer de la musique

Ce projet n’est pas moindre, il permet de naviguer sur un écran géant en haute définition sur Google Earth, ou du moins sur 48 Google Earth synchronisés avec Liquid Galaxy et affichés sur 48 écrans LCD Planar de 55 pouces.

L’ensemble est géré par 17 ordinateurs et 4 pupitres de commandes tactiles multi-points, cela permet une navigation aisée et intuitive.

Ce système va permettre de naviguer sur une cartographie précise et aussi de visualiser près de 1300 projets pour Paris Metropole 2020.

L’ouverture au public est prévu pour le 14 décembre 2011 au Pavillon de l’Arsenal

Voici une vidéo du making-of de la Maquette numérique.

• Samsung réinvente la fenêtre avec son écran tactile transparent
• Anticipation : Le futur des écrans pour les années à venir
• Comment la publicité numérique peut changer notre modèle de consommation ?
• pCubee : Un cube interactif 3D avec 5 écrans LCD

A l’Université de Technologie de Toyohashi au Japon, Dzmitry Tsetserukou a conçu ce robot de téléprésence avec une notion d’échange de donnée dans les deux sens. La téléprésence étant le fait d’être à deux endroits simultanément, il est également nécessaire de pouvoir ressentir son environnement, que ce soit dans la façon de donner un ordre de direction ou dans la manière de détecter un obstacle.

Dans ce cas, l’opérateur dispose d’une ceinture abdominale disposant de capteurs indiquant la direction à suivre lorsqu’il penche d’un coté. Le robot lui, sonde son environnement à l’aide de lasers, et indique la proximité d’un obstacle en faisant vibrer un des actionneurs situé également sur la ceinture.

Cet ensemble est couplé à un système de vision déportée par caméra et lunette LCD et cela permet de réaliser un nouveau mode d’immersion de l’univers du robot de téléprésence pour l’opérateur.

Voici une vidéo de présentation :

• Twine : Comment relier son environnement à internet très simplement…
• Mogees : Une interface de reconnaissance de mouvement avec un micro
• Découverte : Une peau transparente synthétique très souple et surtout sensitive
• Quadshot : Un nouveau drone télécommandé entre avion et hélicoptère

Samsung a combiné tous ses axes de recherches dans les écrans du futur dans cette vidéo, comme cet ordinateur portable avec l’écran transparent ou encore ses écrans AMOLED souples et flexibles.

Au niveau design, on retrouve donc une tendance une transparence et souple, avec une forte croissance de la réalité augmenté, à la fois visuelle et auditive grâce à la reconnaissance vocale.

Faudra juste qu’ils m’expliquent où va être l’électronique et le concept de vision 3D, sinon vivement le futur…

• Kinetic : le Smartphone flexible selon Nokia
• Samsung : Test de solidité des écrans OLED souples.
• Samsung présente un portable avec un écran LCD transparent.
• Une table de Poker numérique et tactile contrôlée par téléphones mobiles

Le projet HeartWave a été développé par une équipe de 3 personnes : Engin Ayaz, Tak Cheung et Doug Kanter.

Le concept est assez simple, de part et d’autre de la table, on retrouve une série de deux capteurs permettant de récupérer les informations du rythme cardiaque de deux personnes. Ces informations sont alors traitées électroniquement et pilote des électro-aimants qui actionne deux palettes réalisant des vagues sous la forme d’ondes parcourant le liquide.

Voici une vidéo de HeartWave en fonctionnement.

• Une incroyable machine qui réalise des formes dans l’eau avec des vagues
• NEMOPSYS : Un écran à reconnaissance de mouvement 3D
• Twine : Comment relier son environnement à internet très simplement…
• Mogees : Une interface de reconnaissance de mouvement avec un micro

Bien souvent, pour comprendre le comportement de l’autre, il est nécessaire de se mettre un peu à sa place et de voir une nouvelle vision du problème. C’est un peu le cas qu’essaye de solutionner eyeSwap en permettant d’inter-changer la vision de deux individus.

Chacun des deux participants dispose d’un casque avec une vision numérique stéréoscopique correspondant à se que filme l’autre casque avec ses deux caméras. Ensemble, les deux sujets doivent réaliser des tâches plus ou moins complexe.

Cette expérience montre que sans une collaboration étroite, il est impossible de réaliser des tâches et même mieux eyeSwap permet de développer cette coopération humaine renforçant ainsi l’esprit d’équipe. En effet, cela permet de stimuler la communication et la coordination.

Voici une vidéo montrant le workshop de eyeSwap initié par  Timothy Scaffidi.

• Tobii EyeAsteroids : Le premier jeu d’Arcade contrôlé par les yeux
• Anticipation IRL : Une vision de ce que pourrait être les jeux vidéos dans le futur.
• EyeBorg : Un homme s’emplante une caméra dans l’oeil pour devenir le premier cyborg
• Elfoid : Un concept de téléphone mobile de télé-présence en forme d’humanoïde

Le système Gyroscanfield est élaboré par la société Luxondes et permet en quelque sorte de visualiser l’invisible.

En effet l’objet à analyser est placé au centre d’un cercle en rotation, ce cercle contient plusieurs cartes électroniques radio capable de réceptionner et mesurer l’intensité des ondes électromagnétiques. La valeur en chaque point est également affichée sous forme d’une couleur à l’aide d’une LED RGB.

Le cercle étant en rotation et avec le principe de persistance rétinienne (POV), il est alors possible de voir une représentation en 3D de l’intensité des ondes électromagnétiques.

Mais ce système est également là pour réaliser des mesures, et chaque carte radio transmet également l’information numérique de la valeur de l’intensité de l’onde électromagnétique en chaque point. Cette information est facilement traitable à l’aide d’une tablette pour une visualisation en temps réel, et l’on peut ainsi naviguer dans les résultats et les exploiter.

Le système d’antenne étant amovible, il est également facile de remplacer les 16 modules pour les adapter en fonction de l’analyse de compatibilité électromagnétique (CEM) que l’on souhaite effectuer.

Voici une vidéo de présentation de ce système :

 Merci à Jean RIOULT pour l’info

• Video Coat : Le manteau qui fait office de télévision à LED
• DIY : Un écran tubulaire POV à 64 LED RGB
• True 3D : Un réel système de restitution 3D holographique
• Kilobot : Le petit robot vibrant qui travaille en groupe

Les chercheurs de l’IRMM, le Laboratoire d’Informatique de Robotique et de Microélectronique de Montpellier viennent de mettre au point un robot capable de contrôler le bras d’un être humain.

Le robot utilise pour cela deux séries de deux électrodes placées sur le bras, permettant ainsi de piloter les muscles humains avec des impulsions électriques.

Le bras se transforme ainsi comme un bras robotisé à 1 degré de liberté (DOF).

Cette recherche permet de réaliser une meilleure interaction entre la machine et l’humain, cela pourrait avoir de réelles applications dans le domaine d’assistance aux personnes handicapées en coordonnant des mouvements avec ceux de la machine.

Cette recherche s’inscrit d’ailleurs dans le projet Assist, un robot développé pour assisté les personnes quadriplégique.

Voici une vidéo de démonstration :

• Le dernier exosquelette de Raytheon Sarcos réalisé avec une base de Ditch Witch
• Asterisk : Un robot insecte omni-directionnel vraiment impressionnant
• Un robot de téléprésence en symbiose avec votre corps.
• PetMan : Le robot anthropomorphe de Boston Dynamics

Le prototype Nokia nous offre un contrôle du téléphone total, notamment son affichage, l’écran peut être plié dans les deux plans verticaux et horizontaux – avec flexion et de torsion de mouvements contrôlant l’interface.

Si vous penchez l’écran vers vous, il agit comme une fonction de sélection, ou de zoomer sur des photos que vous visualisez.

En mode Musique, vous pouvez naviguer, jouer et faire une pause avec l’interface tactile.

Nous avons rarement vu un écran de 4 pouces offrir de telles fonctionnalités.

Nokia ne pouvait pas confirmer la technologie d’écran utilisé.

Serait-ce un écran AMOLED souple? Juger par vous-même.

• Une table de Poker numérique et tactile contrôlée par téléphones mobiles
• Une vision de ce que pourrait apporter les écran flexible transparent AMOLED dans le futur
• Elfoid : Un concept de téléphone mobile de télé-présence en forme d’humanoïde
• Les prochaines cartes SIM vont elles intégrer la technologie NFC ?

Ce système est intéressant avec le Tobii EyeAsteroids c’ il permet de définir un nouveau type de contrôleur de jeu pas encore exploité.

Ce qu’il faut savoir c’est que la société Tobii est spécialisé dans l’intégration de la technologie Eye Tracking, et cette application permet de mettre en avant c’est compétence.

En effet la borne d’arcade reste une borne d’arcade standard avec un coeur PC mais avec l’adjonction d’un capteur Tobii IS-1 Eye Tracker que l’on peut voir en photo dessous :

Le jeu d’arcade reste simple en lui même, mis à part que vous contrôlez l’intégralité avec vos yeux. Vous devez rester au maximum sur la planète Terre, tout en détruisant un maximum d’astéroïdes à l’aide d’un laser piloté par vos yeux, je passe les détails des bonus et power-up classiques.

Voici une vidéo de présentation de la borne d’arcade Tobii EyeAsteroids où l’on peut apprendre pleins de choses  sur le bénéfice du contrôle de jeu vidéo type « Eye Tracking » :

• Il est possible de jouer en tenant à la fois une pizza dans la main droite et une canette de bière dans la main gauche.
• On peut jouer à deux en fermant un oeil chacun, mais c’est tendu…
• On se marre beaucoup chez Tobii Technologies, ils recrutent…

• EyeBorg : Un homme s’emplante une caméra dans l’oeil pour devenir le premier cyborg
• Un caméra robotisée ultra rapide qui imite les mouvements de l’oeil humain
• Un robot de téléprésence en symbiose avec votre corps.
• eyeSwap : Développer sa coopération en changeant de point de vue.

Cependant, sa durée de vol se limite à 1m30s ce qui est très peu. Pourtant ce projet peu être perfectionner et aller plus loin.

Le but principal de cette équipe allemande est d’augmenter la durée de vol à 20-30min puis de le commercialiser. La base de cette hélicoptère est un ballon en silicone très solide qui l’ors de l’atterrissage de la machine absorbe toute l’énergie du choc entre le sol et le multicoptère. La structure de base est constituée de barre de métal en fer qui sont tous relié par des câbles qui maintiennent celle-ci.

Cet hélicoptère est très sécuritaire et il est quasiment impossible que le pilote ait un accident. Ce fut le 31 octobre 2011 que cet exploit a été réalisé. C’est l premier multicoptère électrique au monde qui a volé avec un homme à son bord

Voici une vidéo de présentation de l’E-Volo :

• DIY : Un chinois fabrique une soucoupe volante avec 8 moteurs de motos
• Cubelets : un kit de construction de robots modulaires avec des cubes magnétiques
• Quadshot : Un nouveau drone télécommandé entre avion et hélicoptère
• DIY : Fabriquer un animatronic basique avec un bouche articulée

Le Chal est donc une paire de chaussures instrumentée à l’aide d’un Arduino LilyPad. Une connexion bluetooth est établie avec un téléphone portable afin de récupérer les informations de guidage issu du GPS.

Les informations de guidage sont alors transmise de façon haptique au pied à l’aide de 4 vibreurs placés dessous.

De plus, un capteur de proximité est implanté sur le devant de la chaussure afin de détecter les obstacles dans un rayon de 3m.

• DIY : Un canne pour les malvoyants qui détecte les obstacles par ultrasons
• Skinput : Utiliser son bras comme une interface tactile
• Kinetic : le Smartphone flexible selon Nokia
• Cobra Phone Tag: un périphérique bluetooth pour ne plus perdre ses clés

Le système est assez simple au niveau du fonctionnement, un réseau de nanotube de carbone en ressort est incorporé en ligne et en matrice sur deux couches séparées par une couche de silicium.

Dès que l’on presse un endroit de cette surface, il facile de déduire l’impact en mesurant la capacité entre deux lignes de nanotubes de carbone, la pression rapprochant les deux lignes en seul point. Et il même possible de mesurer la pression exercée toujours grâce à cet effet capacitif.

Les nanotubes de carbones étant relativement très petit et la couche de silicium étant transparente, on obtient ainsi un substrat totalement transparent et très souple de par la nature des nanotubes en ressort et les propriétés du silicium.

Plusieurs applications viennent de suite à l’esprit, dans le domaine robotique, on pourrait recouvrir un robot de cette peau synthétique et il serait doté du touché. On peut également rendre tactile une surface non plane ou modulaire.

On pense aussi au milieu médical, on pourrait implémenter une sensation de toucher sur des prothèses, bref ce système a de l’avenir devant lui…

Voici une vidéo de présentation des prémisses de cette peau synthétique capacitive :

• Skinput : Utiliser son bras comme une interface tactile
• NEMOPSYS : Un écran à reconnaissance de mouvement 3D
• Samsung réinvente la fenêtre avec son écran tactile transparent
• Un robot de téléprésence en symbiose avec votre corps.

Bien souvent, les idées les plus simple sont les meilleures et en voici un exemple bien concret, à l’aide d’un capteur de pression et d’un micro intégré dans un ballon, il est possible de détecter plusieurs actions distinctes comme :

• Une caresse
• Un coup
• Une forte pression

Je serait curieux tout même de savoir quelle action sera associée en télé-présence quand on éclate le ballon…

• Twine : Comment relier son environnement à internet très simplement…
• Mogees : Une interface de reconnaissance de mouvement avec un micro
• Mahru : Le robot humanoïde piloté par télé-opérateur.
• Skinput : Utiliser son bras comme une interface tactile

Cette vidéo met très en avant le contrôleur Sony Playstation Move qui existe déjà, mais rajoute une dimension IRL pour le jeu vidéo à l’aide d’un casque de projection holographique.

Ce système pourrait être bien réel dans les années qui viennent, et peut être verrons nous des bandes de gamers-geek parcourir les rues en tirant contre l’invisible…

Voici la vidéo de la vision de Freddie Wong

• Vidéo : Ce que la Réalité Augmentée va apporter aux jeux vidéos.
• IHM : Le contrôleur du jeu Pong, c’est la pupille de votre oeil
• A quoi pourraient ressembler les jeux de plateaux avec la technologie OLED ?
• eyeSwap : Développer sa coopération en changeant de point de vue.

Pour info, le gant AcceleGlove est doté de 6 accéléromètres, ce qui permet de restituer jusqu’à 18 degrés de liberté (DOF). La société Anthrotronix, qui commercialise ce gant, le vend 649$ avec le SDK pour pouvoir développer vos propres applications. Il faut également noter que si vous souhaitez obtenir la version sans fil (plutôt que USB) de l’AcceleGlove, il faudra rajouter encore 449$.

Cela reste tout de même un produit intéressant comme le montre cette vidéo de démonstration avec le contrôle d’un robot qui peut attraper une balle avec sa pince dorsale.

• L’importance d’une queue pour stabiliser les robots à travers l’étude du lézard.
• Twine : Comment relier son environnement à internet très simplement…
• Un robot de téléprésence en symbiose avec votre corps.
• Découverte : Une peau transparente synthétique très souple et surtout sensitive