Réalité Augmentée – Augmented Reality

Catégorie 1 : passer par un spécialiste

Dans cette catégorie, vous souhaitez utiliser le concept de RA (d’un point de vue marketing par exemple) pour promouvoir un produit ou un service de manière innovante mais vers un public fortement ciblé. Vous avez un produit à vendre, ou vous appartenez à une entreprise qui cherche une solution marketing actuelle ? Vous n’avez donc pas grand chose à faire excepté contacter les quelques entreprises de la liste (non exhaustive) qui apparait dans le bandeau gauche de ce blog. En apportant un cahier des charges précis, ces entreprises saurons répondre à vos besoins les plus inaccessibles en matière d’utilisation de technologies innovantes comme la réalité virtuelle, augmentée, mixte, les interface tangibles et bien d’autres !

Catégorie 2 : utiliser un moteur de RA

Vous voulez développer vous même une (ou plusieurs) application(s) de RA mais en vous appuyant sur des plateformes déjà existantes. On ne va pas réinventer la roue à chaque fois quand même ! et vous avez bien raison, mais cela ne se fera pas sans vous assoir entre la chaise et le clavier pour y passer quelques heures. Des connaissances en informatiques ne sont pas seulement demandées, mais simplement nécessaires.

Layar ?

Vous pouvez utiliser la plateforme offerte par Layar (http://www.layar.com/). Layar, c’est la contraction de Layer (couche) et de AR (augmented reality). La philosophie est de créer vos propres couches. Cette couche est tout simplement une collection de points d’intérêts géo-référencés (POI : Points of Interest). Vous avez tout le loisir de choisir les POI que vous voulez (vos restaurants préférés, les salles de musculation avec sauna, les entreprises de consulting, les lieux de tous vos voyages précédents ou de ceux que vous voudriez faire, …). Une fois cette collection de POI définie, la couche est simplement sauvegardée sur le serveur de Layar. Ainsi, depuis votre téléphone portable (iPhone, Androïd et bientôt SymbianOS) vous pouvez sélectionner votre layer et augmenter votre réalité. L’objet ici n’est pas d’expliquer comment ça marche, mais Layar permet de vous abstraire de toute la technologie permettant de positionner les POI sur les images que vous obtenez grâce au capteur vidéo de votre téléphone en utilisant les capteurs de ce dernier (GPS, accéléromètre, magnétomètre, …). Vous n’y pensez même pas, Layer s’occupe de tout. De plus, Layar vous propose aussi son propre mécanisme d’affichage des POI. Textes, logos, images 2D ou modèles 3D vous sont proposés par Layar pour afficher vos POI.

Un inconvénient, s’il en est, est que c’est une solution qui, comme tout, est basée sur une autre brique. En effet, Layar n’est disponible que si votre mobile dispose d’une connexion internet (3G, 4G, Wifi, EDGE, …). D’autre part, on a vite fait le tour de l’intérêt de ce genre d’application et on est encore en droit de se poser la question de son utilisabilité (mais ce n’est pas l’objet ici). L’avantage, et non des moindre, est que cette plateforme est gratuite, l’inconvénient s’il en est, c’est que les applications sont destinées à des cibles mobiles uniquement (téléphones portables).

Pour aller plus loin, si vous estimez que cette plateforme pourra répondre à vos besoins, vous pouvez suivre ce lien (en anglais) pour avoir les détails techniques de la création de votre propre premier layer : Lien

Nous  préparons une démonstration de Layar dans les jours à venir. A suivre…

Junaio ?

Junaio est la plateforme de création d’applications basées sur la réalité augmentée proposée par Metaio. Elle est disponible sur iPhone et Androïd, et ressemble, dans la philosophie, étrangement à Layar. La cible est donc les plateformes mobiles. La grande différence, s’il en est, c’est qu’au lieu d’appeler « layer » une collection de points d’intérêts, Junaio préfère appeler cela une « chanel ». Si vous avez compris le fonctionnement de Layar (je l’espère), vous avez alors compris celui de Junaio.

3DVIA Studio ?

C’est GRATUIT ! Et oui, une fois n’est pas coutume, profitez du téléchargement gratuit de cette plateforme proposée par Dassault Système sur le site http://www.3dvia.com/studio/. Si le fait d’être gratuit est un peu machiavélique (car cela incite à utiliser cette plateforme pour vous fidéliser), on ne va quand même pas se plaindre de la gratuité ! Mais bon, ne nous enflammons pas, 3DVIA Studio est un super moteur 3D permettant de réaliser de magnifiques animations, de les partager sur un site communautaire, … mais pas vraiment ciblé pour faire de la RA. Rien n’est prévu pour l’instant dans cette plateforme pour offrir un cadre permettant de recaler les images d’animations avec la réalité d’un flux vidéo, d’un écran ou d’une lunette de RA. Donc, tout ceci, combiné avec un peu d’ARToolKit que DS est en train d’intégrer à leur plateforme 3DVIA Scene sera, sans nul doute, un très bon client pour faire de la RA dont l’exemple le plus connu est la boîte de céréale Nestlé :

StudierStube ?

StudierStube est un projet de réalité augmentée permettant de réaliser sa propre application. C’est une plateforme qui regroupe plusieurs logiciels (OpenTracker, OpenVideo, …) et permet d’utiliser un langage commun (XML) pour paramétrer tout cela. Ce projet est très bien documenté et s’il parait un peu déroutant au début, il devient très facile à utiliser. Il est basé sur ARToolKitPlus (la version évoluée de ARToolKit, développé pour l’occasion en C++, présenté plus bas). La limite sera votre imagination et le temps que vous aurez à y consacrer !

Catégorie 3 : Les mains dans le camboui !

La troisiemme catégorie est destinée aux plus courageux, qui veulent tout « faire » de A à Z. Tout est un bien grand mot, car la base est dans l’utilisation d’ARToolKit.

ARToolKit

Et bien c’est la base (je ne l’ai pas déjà dit ?). Est-il vraiment utile de le présenter ? bon, rapidement, il permet à votre petit PC, en utilisant une webcam, de « détecter » ce qu’on appelle un « patern ». C’est un marqueur « fiducial », qui existe sous plusieurs formes. Le concept est globalement, par analyse d’image, de récupérer la position et l’orientation (3 paramètres à chaque fois) de ce logo dans l’image de la caméra puis d’utiliser ces paramètres pour faire coïncider la pose (position et orientation) de la caméra virtuelle (c’est en fait le point de vue qui est utilisé pour dessiner les objets virtuels) avec la pose de la caméra réelle (la webcam).

S’il vous fallait encore des preuves que la réalité augmentée devient de plus en plus « grand public », en voilà une de plus. Le célèbre site web Futura Sciences lui consacre un dossier complet ! En toute modestie, cette présentation est un peu en dessous de la notre mais elle vaut quand même le détour ! Sans rire, ce site est une référence dans la vulgarisation scientifique et high tech et, à titre personnel, un des rares que je suis depuis des années. C’est une belle preuve de la démocratisation du concept ! Merci Futura Sciences !

Dossier > Vers la Réalité Augmentée via kwout

Dans ce blog, nous vous parlons constamment de la réalité augmentée, de ses usages et des ses évolutions. Pour une fois, laissons les autres le faire

Ce reportage (trouvé par Olivier) revient sur l’utilisation actuelle de cette technologie. L’intervention de Total Immersion en particulier permet de mieux comprendre les avantages (marketing et communication) qu’elle apporte. Pour les esprits chagrins, je signale que, oui, nous parlons beaucoup de Total Immersion dans ce blog, même si nous ne touchons rien de leur part (si c’est par une ouverture ça…)

Bonjour,

Je voudrais remercier Grégory et Olivier pour avoir l’amabilité d’accepter mes modestes contributions. Je n’ai pas d’ambition particulière autre que de partager mes quelques connaissances dans le but égoïste de les améliorer

Je voulais réagir au billet de Grégory : La conduite augmentée … de quoi ? Tu prêches un converti Grégory dans ce billet

Je vous propose donc, en supplément, une petite analyse sans prétention aucune des potentialités de la RA.

poursuivre la lecture…

Vous devez savoir (pour ceux qui sont déjà allé voir la page Wikipedia de la réalité virtuelle) que le nom lui-même de « réalité virtuelle » est décrié. En effet, il est issu d’une traduction depuis l’anglais plutôt hasardeuse de « virtual reality ». La notion de « virtual reality » en anglais n’est pas tant celle d’une réalité virtuelle en français que celle d’une quasi-réalité. Et le concept même de réalité virtuelle laisse de côté tout le caractère humain d’une telle expérience comme si la « réalité virtuelle » pouvait exister intrinsèquement. Il faut savoir que c’est bien l’homme qui expérimente une application de réalité virtuelle. Le nom de RV laisse de côté quelque chose : le fait qu’elle ne peut exister en soi, mais bien parce que l’homme est là pour l’expérimenter. Et le rapport avec la RA me diriez-vous ? Il arrive.

La réalité augmentée est, d’après Philippe Fuchs [1] (un des pères de la Réalité virtuelle) ceci :
« La réalité augmentée regroupe l’ensemble des techniques permettant d’associer un monde réel avec un monde virtuel, spécialement en utilisant l’intégration d’Images Réelles (IR) avec des Entités Virtuelles (EV) : images de synthèse, objets virtuels, textes, symboles, schémas, graphiques, etc. D’autres types d’association entre mondes réels et virtuels sont possibles par le son ou par le retour d’effort« .

On y voit deux notions principales : celles d’un monde réel et d’un monde virtuel. Savez vous qu’un film est un considéré comme une représentation d’un monde virtuel ?

« Films are one of the many means of representing virtual worlds : they tell us stories, imagined reality like any other pictorial support ; they create imaginary worlds… » (Costa Anabela, 2010). Ceci fait donc de la télévision (ou du cinéma) une technologie permettant de faire le lien (d’associer) le monde réel (vous, votre salon) et le monde virtuel (le film). Ceci fait donc de la TV une pleine et entière application de réalité augmentée ! poursuivre la lecture…

Notions de base :

La réalité augmentée est la superposition du virtuel au réel. Les scènes réelles sont capturées pour une caméra et elles sont mélangées à des images virtuelles.
Elle offre la possibilité d’être immergé dans un environnement virtuel avec des perceptions aussi bien tactiles, auditives et pourquoi pas olfactives. ET bien sûr en temps réel.

La technique :

La première difficulté pour faire de la Réalité Augmentée est de localiser le réel dans le virtuel avec le même point de vue.

-       Le plus simple est de placer dans la scène réelle des marqueurs qui permettent de calculer les coordonnées 3D à partir de 3 points spécifiques reconnus par le système.  Cette technologie peut être utilisé avec une simple webcam ou un téléphone portable. Le marqueur est une forme relativement simple.

-       Le deuxième niveau est une combinaison entre le marqueur et de la géolocalisation. Cette méthode est de plus en plus fréquente, par exemple l’application MétroParis permettant de localiser et guider vers la station de métro la proche. De telles ajoutent des informations supplémentaires sur scène filmée par la caméra en fonction de la position déterminée par le GPS et la direction calculée par le gyroscope d’un appareil mobile.

-       Pour finir les programmes de RA reconnaissent des formes, des lieux ou des visages. A ce stade nous parlons de vision augmentée permettant de se déplacer dans un environnement réel sans ajouter de marqueur.

Photo : University of Washington

La deuxième difficulté est l’affichage. Pour ce qui est des smartphones ou les ordinateurs aucun problème, ils sont équipés d’écran. Mais pour des applications plus techniques, comme la formation, le post-développement, la maintenance ou la téléassistance, l’utilisateur doit disposer d’un cube immersif, un casque ou des lunettes équipées de caméra. Les deux premières solutions sont très lourdes à mettre en œuvre. Actuellement de nombreuses sociétés commencent à proposer des équipements relativement légers et discrets. Le summum est l’utilisation de lentilles de contact équipées de nanotechnologies devraient permettre d’afficher les images directement devant les yeux, se superposant à l’environnement réel.

Vous connaissez certainement les explications de l’équipe Common Craft « In plain English » où tous les concept centraux du web sont expliqués avec des bouts de papier.

L’équipe nous propose depuis aujourd’hui une illustration de la réalité augmentée que vous pourrez trouver sur la page suivante :

Augmented Reality – Explained by Common Craft – Common Craft – Our Product is Explanation via kwout

Et si, comme moi, vous êtes fan du travail de cette équipe, n’oubliez pas de visiter leur site pour savoir en particulier comment vous débarrasser des zombis !

La réalité augmentée (RA) est la réponse de l’Internet aux questions décisionnelles que nous nous posons dans la vie de tous les jours. En effet, plus simple à mettre en œuvre que les univers virtuels et plus compréhensible par la majorité des gens, la RA va nous permettre de rendre la réalité de tous les jours plus riche. Combinées aux richesses énormes de l’Internet, ses possibilités sont sans limites !

Technophiles et encore (et toujours) émerveillés par les usages de la RA, nous concentrons dans ce blog les résultats de notre veille dans ce domaine et aussi nos réflexions. Vous trouverez sur nos blogs généralistes (ici et ici) plus de renseignements sur nos autres centres d’intérets .

Nous allons tenter maintenant de vous expliquer simplement et en vulgarisant au maximum le concept de la Réalité augmentée

Introduction :

Parler de réalité augmentée (Augmented reality) ce n’est pas parler du futur. Il existe déjà de très nombreuses applications et exemples. Définition de futura-sciences. com : Entre la réalité et le monde virtuel, se trouve le domaine de la  » réalité augmentée  » : celui de l’image vidéo telle qu’elle est perçue par le cerveau à laquelle viennent se superposer des informations graphiques et textuelles.

Le concept de réalité augmentée (R.A.) n’est pas récent. En effet Morton Heilig a crée en 1962 ‘Sensorama’un casque équipé de capteur permettant de simulait une balade à moto dans New York. Mais ce genre d’application est de la réalité virtuelle, c’est-à-dire la possibilité de visiter des univers virtuels.

Notions de base :

La réalité augmentée est la superposition du virtuel au réel. Les scènes réelles sont capturées pour une caméra et elles sont mélangées à des images virtuelles.
Elle offre la possibilité d’être immergé dans un environnement virtuel avec des perceptions aussi bien tactiles, auditives et pourquoi pas olfactives. ET bien sûr en temps réel.

La technique :

La première difficulté pour faire de la Réalité Augmentée est de localiser le réel dans le virtuel avec le même point de vue. Le plus simple est de placer dans la scène réelle des marqueurs qui permettent de calculer les coordonnées 3D à partir de 3 points spécifiques reconnus par le système.

Mais actuellement les sociétés spécialisées dans la R.A. cherchent à supprimer ces marqueurs par exemple en utilisant les doigts de la main ou la reconnaissance faciale.

L’utilisation de la réalité augmentée :

La réalité augmentée permet d’ajouter des informations au monde réel en superposant des images virtuelles par exemple la flèche indiquant la distance entre le tireur d’une pénalité au rugby et les poteaux. Il existe de nombres utilisations de la R.A., voici quelques exemples :

les jeux vidéo :

Il n’a pas été simple à choisir un exemple tellement la R.A. envahie les jeux vidéo.
Et voici un autre exemple annoncé pour l’été 2010.Le concept étant de supprimer toutes les commandes et manettes de jeux en les remplaçant par de la reconnaissances faciales, de mouvement et vocales.

Le cinéma :

le marketing :

De nombreuses marque automobile propose ce nouveau système de promotion, le marketing professionnel et également concerné comme nous pouvons le voir sur cette vidéo demo de proposes par l’un des leader mondiaux : ‘total immersion’, une société française crée en 2000 pour le groupe Alstom.

la mode :

Le concept de cette application est de proposer aux futures clientes potentielles d’essayer virtuellement des vêtements. Actuellement, l’application n’ajuste pas encore les vêtements à la morphologie du modèle. Il est possible d’essayer plusieurs des tee-shirts ou des jupes , de changer leur couleur en cliquant avec sa main sur des icônes virtuelles grâce à l’analyse des mouvements.

cette vidéo montre comment une cliente reçoit des conseils maquillages:

ce n’est qu’un début…

Les réseaux sociaux :

Cet exemple, nous montre un tee shirt taggé et lorsqu’il passe devant une caméra (webcam ou smartphone) le profil d’utilisateur apparaît :

Et bien sur la reconnaissance des visages et à faire le lien avec son identité numérique.

les industries :

L’exemple suivant nous montre une application de maintenance et entretien d’une BMW :

Mais il y a beaucoup d’autres applications comme la maintenance de machine avec une assistance à l’aide d’affichage d’information directement sur le support de projection ou par assistance par téléconférence.

La lecture :

Il existe des magasines avec certaine pages qui permettent d’affiché de la R.A. mais aussi des encyclopédie enrichies de R.A.

A venir…

Mais de plus en plus il existe de solution pour le grand public par exemple ce jeux sur une boite de céréales :

Un ordinateur, une webcam et une connexion haut débit vous permette de vous plonger dans des mondes virtuels, ou de choisir la taille de votre colis :

Bien sur, les applications de R.A. vont envahir nos portables, je vous montre cet exemple pour Androïd qui permet de regarder un paysage à l’aide de la caméra de votre téléphone. A chaque icône correspond des informations proposées par d’autre utilisateur. Bien sur vous pourrez en ajouter vous-même. :

Pour Finir

Pour vous remercier d’avoir lu cet article jusqu’à la fin, je vous propose de tester vous-même la Réalité Augmentée :

• Imprimer ce fichier pdf sur feuille blanche format A4
• Se rendre à cette adresse : ici (il faut autoriser la webcam)
• Placer le marqueur (le symbole) devant votre webcam…

Le Publigeekaire

Et oui, je vous présente ici encore un article régroupant des applications de RA ! Mais le blog « Le Publigeekaire » a fait une belle sélection d’applications concrètes et actuelle. A travers les articles « 10 applications concrètes de la Réalité Augmentée » et « 15 autres applications de la Réalité Augmentée » on fait un beau voyage dans l’utilisation de cette technique.

Je suis en particulier très impressionné la faculté simple de la RA de transformer les livres et autres supports « passifs » en vrai objets multimedia. Jettez un oeil sur l’exemple de l’encyclopédie pour comprendre. Pour les applications concrètes immédiates, les exemples de la poste américaine et de la boutique de vêtements en ligne sont bluffantes, non ?

Bref un vrai voyage plaisir sur un blog que je suis content d’avoir découvert !

Tom's Guide

Pour ceux qui se pose des questions sur la réalité augmentée, le Tom’s Guide nous propose un petit dossier simple sur ces principales déclinaisons et présentant la société Total Immersion. Rien de nouveau évidement mais une intéressante synthèse pour entre dans le concept.