systemes mixtes mobiles et collaboratifs [email protected] [email protected]...
TRANSCRIPT
![Page 1: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/1.jpg)
SYSTEMES MIXTES MOBILES ET
COLLABORATIFS
[email protected] CLIPS-IMAG, équipe IIHM
Grenoble
En partenariat avec France Télécom – Laurence Pasqualettiet l’IRIT, équipe GRIC – Pascal Salembier
![Page 2: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/2.jpg)
2/28
Vers une fusion harmonieuse
![Page 3: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/3.jpg)
3/28
Plan
• Système mixte
• Plate-forme – MAGIC– TROC
• Conclusion
![Page 4: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/4.jpg)
4/28
Système mixte
• Deux "mondes" – Les données physiques– Les données informatiques
• Des tâches mélangeant les deux mondes• Une augmentation : une interaction (ajout
d’information, manipulation) utilisant les entités des deux mondes
• Un système mixte : une ou plusieurs augmentations
![Page 5: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/5.jpg)
5/28
Système mixte mobile
• L’augmentation dépend de la localisation des utilisateurs (où ils sont et ce qui les entoure)
A touring Machine[Feiner 97]
![Page 6: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/6.jpg)
6/28
Système mixte collaboratif
• L’augmentation que perçoit un utilisateur dépend des actions de l’ensemble des utilisateurs.
A Collaborative AR System[Kraut 96]
![Page 7: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/7.jpg)
7/28
Système mixte mobile et collaboratif
• L’augmentation dépend de la localisation des utilisateurs et de leurs actions.
• Deux exemples : – MAGIC– TROC
![Page 8: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/8.jpg)
8/28
Démarche
• Objectif méthodologique :– Espace de conception de systèmes mixtes mobiles et
collaboratifs
• Objectif technologique : – Une plate-forme matérielle et logicielle générique
pour des activités mobiles et collaboratives
![Page 9: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/9.jpg)
9/28
Plate-forme
Camera + Micro
Casque + Ecouteurs
Capteur d’orientation
Stylos
Tablette + Extenseur de port
Réseau sans fils
![Page 10: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/10.jpg)
10/28
Plate-forme
Position de la caméra / de l’utilisateur
Angle de vue à travers le casque
Orientation de la caméra / de l’utilisateur
Un objet non vu
Un objet vu ou capturé
![Page 11: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/11.jpg)
11/28
Plate-forme
![Page 12: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/12.jpg)
12/28
MAGIC : Travail sur le terrain de fouille
• Explorer le site (Mobilité)
• Travailler en groupe sur le site (Collecticiel)
• S’informer auprès d’experts distants (Collecticiel)
• Comparer des objets physiques avec des objets d’une base de données(Augmentation)
• Accéder aux objets enlevés du site(Augmentation)
![Page 13: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/13.jpg)
13/28
MAGIC : vue d’ensemble
• Sur la tablette :– Communication
(forum, mail, etc.)
– Coordination (carte)
– Production (outils d’édition)
• A travers le casque:– Combinaison du
physique avec l’informatique grâce à la passerelle
![Page 14: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/14.jpg)
14/28
Passerelle
![Page 15: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/15.jpg)
15/28
Réalité cliquable
• Manipulation d’une lentille magique
• Interaction sur la tablette
• Capture la zone ainsi définie
![Page 16: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/16.jpg)
16/28
• Un archéologue travaille
• Il trouve un objet• La découverte est retirée
du site
• L’objet est sauvegardé dans une base de données
• Un archéologue approche de où était l’objet
• La découverte est virtuellement disponible
Terrain augmenté
![Page 17: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/17.jpg)
17/28
TROC
• But du jeu : réunir des objets numériques
• Le terrain
• Une liste de quatre objets
• Quatre cubes physiques
• Des formules magiques
![Page 18: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/18.jpg)
18/28
TROC
• But du jeu : réunir des objets numériques
• Le terrain
• Une liste de quatre objets
• Quatre cubes physiques
• Des formules magiques
![Page 19: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/19.jpg)
19/28
TROC
• But du jeu : réunir des objets numériques
• Le terrain
• Une liste de quatre objets
• Quatre cubes physiques
• Des formules magiques
cochonrouge
moucheverte
vachejaune
vachebleue
![Page 20: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/20.jpg)
20/28
• But du jeu : réunir des objets numériques
• Le terrain
• Une liste de quatre objets
• Quatre cubes physiques
• Des formules magiques
TROC
![Page 21: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/21.jpg)
21/28
cochon
scorpion
TROC
• But du jeu : réunir des objets numériques
• Le terrain
• Une liste de quatre objets
• Quatre cubes physiques
• Des formules magiques
![Page 22: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/22.jpg)
22/28
Menu
Formules
Liste
Gestion du piège
Gestion des cubes
HistoriqueCarte
Interface de la tablette tactile
![Page 23: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/23.jpg)
23/28
Temps de jeu
Objet ciblé
Description de l’objet ciblé
Formules actives
Autre objet visible
Niveau d’énergie magique
Œil magiqueMessages
Interface dans le casque
![Page 24: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/24.jpg)
24/28
Terrain augmenté
![Page 25: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/25.jpg)
25/28
Manipulation d’objet numérique : vider un cube
![Page 26: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/26.jpg)
26/28
Réseau Sans fil IR
IR
Serveur
IR
IR
Messages
Sons micros
Images vidéos
Légende
IR : interface réseau
IR IR
Joueur A Joueur B
Superviseur
Architecture d’implémentation
![Page 27: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/27.jpg)
27/28
Magicien d’Oz
• Simulation du positionnement et de la reconnaissance vocale
• Interface :
![Page 28: SYSTEMES MIXTES MOBILES ET COLLABORATIFS Jullien.Bouchet@imag.fr Philippe.Renevier@imag.fr Laurence.Nigay@imag.fr Laboratoire CLIPS-IMAG, équipe IIHM Grenoble](https://reader036.vdocuments.net/reader036/viewer/2022070309/551d9db7497959293b8dbcf4/html5/thumbnails/28.jpg)
28/28
Conclusion
• Expérimentation Utilisateur
• Espace de conception