hiérarchisation des variations pour la génération de gestes expressifs de communication alexis...
TRANSCRIPT
![Page 1: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/1.jpg)
Hiérarchisation des VariationsHiérarchisation des Variations
Pour la Génération de Gestes Expressifs de Communication
Alexis Heloir Loïc Kervajan
Atelier TALS, Conférence TALN - Toulouse 2007
ValoriaUniversité de Bretagne-Sud
DelicUniversité de Provence
![Page 2: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/2.jpg)
Contexte, MotivationContexte, Motivation
• Génération de séquences gestuelles en LSF Au delà de la concaténation lexicale Démarche d’analyse-synthèse Prise en compte de la visée iconique
• Des problématiques qui se rejoignent Modèles linguistiques Modèles de génération de mouvements
![Page 3: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/3.jpg)
Variations dans le mouvementVariations dans le mouvement
• Lié à la notion de “Style” Animation Agents Conversationnels
• Une définition (approche signal) Le style est l’ensemble des perturbations appliqées à
un mouvement de base qui permettent de rendre une animation plus réaliste en prenant en compte les caractéristiques de l’avatar réalisant le mouvement
Du point de vue de l’animation par ordinateur
![Page 4: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/4.jpg)
Niveaux linguistiquesNiveaux linguistiques
• Structurels Propres à la construction du signe sématiquement autonome
• Contextuels Contraintes syntaxiques
Flexion morphologiques Accords phonologiques
• Relatifs au locuteur (propre ou transfert) Transferts et phénomènes associés Emotion du moment Traits de caratère
![Page 5: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/5.jpg)
Niveaux linguistiquesNiveaux linguistiques
• Structurels Propres à la construction du signe sématiquement autonome
• Contextuels Contraintes syntaxiques
Flexion morphologiques Accords phonologiques
• Relatifs au locuteur (propre ou transfert) Transferts et phénomènes associés Emotion du moment Traits de caratère
![Page 6: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/6.jpg)
Niveaux linguistiquesNiveaux linguistiques
Structurels• Creation lexicale
CONTENT vs MAL_AU_CŒUR
![Page 7: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/7.jpg)
Niveaux linguistiquesNiveaux linguistiques
CONTENT MAL-AU-CŒUR
![Page 8: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/8.jpg)
Niveaux linguistiquesNiveaux linguistiques
Structurels• Creation lexicale
CONTENT vs MAL_AU_COEUR
• Agglutination modale LOUP vs LOUP_AFFREUX
![Page 9: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/9.jpg)
Niveaux linguistiquesNiveaux linguistiques
LOUP LOUP-AFREUX
![Page 10: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/10.jpg)
Niveaux linguistiquesNiveaux linguistiques
• Structurels Propres à la construction du signe sématiquement autonome
• Contextuels Contraintes syntaxiques
Flexion morphologiques Accords phonologiques
• Relatifs au locuteur (propre ou transfert) Transferts et phénomènes associés Emotion du moment Traits de caratère
![Page 11: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/11.jpg)
Niveaux linguistiquesNiveaux linguistiques
Contextuels• Flexion morphologique
VOITURE AVANCER[mph] MOTO AVANCER[mpv] HOMME AVANCER[d]
Avancer[ ] {d, mph, mpv, ...}
voiture {mph, c, 1, ...}
Moto {mpv, 1, ...}
Homme {d, n, v, i, ...}
![Page 12: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/12.jpg)
Niveaux linguistiquesNiveaux linguistiques
Contextuels• Accord phonologique
AVOCAT PTR[a] JUGE PTR[b] [b]TELEPHONER[a]• AVOCAT[a] JUGE[b] [b]TELEPHONER[a]
MARSEILLE PTR [a] TOULOUSE PTR [b] [a]AVION[b]• MARSEILLE[a] TOULOUSE[b] [a]AVION[b]
PLANTE PTR [a] [a]ARROSER[a]• PLANTE[a] [a]ARROSER[a]
![Page 13: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/13.jpg)
Niveaux linguistiquesNiveaux linguistiques
• Structurelspropres à la construction du signe sématiquement autonome
• Contextuels Contraintes syntaxiques
Flexion morphologiques Accords phonologiques
• Relatifs au locuteur (propre ou transfert) Transferts et phénomènes associés Emotion du moment Traits de caratère
![Page 14: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/14.jpg)
Niveaux linguistiquesNiveaux linguistiques
Relatifs au locuteurTransferts et phénomènes associés
« Contagion » modale(ex du loup)
Transferts personnels (prise de rôle = prise de traits de
caractère)
Emotion du momentSerein, en colère...
Traits de caractère Personnalité dynamique, apatique...
![Page 15: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/15.jpg)
Niveaux linguistiquesNiveaux linguistiques
« contagion modale » Transfert personnel
![Page 16: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/16.jpg)
Une organisation en stratesUne organisation en strates
En strates
Selon leur portée• lexème, • groupe syntaxique, • phrase gestuelle, • réplique, • énoncé,• permanente
D’ordre linguistique ou non linguistique
• Organisation des modificateurs
![Page 17: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/17.jpg)
Quelques exemplesQuelques exemples
Cause Exemple Modificateur Effet
Attributs permanents
Culture introvertie
Amplitude des gestes
Regard
Moindre
Moins investi
Tempérament expansif
Amplitude des gestes
Rythme
Etendue
Plus marqué
Attributs
temporaires
Enthousiasme Amplitude des gestes Moindre
FatigueAmplitude des gestes
Vitesse d’execution
Moindre
Ralentie
![Page 18: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/18.jpg)
Quelques exemplesQuelques exemples
Cause Exemple Modificateur Effet
Morpho-Syntaxe
ModifieursAmplitude des gestes
Expressions faciales
Cf examples
Afflico
PlurielAmplitude des gestes
Répétition
Selon Racine
(signe standard)
Prosodie
QuestionSourcils
Rythme
Relevésgeste suspendu
Fin de phrase RythmeProlongation de fin de phrase
![Page 19: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/19.jpg)
En contexte d’enonciationEn contexte d’enonciation
• Notion de contexte Possède des attributs relatifs
au contexte d’enonciation• Cadre de l’enonciation• But de l’enonciation• Environnement
Les attributs du contexte ont une influence sur l’enonciation
• Cadre formel ou informel• Situation d’urgence
Un contexte est référencé par un référent locatif ou temporel.
![Page 20: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/20.jpg)
En contexte d’enonciationEn contexte d’enonciation
• Notion d’entité Agrège un ou x signes standards
• Qui agrègent des modifieurs et flexions Caractérisée par des descripteurs Caractérisée par des proformes
![Page 21: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/21.jpg)
En contexte d’enonciationEn contexte d’enonciation
• Les locuteurs sont des référents Ils composent des attributs
• Temporaires (Cf. tableau)• Permanent (Cf. Tableau)
Exemple : • le Loup a un attribut permanent : il est
“affreux”
![Page 22: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/22.jpg)
Un exemple en synthèse :Un exemple en synthèse :
• Création d’un outil de génération de séquences gestuelles
• Gui interactive
• Création hors ligne
• Multicanaux (Sauf visage, :o( )
• Validation de certains modificateurs et de leur portée Création manuelle Validation perceptives
![Page 23: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/23.jpg)
En résuméEn résumé
• Un travail issu d’une collaboration interdisciplinaire Considérations issues de la linguistiques Considérations issues de l’animation et des ECAs
• Modèle hybrides d’organisation des modificateurs Hiérarchisation des modificateurs Selon leur portée temporelle
• Modèle informatique de gestion du contexte d’ennonciation Centré entité/référent (locuteurs compris) Reprise des modificateurs dans l’organisation du modèle
![Page 24: Hiérarchisation des Variations Pour la Génération de Gestes Expressifs de Communication Alexis Heloir Loïc Kervajan Atelier TALS, Conférence TALN - Toulouse](https://reader035.vdocuments.net/reader035/viewer/2022070308/551d9d7f497959293b8b7680/html5/thumbnails/24.jpg)
Merci de votre attentionMerci de votre attention
• Questions/Réponses