1 processus et paramètres de conception de la sonification sylvain daudé et laurence nigay...
TRANSCRIPT
1
Processus et paramètres de conception de la sonification
Sylvain Daudé et Laurence Nigay
Laboratoire CLIPS-IMAG (Grenoble)Equipe IIHM
2
Objectif
Sonification = traduction de données
dans le domaine sonore
Cadre de conception d’une interface sonore
3
Constat et motivations
Cadre de conception existant pour la visualisation de données inexistant pour la sonification de données
Double intérêt d’un tel cadre classification des interfaces sonores
existantes aide au concepteur d’interfaces sonores
4
Processus de visualisation[Chi 1998]
DonnéesBienvenue à
IHM2002Bienvenue à
IHM2002Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002Bienvenue à
IHM2002Bienvenue à
IHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Ensemble dedocuments
Abstraction analytique :Vue sur les données
Transformation des données
Liste dedocuments
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Abstraction de visualisation :Espace visuel abstrait
Transformation de visualisation
Vue :Vue sur l’espace
Transformation de réalisation visuelle
5
Processus de visualisation[Chi 1998]
Données
Abstraction analytique :Vue sur les données
Transformation des données
Liste dedocuments
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Abstraction de visualisation :Espace visuel abstrait
Transformation de visualisation
Espace 2D
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Vue :Vue sur l’espace
Transformation de réalisation visuelle
6
Processus de visualisation[Chi 1998]
Données
Abstraction analytique :Vue sur les données
Transformation des données
Abstraction de visualisation :Espace visuel abstrait
Transformation de visualisation
Espace 2D
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Bienvenue àIHM2002
Vue :Vue sur l’espace
Transformation de réalisation visuelle
Vue déformée
7
Processus de sonification
Données Image
Abstraction analytique :Vue sur les données
Transformation des données
Suite de colonnesde pixels
Rendu sonore
Transformation de diffusion
Transformation de sonification
Abstraction de sonification :Espace sonore abstrait
. . .
8
. . .
Processus de sonification
Données
Abstraction analytique :Vue sur les données
Transformation des données
Rendu sonore
Transformation de diffusion
Transformation de sonificationNiveau de gris = intensitéOrdonnée = hauteur
Abstraction de sonification :Espace sonore abstrait
Séquence de sons. . .
9
Processus de sonification
Données
Abstraction analytique :Vue sur les données
Transformation des données
Rendu sonore
Transformation de diffusion
Transformation de sonification
Abstraction de sonification :Espace sonore abstrait
Séquence de sons. . .
10
Transformation des données
Commun avec la visualisation caractéristiques connues des
données (structure, granularité)
Dépendant de la sémantique des données de la tâche de l’utilisateur final ex : AROMA
Données
Abstraction analytique :Vue sur les données
Abstraction de sonification :Espace sonore abstrait
Rendu sonore
Transformation des données
Transformation de sonification
Transformation de diffusion
11
Transformation de sonification :l’espace sonore abstrait
Données
Abstraction analytique :Vue sur les données
Abstraction de sonification :Espace sonore abstrait
Rendu sonore
Transformation des données
Transformation de sonification
Transformation de diffusion
Espace sonore abstrait : espace euclidien centré sur
l’auditeur si non spatialisé alors espace
sonore abstrait = 1 point
Traduction d’une donnée dans cet espace par : une durée un ensemble de traits
acoustiques variant dans cette durée
position, hauteur, timbre, intensité ...
12
Transformation de sonification :correspondance donnée - traits acoustiques
Synthèsede parole
Earcons
Transfert = grincement
E-mail = bipNon analogique
Analogique
Non arbitraire Arbitraire
Choix des traits acoustiques correspondance arbitraire ? traits acoustiques
analogiques ?
Cas particulier : son spatialisé
Position = trait acoustique indépendant Spatialisation analogique ?
Analogie par rapport à un
phénomène :• Sonore : cathédrale• Non-sonore : Diary in the Sky
RDV à 15h
13
Transformation de sonification :représentation d’un ensemble de données
Son stéréo
Colonne de pixels
Diary in the Sky
Synthèsede paroleMême endroit
Endroits
Simultané Alterné
Deux niveaux de sonification 1 donnée 1 son 1 ensemble de données 1 ensemble de sons
Coordination des sons de l’ensemble de sons dans le temps dans l’espace
14
Transformation de diffusion :dispositif physique
Dispositif physique : précision sonore degré de spatialité répartition géométrique des
haut-parleurs degré de partage liberté de déplacement degré d’immersion
Ex : SoundbeamNeckset
Données
Abstraction analytique :Vue sur les données
Abstraction de sonification :Espace sonore abstrait
Rendu sonore
Transformation des données
Transformation de sonification
Transformation de diffusion
15
Contributions a. classification
Exemple : la « catégorie des earcons » :
sonneries de téléphones portablesdonnées = séquence de sons pré-enregistrés :
transformation de sonification triviale
earcons et earcons parallèlesdonnées de nature non sonoreprésentations temporelles des données différentes
16
Contributions b. aide à la conception
Identification d’étapes de conception
Identification de paramètres de conception pour chaque étape :
aide à la conception
fondements pour des heuristiques de conceptionex : suivi d ’activités d ’arrière plan
17
Perspectives
Sonifications sensitives au contexte
Sonifications simultanées conflit entre les sonifications
ex : deux espaces sonores sonifiés simultanément
18
Merci de votre attention ...
… Avez-vous des questions ?