Phelma Formation 2022

Multimédia, Multimodalité, Multisensorialité Indexation Multimédia - 5PMSMMM3

  • Volumes horaires

    • CM 4.0
    • Projet 0
    • TD 4.0
    • Stage 0
    • TP 12.0

    Crédits ECTS

    Crédits ECTS 2.0

Objectif(s)

L'objectif est de dresser un panorama de sciences et technologies qui adressent la sensor-motricité humaine dans ses propriétés multisensorielles, y compris en recherche.

Indexation multimédia :
Comprendre les principes de la recherche d'information multimédia : les enjeux économiques, l'état actuel de la technologie (partie signal et partie sémantique, fusion de données, apprentissage statistique) et les challenges scientifiques pour le futur.

Interactions multisensorielles et multimodales :
Comprendre l’état de l’art des systèmes temps réels d’interaction multisensorielle (geste, dont interaction haptique à retour d’effort, son, retours visuels, réalités virtuelles)

Contact Nicolas CASTAGNE

Contenu(s)

Indexation multimédia :

  • Cours d’introduction: problèmes, applications, information retrieval, niveau signal et niveau sémantique,
  • Séances en format « conférence » par des spécialistes du domaine, en Music Information Retrieval et en indexation de paramètres de synthèse sonore

Interactions multisensorielles et multimodales :

  • Cours d’introduction: signaux d’interaction sensoriel : gestuels (en particulier dans le cas sensible des interactions à retour d’effort) sonores et visuels ; transduction ; contraintes temps réel en fonction de l’interaction visée ; exemples de mises en œuvre.
  • TP sur stations multisensorielles ou multimodales, sur les plateformes CIME, VISION-R et Art-Science-Technologie. Réalisation d’interactions multisensorielles temps réel à retour d’effort, par simulation physique. Analyses des technologies matérielles, logicielles et de simulation de chaque station (reverse engineering). Analyse des domaines d’usages et des enjeux scientifiques et technologiques.


Prérequis

Connaissances de base en traitement du signal, en analyse des données (image, son).
Connaissances de base en transduction, traitement du signal temps réel, système d’exploitation, programmation concurrente en C.

Contrôle des connaissances

En présentiel
SESSION NORMALE :
Types d'évaluation : DS + rapport

*Évaluation rattrapable :*
Type d'évaluation : DS
Durée : 2h
Documents autorisés : oui
Documents interdits : aucun
Matériels spécifiques autorisés : aucun
Calculatrice : non
Possible en distanciel : oui si nécessaire
Commentaire :

Type d'évaluation : rapport de fin de module
Possible en distanciel : oui si nécessaire
Commentaire :

SESSION DE RATTRAPAGE :
Types d'évaluation : DS + rapport

*Évaluation rattrapable :*
Type d'évaluation : DS
Durée : 2h
Documents autorisés : oui
Documents interdits : aucun
Matériels spécifiques autorisés : aucun
Calculatrice : non
Possible en distanciel : oui si nécessaire
Commentaire :

Type d'évaluation : rapport de fin de module
Possible en distanciel : oui si nécessaire
Commentaire :

-------------------------------------------------------------------------

En distanciel
SESSION NORMALE :
Types d'évaluation : DS sur machine + rapport

*Évaluation rattrapable :*
Type d'évaluation : DS sur machine
Durée : 2h
Documents autorisés : oui
Documents interdits : aucun
Matériels spécifiques autorisés : aucun
Calculatrice : non
Possible en distanciel : oui si nécessaire
Commentaire :

Type d'évaluation : rapport de fin de module
Possible en distanciel : oui si nécessaire
Commentaire :

SESSION DE RATTRAPAGE :
Types d'évaluation : DS + rapport

*Évaluation rattrapable :*
Type d'évaluation : DS
Durée : 2h
Documents autorisés : oui
Documents interdits : aucun
Matériels spécifiques autorisés : aucun
Calculatrice : non
Possible en distanciel : oui si nécessaire
Commentaire :

Type d'évaluation : rapport de fin de module
Possible en distanciel : oui si nécessaire
Commentaire :



Examen écrit Session1 : DS1
Examen écrit Session 2 : DS2

Rapport de fin de module Session 1 : RAP1
Rapport de fin de module Session 2 : RAP2

1 et 2 après type = session
N1 = Note finale session 1
N2 = Note finale session 2

En présentiel :
N1 = 50% DS1 + 50%RAP1
N2 = 50% DS2 + 50%RAP2

En distanciel :
N1 = 50% DS1 + 50%RAP1
N2 = 50% DS2 + 50%RAP2

Commentaire :
En session 2, il est possible de conserver sa note DS1 ou RAP1.
En fonction des 2 notes obtenues en session 1, sera demandé en session : soit DS, soit RAP, soit DS et RAP

Informations complémentaires

Cursus ingénieur->Filière SICOM->Semestre 9
Cursus ingénieur->Double-Diplômes Ingénieur/Master->Semestre 9