Read more
Dans une première partie, partant d'une discrimination parole/musique/bruit, la segmentation est abordée. Pour la parole, la segmentation en locuteurs permet d'appréhender leur rôle au sein d'un document et leurs interactions. Concernant la composante musique, elle s'effectue à travers la discrimination monophonique/polyphonique, la détection du chant et du choeur à l'unisson. Afin d'aller au-delà de ces segmentations primaires, les zones de superpositions sont étudiées aussi bien en parole qu'en musique. Enfin l'étude de la composante bruit est initiée par l'analyse des applaudissements, des rires et des sons d'eau. Dans une seconde partie, le couplage avec la vidéo est abordé. Celui-ci permet deux types de segmentation: l'un autour des intervenants, l'autre autour de la similarité. Dans un premier temps, les intervenants sont ainsi détectés et caractérisés afin de structurer les documents audio-vidéo soit en programmes dans le cas d'enregistrements de télévision, soit en activités dans le cas d'enregistrements de la vie quotidienne. Dans un second temps, la similarité autour des documents est étudiée afin de " chapitrer " (structurer) tout type de document en zones homogènes.
About the author
Julien Pinquier a obtenu un doctorat, spécialité Informatique, en 2004. Ce travail concernait l''indexation sonore. Depuis 2005, il est Maître de Conférences à l''Université Paul Sabatier (laboratoire IRIT). Ses objectifs portent sur la combinaison de l''audio et la vidéo pour la structuration automatique de documents audiovisuels.
