 |
Conference papers
Co-factorisation douce en matrices non-négatives. Application au regroupement multimodal de locuteurs
Résumé : Nous présentons ici une nouvelle méthode pour une co-factorisation bi-modale en matrices non-négatives. Cette
méthode est adaptée aux situations où deux modalités sont liées par une même information sous-jacente. Elle permet une
co-factorisation dite douce, qui prend en compte la relation entre les modalités tout en évitant l’hypothèse forte d’un même
facteur en commun. Cette méthode n’impose pas que les données associées à chaque modalité aient la même dimension ou soient
exprimées dans un même espace. La co-factorisation est obtenue par résolution d’un problème d’optimisation, via une méthode
de majoration-minimisation ; puis une application au regroupement multimodal de locuteurs est présentée, où la co-factorisation
douce sert à exploiter la corrélation entre les pistes audio et vidéo dans des débats télévisés.
Mots-clés :
NMF
multimodal
https://hal.telecom-paris.fr/hal-02286798
Contributor : Telecomparis Hal <>
Submitted on : Friday, September 13, 2019 - 4:12:23 PM
Last modification on : Saturday, September 19, 2020 - 12:18:02 PM
Contributor : Telecomparis Hal <>
Submitted on : Friday, September 13, 2019 - 4:12:23 PM
Last modification on : Saturday, September 19, 2020 - 12:18:02 PM