Nicolas OBIN is associate professor at the Faculty of Science and Engineering of Sorbonne University and a research scientist in the sound analysis and synthesis team from the Science and Technology of Music and Sound laboratory (Ircam, CNRS, Sorbonne University). I hold a PhD thesis in computer science and telecommunications on the modeling of speech prosody and speech style for text-to-speech synthesis (2011), for which I obtained the prize for the best PhD thesis from La Fondation Des Treilles in 2011. Fascinated by sound, waves, vibrations and by the theory of information and communication, I have developed over the years a keen interest in the study and modeling behavior and communication between humans, animals and robots. My research activities cover audio signal processing, artificial intelligence, and statistical modeling of sound signals with a specialization in speech processing and human communication. My main area of research is structured generative modeling of complex human productions such as speech, singing and music with various applications in speech synthesis and transformation, multimodal virtual agent animation and humanoid robotics, and deep fakes. Lately I initiated activities in the fields of bioacoustics and sound ecology. I am the author of 50+ publications in international conferences or journals and I participate in numerous academic and industrial collaborative research projects. I am a member of the GdR TAL and the French Voice Lab initiative for the promotion of the French language and digital sovereignty in voice technologies.
I am responsible at Sorbonne University for the Master's degree in Engineering of Intelligent Systems (ISI) in which I teach digital audio signal processing, deep learning, and biometrics. I am co-responsible for Deep Learning by Practice professional training delivered by Sorbonne University, I regularly give conferences and interviews for prestigious French schools, institutions, and medias (Collège de France, Ecole Normale Supérieure, Science Po, CNIL, Les Napoléons, Le Monde, Télérama, TF1, France Culture, France 5, Arte). I am the founder of DeepVoice, Paris (since 2020) the annual Parisian event on voice technologies and artificial intelligence, SophIA (2021): the student association of Sorbonne University for Artificial Intelligence in collaboration with the Sorbonne Center for Artificial Intelligence (SCAI), and Fast-Forward (2022) the informal and experimental meetings of science and technology and sound design in cinema.
As part of my artistic commitment to Ircam, I a actively promoting digital science and technology for arts, culture, and heritage, and collaborated with renowned musicians and artists, such as: Eric Rohmer, Philippe Parreno, Roman Polansky, Leos Carrax, George Aperghis, and Alexander Schubert.
My full CV is available below in pdf format
[ 2022 ] Anima, par l'artiste Alexander Schubert, Festival Manifeste, Centre-Pompidou.
[ 2021 ] Annette, film du réalisateur Léos Carax, avec le sound designer Erwan Kerzanet
[ 2019 ] Lullaby experience, par le compositeur Pascal Dusapin, Frankfurter Positionen festival (Frankfurt) et Théâtre 104 (Paris).
[ 2018 ] Les guerriers de l'ombre, documentaire réalisé par Frédéric Schoendoerffer, Canal+. Anonymisation réaliste de voix d'agents secrets.
[ 2014-2015 ] Pourquoi j'ai pas mangé mon père, film de Jamel Debbouze. Recréation de la voix de Louis de Funès par la technologie de conversion d'identité de la voix
[ 2014-2015 ] Juger Pétain, films documentaires de Richard Saada, Planète, France 5. Recréation de la voix du maréchal Pétain et de protagonistes de son procès par la technologie de conversion d'identité de la voix
[ 2013 ] Aliados, opéra composé par Sebastian Rivas, Ircam Manifeste festival.
[ 2012-2013 ] Marilyn, film de Philippe Parreno, Fondation Beyeler (2012) et Palais de Tokyo (2013) avec le sound designer Nicolas Becker. Recréation de la voix de Marilyn Monroe par la technologie de conversion d'identité de la voix
[ 2011 ] Luna Park, théâtre musical composé par Georges Aperghis, festival Agora (Paris).
[ 2010 ] Escort Girl, première partie du cycle de documentaires "L'Europe judiciaire" réalisé par Olivier Ballande, Maha Productions, France Télévision. Anonymisation réaliste de voix de protagonistes impliqués dans des enquêtes judiciaires.
[ 2009 ] Hypermusic Prologue, opéra du compositeur Hector Parra, festival Agora (Paris).
Here is a selection of my main public interventions
Conferences
La manipulation dans le discours politique, Gouverner, Les Napoléons, Val d'Isère, 14 janvier 2022
Deep fakes audio : entre manipulation et créativité, Voice Tech, Paris, 23-24 Novembre 2020
Trucages, deepfake, clonage vocal : en 2020, ne croyez plus vos yeux et vos oreilles. Futurapolis, Toulouse, 16 novembre 2019. Avec Vincent Nozick, maître de conférences à l’Université Paris-Est Marne la Vallée, et Guerric Poncet, journaliste au Point
Voix artificielle et sound design : concepts, pratiques, enjeux (avec N. Misdariis, de l'équipe Perception et Design Sonore, Ircam), HyperVoix : enjeux de conception des interfaces conversationnelles, Journée d'étude organisée par la Fing, Le Square, Paris, 15 avril 2019.
AI and creativity: can AI be creative?, Changing IP in Changing Europe, Trilateral Seminar of the French, German and Polish Groups of AIPPI, Paris, France, 05 avril 2019.
La voix à l’ère du numérique et de l'IA, CNIL, Paris, France, 15 février 2019
La voix et l'IA, Parcours Innovateur ignorant, Sciences Po, Paris, France, 19 octobre 2018.
Marilyn: histoire de la recréation de la voix d'une icône, Ecole Normale Supérieure, Paris-Saclay, France, 9 octobre 2018
Les voix du numérique pour le design sonore et la création artistique, Festival Vino Voce, Saint-Emilion, France, 8-10 septembre 2017.
Vox ex-machina. La voix et ses doubles numériques, Collège de France, Paris, France, 6 juin 2017.
Broadcast medias
Les prouesses des assistants vocaux. Dossier Intelligence Artificielle. Ca m'intéresse, février 2019.
Comment fabrique-t-on une voix de synthèse ? La Croix, 22 Janvier 2019.
La voix sacrée, dossier voix et IA, Télérama, 16 Janvier 2019.
Les chanteurs disparus ressuscités par la high-tech, L'express, 21 Décembre 2018.
Des voix de synthèse presque humaines, Pour la Science, Décembre 2016, numéro 470, p. 54-62.
TV and documentaries
Deep fake : le vrai du faux d'une technologie révolutionnaire, le meilleur des mondes, France Culture, 13 mai 2022
A l'Ircam, la salle la plus silencieuse au monde dévoile ses secrets, journal télévisé, 20h, TF1, 9 septembre 2016.
Donner de la Voix, FutureMag, Arte, 5 décembre 2015.
Petite Histoire de la Synthèse Vocale, France Culture, 12 Août 2014.
On a Volé la Voix d'André Dussolier, Le Monde, 7 Juillet 2014.
Deep Voice, Paris est l’événement parisien dédié à la voix et à l’intelligence artificielle dont l’objectif est de réunir expertises scientifique et technique, innovation et entrepreneuriat. Des ateliers techniques - “hands-on” - seront proposés aux participants pour développer leurs compétences dans les domaines du traitement de la parole et du langage naturel. Des moments de rencontres et de réseautage en fin de journée faciliteront les rencontres et l’échange entre les participants en toute décontraction. Deep Voice est un événement co-organisé par l’Ircam, Sorbonne Université, et SCAI dans le cadre du festival ManiFeste 2022.
Recréation de la voix de Dalida avec de l'intelligence artificielle pour la nouvelle émission de Thierry Ardisson "L'Hôtel du Temps"
Le Meilleur des Mondes, France Culture, 13 Mai 2022 Animé par François Saltiel
Comment la simulation des émotions va-t-elle modifier notre rapport affectif aux machines et notre immersion dans un monde social artificiel ? Une table-ronde organisée par le Sorbonne Center for Artificial Intelligence (SCAI) et l'Ircam, animée par Nicolas Obin, chercheur à l'Ircam.
Les Deepfakes c'est un peu la nouvelle génération des Fake News mais en encore moins détectables et en plus dangereux ! Retrouvez à Futurapolis, Nicolas Obin, chercheur à l'Ircam, pour une conférence exceptionnelle autour de ce sujet, et de ses conséquences sur l'usurpation possible de VOTRE identité.
Présentation au Collège de France, 6 juin 2017
Le Monde, 7 juillet 2014
January 2018
- December 2021
ANR, Programme Société de l'information et de la communication (DS07)
Voice design for the creatives industries
Monday 15 April 2019
- Le Square
Voix artificielle et sound design : concepts, pratiques, enjeux Nicolas Obin, Nicolas Misdariis — Ircam
December 2005
- September 2008
Creation of Expressive Voices: Multimedia Applications
November 2011
- October 2014
Voice Processing for Video game Production
January 2008
- June 2012
ANR, programme SHS
A Prosodic Reference Corpus of Spoken French
September 2015
- September 2016
Convergence de Sorbonne Universités, Appel à projet Emergence 2014
Robot à l'écoute
January 2014
- December 2017
ANR, programme Blanc
Real-time controlled digital singing