researchJobsReal-time modification of social signals in augmented reality using diffusion models
: Modification en temps réel des signaux sociaux en réalité augmentée à l'aide de modèles de diffusion — Machine-translated title
From the ad
Description of the post
Subject of Thesis
The smart augmented reality goggles (ARs) mainstream will increasingly allow the AI to change the user's perception of the real world. This raises a question that is still largely unexplored: can a user's perception of social signals — especially facial expressions — be deliberately altered in real time? Social interactions are based on these signals: individuals constantly interpret the emotional states of their interlocutors to deduce their intentions, anticipate their reactions and orient their own behavior. This thesis examines how these signals, as perceived by a user of RA glasses, can be deliberately and convincingly modified in real time using broadcast models.
Your Working Environment
Dr. Sandor, the thesis director, leads the ARAI team (Enhanced Reality – Artificial Intelligence) in the HCI department of the Interdisciplinary Laboratory of Digital Sciences (LISN, UMR 9015) of the Université Paris-Saclay/CNRS, which he co-founded with Dr. Nguyen in 2024. His recent research on video prediction and real-time modification of facial expressions using diffusion models is at the heart of this thesis.
Dr. Nguyen, co-director of thesis, is the scientific coordinator of NeuroCoRe and co-directs this doctoral project with Dr. Sandor. His expertise in expansive reality (XR) collaborative — remotely and face-to-face — as well as in hybrid immersive platforms is essential for multi-user aspects and related to the user experience of the thesis.
The thesis is part of the NeuroCoRe consortium (PEPR eNSEMBLE): extensive collaborative reality and IA generative (LISN), neurosciences and decision sciences (CRNL), as well as computer vision, automatic learning and psychiatry of borderline disorders among adolescents (Centre Borelli). The student benefits from this interdisciplinary environment, a shared experimental infrastructure and access to high-performance GPU computing at the IDDRIS (Jean-Zay). LISN is a key player in the French PEPR eNSEMBLE and CONTINUUM projects dedicated to the future of collaboration; this thesis offers a strong synergy with the latter.
Constraints and risks
n/a
Remuneration and benefits
Remuneration
2300,00 € monthly
Annual leave and TWU
44 days
Practice and compensation of TT
TT practice and compensation
Transport
Support at 75% cost and sustainable mobility package up to 300€
About the offer
Supply Reference UMR9015-CHRSAN-005 Section(s) CN / Research Area Computer science: signals, images, languages, automatic, robotics, interactions, integrated hardware-software systemsAbout CNRS
The CNRS is a major player in fundamental research on a global scale. The CNRS is the only French organization active in all scientific fields. His unique position as a multi-specialist allows him to associate the different disciplines in order to face the most important challenges of the contemporary world, in connection with the actors of change.
The CNRS
Research occupations
Machine translation (OPUS-MT) — the original text is authoritative
Show the original advertisement
Description du Poste
Sujet De Thèse
Les lunettes intelligentes de réalité augmentée (RA) grand public permettront de plus en plus à l’IA de modifier la perception qu’a l’utilisateur du monde réel. Cela soulève une question encore largement inexplorée : la perception qu’a un utilisateur des signaux sociaux — en particulier des expressions faciales — peut-elle être délibérément modifiée en temps réel ? Les interactions sociales reposent sur ces signaux : les individus interprètent en permanence les états émotionnels de leurs interlocuteurs pour en déduire leurs intentions, anticiper leurs réactions et orienter leur propre comportement. Cette thèse étudie comment ces signaux, tels qu’ils sont perçus par un utilisateur de lunettes de RA, peuvent être modifiés de manière délibérée et convaincante en temps réel à l’aide de modèles de diffusion.
Votre Environnement de Travail
Le Dr Sandor, directeur de thèse, dirige l’équipe ARAI (Réalité augmentée – Intelligence artificielle) au sein du département HCI du Laboratoire interdisciplinaire des sciences du numérique (LISN, UMR 9015) de l’Université Paris-Saclay/CNRS, qu’il a cofondé avec le Dr Nguyen en 2024. Ses recherches récentes sur la prédiction vidéo et sur la modification en temps réel des expressions faciales à l’aide de modèles de diffusion sont au cœur même de cette thèse.
Le Dr Nguyen, co-directrice de thèse, est la coordinatrice scientifique de NeuroCoRe et codirige ce projet de doctorat avec le Dr Sandor. Son expertise en réalité étendue (XR) collaborative — à distance et en présentiel — ainsi qu’en plateformes immersives hybrides est essentielle pour les aspects multi-utilisateurs et liés à l’expérience utilisateur de la thèse.
La thèse s’inscrit au sein du consortium NeuroCoRe (PEPR eNSEMBLE) : réalité étendue collaborative et IA générative (LISN), neurosciences et sciences de la décision (CRNL), ainsi que vision par ordinateur, apprentissage automatique et psychiatrie des troubles borderline chez les adolescents (Centre Borelli). L’étudiante bénéficie de cet environnement interdisciplinaire, d’une infrastructure expérimentale partagée et d’un accès au calcul GPU haute performance à l’IDRIS (Jean-Zay). Le LISN est un acteur clé des projets français PEPR eNSEMBLE et CONTINUUM consacrés à l’avenir de la collaboration ; cette thèse offre une forte synergie avec ces derniers.
Contraintes et risques
n/a
Rémunération et avantages
Rémunération
2300,00 € mensuel
Congés et RTT annuels
44 jours
Pratique et Indemnisation du TT
Pratique et indemnisation du TT
Transport
Prise en charge à 75% du coût et forfait mobilité durable jusqu’à 300€
À propos de l’offre
Référence de l’offre UMR9015-CHRSAN-005 Section(s) CN / Domaine de recherche Sciences informatiques : signaux, images, langues, automatique, robotique, interactions, systèmes intégrés matériel-logicielÀ propos du CNRS
Le CNRS est un acteur majeur de la recherche fondamentale à une échelle mondiale. Le CNRS est le seul organisme français actif dans tous les domaines scientifiques. Sa position unique de multi-spécialiste lui permet d’associer les différentes disciplines pour affronter les défis les plus importants du monde contemporain, en lien avec les acteurs du changement.
Le CNRS
Les métiers de la recherche
Advertisement text from CNRS, no licence stated; reproduced with attribution.
The employer's ad is the binding version. Apply through their system.
?
Saved calls and ads appear on your calendar, and their deadlines are included when you export it. Nothing else is added for you.