Séminaire scientifique MIOT 2 : Efficient posterior sampling for diverse super-resolution with hierarchical VAE Prior

Les événements de la communauté
18 juin 2024
de 13H30 à 14H30
S'inscrire
  • FR
  • Accessible via visioconférence
  • Public
  • Guillaume EYNARD-BONTEMPS Guillaume EYNARD-BONTEMPS Ingénieur Calcul Scientifique

Pour le second séminaire scientifique "Mathématiques & Informatique pour l'observation de la Terre" de la COMET TSI, nous avons le plaisir de recevoir Jean Prost, chercheur post doctorant au laboratoire CRIStAL de Centrale Lille, le mardi 18 juin de 13h30 à 14h30 en visioconférence.

Titre : Efficient posterior sampling for diverse super-resolution with hierarchical VAE Prior

Abstract : In this presentation, we will consider the problem of producing diverse super-resolved images corresponding to a low-resolution observation. From a probabilistic perspective, this amounts to sample from the posterior distribution of the super-resolution inverse problem.  As a prior model on the solution, we propose to use pretrained hierarchical variational autoencoder (HVAE), a powerful class of deep generative model. We train a lightweight stochastic encoder to encode low-resolution images in the latent space of a pretrained HVAE. At inference, we combine the low-resolution encoder and the pretrained generative model to super-resolve an image. We demonstrate on the task of face super-resolution that our method provides an advantageous trade-off between the computational efficiency of conditional normalizing flows techniques and the sample quality of diffusion based methods.

Lien de la visio-conférence : https://rendez-vous.renater.fr/COMETTSISeminaireMI2_4006a4-0ac3b3-55439f

En espérant vous voir nombreux, n'oubliez pas de bloquer le créneau dans vos agendas !

S'inscrire
Ajouter à votre agenda 18-06-2024 13:30 18-06-2024 14:30 <p>Pour le second séminaire scientifique "Mathématiques &amp; Informatique pour l'observation de la Terre" de la COMET TSI, nous avons le plaisir de recevoir Jean Prost, chercheur post doctorant au laboratoire <a href="https://www.cristal.univ-lille.fr/spip.php?page=rubrique&amp;id_rubrique=1">CRIStAL</a> de Centrale Lille, le <strong>mardi 18 juin de 13h30 à 14h30 </strong>en visioconférence.<br /> <br /> Titre : <strong>Efficient posterior sampling for diverse super-resolution with hierarchical VAE Prior</strong></p> <p>Abstract : <em>In this presentation, we will consider the problem of producing diverse super-resolved images corresponding to a low-resolution observation. From a probabilistic perspective, this amounts to sample from the posterior distribution of the super-resolution inverse problem.&nbsp; As a prior model on the solution, we propose to use pretrained hierarchical variational autoencoder (HVAE), a powerful class of deep generative model. We train a lightweight stochastic encoder to encode low-resolution images in the latent space of a pretrained HVAE. At inference, we combine the low-resolution encoder and the pretrained generative model to super-resolve an image. We demonstrate on the task of face super-resolution that our method provides an advantageous trade-off between the computational efficiency of conditional normalizing flows techniques and the sample quality of diffusion based methods.</em></p> <p>Lien de la visio-conférence : <a href="https://rendez-vous.renater.fr/COMETTSISeminaireMI2_4006a4-0ac3b3-55439f">https://rendez-vous.renater.fr/COMETTSISeminaireMI2_4006a4-0ac3b3-55439f</a><br /> <br /> En espérant vous voir nombreux, n'oubliez pas de bloquer le créneau dans vos agendas !</p>

Pour participer à cet événement, l’inscription est obligatoire.

Partager :

Partage possible par tous (via Facebook, LinkedIn, Twitter, email)

Ces événements pourraient aussi vous intéresser