génération multimodale
2 published articles
Laboratoires et Recherche en IA
Quand une IA apprend à dessiner et à se corriger en écrivant
Un nouvel article propose Self-Correcting Coupled Markov Jump Processes (SC-CMJP), un framework permettant à l'IA de générer et d'éditer conjointement des images et du texte, avec une auto-correction en temps réel entre les modalités. L'échantillonneur sans entraînement CO₂Jump surpasse les méthodes existantes sur des tâches de raisonnement visuel et d'édition.
2026-07-17
IA générative
CO2Jump de Google marie la génération de texte et d'image en un seul passage qui s'auto-corrige à la volée
Google présente CO2Jump, un sampler sans entraînement pour la génération conjointe de texte et d'image. Il utilise un processus de saut de Markov auto-correcteur où les scores de confiance de chaque modalité guident les mises à jour de l'autre en temps réel, produisant des sorties multimodales cohérentes en un seul passage. La méthode apporte également trois nouveaux ensembles de données de référence pour l'évaluation de la génération conjointe.
2026-07-14