Articles sur JEPA

L'article Flow-JEPA propose d'utiliser l'appariement de flux conditionnel pour remplacer la prédiction autorégressive déterministe de LeWorldModel et générer conjointement de futures séquences d'états potentiels. Par rapport à la prédiction pas à pas en une seule étape, elle réduit l’accumulation d’erreurs et améliore la robustesse aux perturbations visuelles. Cela signifie que le modèle mondial adopte une nouvelle approche en matière de prévision à long terme et de capacités anti-interférences.

Cet article étend pour la première fois le modèle mondial JEPA des images aux nuages ​​de points, vérifiant que la planification potentielle ne s'effondre pas sous des observations 3D clairsemées et auto-occluses. Trois conceptions (encodeur gelé, distribution a priori, sensible au mouvement) sont réalisables, où le modèle de distribution a priori est statistiquement équivalent à la ligne de base de l'image. Cela montre que les capacités de prédiction de base du modèle mondial peuvent être transférées aux observations géométriques, jetant ainsi les bases d'applications de scènes 3D telles que les robots.