Bientôt des "modèles du monde" avec V-JEPA ?

[L'affreux]

Le modèle V-JEPA 2 vient de sortir : https://ai.meta.com/blog/v-jepa-2-world-model-benchmarks/ 

 

Citation

Meta Video Joint Embedding Predictive Architecture 2 (V-JEPA 2) is a world model that achieves state-of-the-art performance on visual understanding and prediction in the physical world. Our model can also be used for zero-shot robot planning to interact with unfamiliar objects in new environments.

 

Ce n'est pas un LLM mais un "world model" (modèle du monde), c'est-à-dire un modèle qui serait capable de comprendre le monde. Le principe est de raisonner sur une représentation abstraite (c'est-à-dire, je suppose, sur le sens des choses) au lieu de raisonner sur les données brutes (des pixels et autres signaux sans traitements). Il me semble avoir entendu Yann Le Cun dire quelque part que ces modèles auront un jour des sentiments, comme le stress, un sentiment d'accomplissement ou de déception, cela sera un effet de leur capacité d'anticipation.