Résumé

La vision omnidirectionnelle, qui exploite une perception à 360 degrés pour comprendre l’environnement, est devenue de plus en plus cruciale dans des domaines tels que la robotique, l’inspection industrielle et la surveillance environnementale. Contrairement à la vision classique à lentille pinhole, la vision omnidirectionnelle offre une prise de conscience globale de l’environnement, améliorant considérablement la complétude de la perception scénique et la fiabilité des prises de décision. Toutefois, les recherches fondamentales dans ce domaine ont historiquement été en retard par rapport à celles portant sur la vision traditionnelle à lentille pinhole. Cette conférence présente une tendance émergente dans l’ère de l’intelligence artificielle incarnée : le développement rapide de la vision omnidirectionnelle, stimulé par une demande industrielle croissante et un intérêt académique croissant. Nous mettons en lumière les récents progrès réalisés dans les domaines de la génération omnidirectionnelle, de la perception omnidirectionnelle, de la compréhension omnidirectionnelle, ainsi que dans les jeux de données associés. À partir d’insights issus à la fois du monde académique et de l’industrie, nous proposons une architecture idéale de système panoramique pour l’ère de l’intelligence artificielle incarnée, nommée PANORAMA, composée de quatre sous-systèmes clés. En outre, nous présentons des analyses approfondies sur les tendances émergentes et les impacts transcommunautaires à l’intersection entre la vision panoramique et l’intelligence artificielle incarnée, ainsi qu’une feuille de route future et les défis ouverts. Cette synthèse rassemble les avancées les plus récentes, tout en définissant les défis et les opportunités pour la recherche future dans la construction de systèmes d’intelligence artificielle omnidirectionnelle robustes et généralistes, dans le contexte de l’ère de l’intelligence artificielle incarnée.