8 ans et 10 millions d'images contribuées par la communauté Pokémon Go

Selon les informations publiées par Niantic - le développeur du jeu Pokémon Go, ils développent un grand modèle géospatial (LGM), appliquant des données d'image et des coordonnées géographiques de leurs jeux mobiles, notamment Pokémon Go et l'application Scaniverse.

Contrairement aux modèles d’IA conventionnels qui utilisent des données textuelles, audio ou vidéo provenant d’Internet, LGM est construit à partir de plus de 10 millions d’images de localisation du monde réel fournies par les utilisateurs au cours des 8 dernières années. En moyenne, environ 1 million de nouveaux scans sont téléchargés par les joueurs chaque semaine. La plupart de ces analyses proviennent du point de vue des piétons, fournissant des données précieuses dans des zones inaccessibles aux voitures ou aux caméras de rue.

Processus de développement du modèle LGM

Depuis 5 ans, Niantic se concentre sur la construction d'un système de positionnement visuel (VPS). Le système permet de déterminer l'emplacement et l'orientation à partir d'une seule image, sur la base d'une carte 3D créée à partir des données d'image de l'utilisateur. À partir de là, LGM a été conçu comme une étape supplémentaire, traitant l'espace physique à travers des images géocoordonnées, de la même manière que les grands modèles linguistiques (LLM) traitent le texte et le langage naturel.

Niantic a révélé avoir formé plus de 50 millions de réseaux neuronaux, chacun représentant un emplacement ou une perspective spécifique. Ces réseaux neuronaux compressent des milliers d’images en représentations numériques, avec un total de 150 000 milliards de paramètres. En combinant les réseaux locaux, Niantic s'attend à ce que LGM soit capable de reconnaître n'importe quel endroit dans le monde, même si l'image est prise sous des angles jamais vus auparavant.

Niantic décrit la puissance de LGM avec un exemple : « Si vous vous trouvez derrière une église et que le modèle ne reconnaît que la porte d'entrée, il ne sait pas où vous êtes. Mais avec LGM, nous disposons de données provenant de milliers d'églises à travers le monde. Même si les églises ne sont pas exactement identiques, elles partagent des caractéristiques architecturales similaires. LGM utilise ces connaissances pour vous reconnaître. »

LGM est une évolution du système de positionnement VPS Lightship actuel, qui permet aux joueurs de placer des objets virtuels dans l'espace réel avec une précision centimétrique. La fonctionnalité Pokémon Playgrounds de Pokémon Go démontre cette capacité, permettant aux Pokémon d'être placés dans des endroits du monde réel pour que d'autres puissent les trouver.

En plus de prendre en charge les produits de réalité augmentée (AR) et de réalité mixte (MR), Niantic affirme que LGM ouvre un potentiel dans de nombreux autres domaines tels que la robotique, l'automatisation, les véhicules autonomes, la logistique et l'aménagement de l'espace.

La question est cependant de savoir si les joueurs de Pokémon Go sont pleinement conscients que les données qu’ils génèrent sont utilisées pour développer l’IA. Bien que cela puisse être mentionné dans les conditions d'utilisation du jeu, les détails n'ont été rendus publics que récemment. L'incident risque de susciter des réactions mitigées dans les mois à venir, les joueurs étant de plus en plus préoccupés par la confidentialité et la manière dont leurs données sont utilisées.