Technologie : FrodoBots et Yield Guild Games s’associent pour rendre ludique la recherche en intelligence artificielle et en robotique avec l’événement Earth Rover Challenge.
FrodoBots, une entreprise basée à Singapour, développe sa technologie robotique depuis plusieurs années. Elle dispose d’un réseau d’environ cent sites à travers le monde où les participants peuvent piloter à distance de petites voitures robotiques télécommandées. En collaboration avec la guilde Web3 Yield Guild Games, FrodoBots lance son premier défi : AI vs. Human : Earth Rover Challenge.
Cette collaboration représente une avancée majeure dans la recherche sur l’IA incarnée et ouvre la voie à une nouvelle méthode de collecte de données du monde réel en alliant robotique et jeux vidéo. Le défi attirera des conducteurs humains qui piloteront des voitures télécommandées, générant ainsi des ensembles de données précieux pour les systèmes d’IA qui doivent apprendre à naviguer en toute sécurité sur les routes.
« Il existe un point de convergence où il est amusant pour les humains de jouer, mais cela est également bénéfique pour la recherche en IA. Nous pouvons ainsi fournir ces données aux laboratoires robotiques pour qu’ils réalisent leurs meilleures recherches », a déclaré Michael Cho, PDG de FrodoBots, lors d’une interview. « Nous souhaitons que cette compétition entre IA et joueurs se déroule chaque année. Parallèlement, nous testerons les ensembles de données que nous collectons. »
La compétition, co-organisée avec des chercheurs de Google DeepMind et d’autres instituts de recherche, se déroulera lors de la prestigieuse conférence IROS 2024, qui aura lieu à Abu Dhabi les 16 et 17 octobre.
Une Compétition « IA contre Humains »
L’Earth Rover Challenge est une compétition inédite où cinq équipes d’IA et cinq joueurs humains contrôleront à distance de petits robots de trottoir tout en accomplissant des missions de navigation dans plusieurs villes, notamment Abu Dhabi, Singapour, Taipei et Stockholm.
Les équipes d’IA participantes incluent des laboratoires de recherche tels que l’UC Berkeley, l’UT Austin, l’Université Carnegie Mellon et l’Université nationale de Singapour. Les joueurs humains seront sélectionnés parmi les meilleurs du classement de milliers de joueurs de YGG ayant précédemment participé au premier jeu de FrodoBots : Earth Rover.
« Chez FrodoBots, nous sommes convaincus que la convergence de la robotique et du jeu peut créer des expériences uniques pour les joueurs tout en contribuant de manière significative à la recherche en IA incarnée en collectant des ensembles de données du monde réel lors de ces sessions de jeu », a ajouté Cho.
L’entreprise compte une douzaine d’employés et a levé un montant modeste de fonds auprès d’enthousiastes de la cryptomonnaie. Cho a mentionné que l’entreprise envisage de lever des fonds supplémentaires.
Le Jeu et la Nouvelle Économie de Gig
La collaboration entre FrodoBots et YGG fait progresser l’économie de gig activée par le mouvement play-and-earn. Grâce à cette compétition, les partenaires espèrent démontrer le potentiel du jeu robotique comme outil de collecte de données à grande échelle pour la téléopération.
YGG dispose d’un réseau de joueurs Web3 capables d’effectuer une grande partie du travail tout en étant rémunérés.
« Participer à cette compétition ouvre de nouvelles opportunités passionnantes pour les joueurs de notre communauté », a déclaré Beryl Li, cofondatrice de Yield Guild Games. « Cette collaboration illustre l’avenir du travail et comment le jeu Web3 peut avoir un impact tangible au-delà du domaine numérique, tout en contribuant aux avancées en IA et en robotique, tout en s’amusant. »
YGG impliquera des joueurs dans le projet, leur permettant de participer à une expérience ludique qui déterminera qui se rendra au tournoi d’Abu Dhabi. Il pourrait également y avoir un système d’incitation par des jetons. Les joueurs qui réaliseront des missions difficiles ou utiles gagneront des points, tandis que ceux qui conduiront dans un parc vide en gagneront peu. En réussissant une mission et en ramenant le robot à son point de départ en toute sécurité, ils pourront accumuler des points. À ce jour, des milliers de joueurs ont déjà participé.
Lors du tournoi, l’IA tentera d’accomplir les mêmes tâches que les conducteurs humains et de les surpasser dans les défis. Plus l’IA apprendra des ensembles de données humains, plus elle s’améliorera dans la conduite.
Faire Avancer la Recherche en Robotique et IA
Dans le cadre de la compétition, FrodoBots a rendu public un ensemble de données de conduite de 2 000 heures, le plus grand de son genre accessible au public. De plus, les équipes d’IA participantes auront accès à la flotte mondiale de robots de FrodoBots, déployée dans plus d’une douzaine de villes sur tous les continents, permettant une évaluation des modèles d’IA à une échelle sans précédent dans des conditions réelles.
Sur le plan de la recherche, Michael Cho a commencé à collaborer avec les chercheurs de DeepMind, le laboratoire de recherche en IA de Google. C’est ainsi qu’est née l’idée de la compétition entre IA et joueurs humains, désormais appelée Earth Robot Challenge, qui se déroulera à Abu Dhabi le mois prochain.
« En tant que chercheur, j’ai été vraiment intrigué par l’approche unique de FrodoBots pour résoudre le problème du goulot d’étranglement des données dans la recherche en robotique IA en introduisant le jeu dans l’équation », a déclaré Jie Tan, chercheur principal chez Google DeepMind. « Plus important encore, la grande flotte déployée dans des lieux divers fournie par FrodoBots a créé un banc d’essai idéal pour évaluer les politiques robotiques dans des environnements réels. Je suis ravi de co-organiser cette compétition avec mes collègues et l’équipe de FrodoBots, où nous testerons les progrès des modèles d’IA autonomes par rapport aux performances humaines. »
« La robotique et l’IA ont connu ces dernières années des avancées passionnantes », a déclaré Ted Xiao, chercheur senior en IA chez DeepMind. « Avec des systèmes comme AlphaGo, les LLM sont excellents pour être des chatbots ou résoudre des problèmes mathématiques. Ils peuvent également jouer à des jeux comme DOTA ou aux échecs. Mais l’IA peut-elle réellement contrôler des robots dans le monde réel et agir dans celui-ci ? C’est un objectif constant pour de nombreux scientifiques et chercheurs, y compris moi-même. »
Xiao a ajouté : « Et je pense qu’avec FrodoBots, l’opportunité passionnante est que c’est un cadre d’évaluation distribué à l’échelle mondiale où nous… »
Exploration des Robots Autonomes : FrodoBots et l’Intelligence Artificielle
Dans le domaine de la recherche en robotique, les formations et évaluations se déroulent souvent dans des environnements de laboratoire ou des espaces intérieurs très contrôlés. Ces conditions, bien que stériles, ne reflètent pas toujours la complexité du monde réel.
Selon Xiao, « Nous tentons de créer des environnements qui ressemblent à la réalité, presque comme des décors de cinéma. L’objectif est de mesurer les véritables capacités des robots. » Il souligne que les FrodoBots ont l’opportunité de tester leurs compétences dans des contextes urbains difficiles, où les défis sont comparables à ceux d’un jeu vidéo.
Le marché propose des simulateurs de conduite en première personne, et il est envisageable que l’intelligence artificielle atteigne bientôt le niveau des performances humaines. Cette compétition stimule les chercheurs à améliorer la technologie tout en incitant les humains à donner le meilleur d’eux-mêmes.
Ce concept rappelle d’autres projets de « science citoyenne » auxquels des joueurs ont participé, comme SETI@Home, qui utilise la puissance de calcul inutilisée pour aider à la recherche d’intelligence extraterrestre.
David Hsu, professeur à l’Université nationale de Singapour, a déclaré : « Au-delà de l’ensemble de données open-source, cette compétition offre un ensemble commun d’environnements naturels diversifiés pour déployer et évaluer des approches de recherche en conditions réelles, ce qui est essentiel dans la recherche en robotique. Elle confronte l’autonomie des robots à l’intelligence humaine, représentant un véritable défi de généralisation, qui est la clé de l’apprentissage des robots. »
FrodoBots prévoit de continuer à co-organiser de telles compétitions avec des chercheurs tout en élargissant son champ d’action pour inclure d’autres tâches robotiques à travers de nouveaux titres de jeux robotiques, dans le but de contribuer de manière significative à la recherche sur l’IA incarnée.
FrodoBots aspire à transformer le paysage des jeux et de la recherche en IA incarnée en crowdsourçant des ensembles de données du monde réel grâce à ses titres de jeux robotiques uniques. Avec des jeux comme Earth Rovers, où les joueurs gagnent des points en explorant le monde via des robots télécommandés, et Octo Arms, qui défie les joueurs de résoudre des énigmes en 3D avec des bras robotiques, FrodoBots fusionne divertissement et robotique.
Origines du Projet
Au printemps 2022, Cho a lancé le projet avec ses frères pendant la pandémie pour les occuper, en se concentrant sur un robot autonome. Plutôt que de construire un modèle coûteux, ils ont opté pour un petit robot réalisable pour moins de 500 dollars, qui est également plus sûr à conduire dans le monde réel.
Michael Cho a remarqué que de nombreux projets robotiques étaient très onéreux, coûtant entre 10 000 et 20 000 dollars chacun. « Je pensais que la barrière pour atteindre des véhicules autonomes de niveau 5 n’était pas tant le matériel que l’absence d’un ensemble de données adéquat, » a-t-il expliqué.
Il a ajouté : « Si nous avons des robots très coûteux, cela va à l’encontre de notre objectif de collecter davantage de données. Que se passerait-il si nous concevions cela comme un jouet, comme une voiture télécommandée ? Nous avons réussi à réduire le coût à 300 dollars. » Son frère Sam Cho a rejoint l’équipe en tant que cofondateur et dirige l’équipe matérielle en Chine.
Une Approche Ludique
Au départ, les fondateurs n’avaient pas envisagé de créer un jeu. L’entreprise a commencé à déployer ses robots dans divers endroits pour collecter des données de conduite. « Il s’est avéré que c’était assez amusant de les piloter, et nous avons pensé qu’il y avait peut-être quelque chose à faire, comme dans Euro Truck Simulator, » un jeu où l’on conduit des camions sur des cartes réalistes.
Michael Cho a partagé des vidéos montrant des voitures télécommandées en action, révélant des piétons intrigués par ces véhicules. Un microphone permet au conducteur distant de communiquer avec les personnes à proximité.
Pour rendre l’expérience plus engageante, l’entreprise propose des points aux joueurs, qui peuvent se classer sur un tableau de leaders. De plus, des récompenses sous forme de jetons Web3 sont également envisagées. Un joueur peut acheter une voiture pour 300 dollars, mais un joueur désintéressé peut la louer à d’autres et commencer à en tirer des bénéfices.
Le jeu et la voiture robotique ont été testés dans plus de 20 villes, impliquant à la fois des intelligences artificielles et des humains. L’entreprise ajoute maintenant une fonctionnalité « comme Pokémon Go, mais dans la vie réelle, » selon Michael Cho.
En conduisant, les joueurs peuvent chasser des NFT rares. « La plupart du temps, vous trouverez quelque chose de trivial, mais il est possible d’avoir de la chance, » a-t-il ajouté. « Nous voyons un potentiel intéressant avec la réalité augmentée. Actuellement, c’est très simple, mais nous avons beaucoup d’idées à explorer pour le design du jeu. »
Il a également mentionné : « Nous ne sommes pas des concepteurs de jeux, mais nous prouvons que cela peut être fait. À terme, nous souhaitons rendre de nombreux outils open-source pour que d’autres développeurs de jeux puissent créer leurs propres jeux robotiques. »
Michael Cho a souligné que l’entreprise a eu la chance de voir ses vidéos devenir virales à plusieurs reprises.
Gestion des Petites Voitures Télécommandées
Les missions pour les humains…
Les défis de la circulation urbaine
Naviguer dans des rues bondées peut s’avérer complexe. Parfois, un trajet peut durer jusqu’à 43 minutes, nécessitant une attention particulière de la part des conducteurs pour éviter les piétons et adapter leur vitesse.
Bien que quelques incidents aient été signalés au cours des deux dernières années, où des individus ont tenté de désactiver des véhicules autonomes, comme en les jetant dans une rivière, Michael Cho souligne que ces robots sont conçus pour résister à des dommages. Ils se déplacent à une vitesse modérée de trois kilomètres par heure, ce qui réduit considérablement le risque de blessures pour les piétons.
La sécurité des robots
La taille réduite de ces véhicules autonomes contribue à minimiser les risques pour les humains. Dans chaque zone où ces voitures circulent, une personne est désignée pour récupérer le véhicule et le ramener à sa station de recharge.
La compétition entre humains et intelligence artificielle
Dans un événement à venir, cinq équipes d’intelligence artificielle s’affronteront contre cinq joueurs humains. L’objectif des équipes AI sera de reproduire les actions des humains, en réalisant des missions de navigation dans le monde réel. Les joueurs de YGG, engagés dans cette compétition, auront la chance de se qualifier pour un voyage à Abu Dhabi en fonction de leur performance sur le tableau des scores.
« Ce sera un véritable spectacle », déclare Michael Cho. « Les cinq équipes robotiques contribueront à la recherche en navigation, et elles proviennent de certains des meilleurs laboratoires au monde. »
Michael Cho a également présenté des voitures télécommandées contrôlées par intelligence artificielle.
« Elles ont été conçues en utilisant notre ensemble de données de conduite », explique-t-il. « J’aimerais vraiment voir le domaine du jeu robotique se développer. Imaginez quelqu’un achetant un contrôleur de jeu et jouant à une sorte de puzzle en 3D. »
