Un nouveau projet open source appelé mobilerun attire l'attention pour sa capacité à exécuter des commandes en langage naturel sur les appareils Android et iOS. Les utilisateurs peuvent dire « Ouvre les paramètres et active le mode sombre » ou « Envoie un message à John disant que la réunion est déplacée à 15 heures », et l'agent IA effectue automatiquement les tapotements, balayages et saisies nécessaires. Cela va au-delà des simples assistants vocaux en contrôlant directement l'interface utilisateur, ce qui en fait un outil puissant pour l'accessibilité, les tests et l'automatisation personnelle. Pour les développeurs, l'approche technique – combinant probablement la vision par ordinateur avec des frameworks d'automatisation de l'interface utilisateur – offre un plan pour la construction d'agents multiplateformes. Le potentiel commercial est significatif, des outils d'accessibilité à la gestion des appareils en entreprise. Bien qu'encore à un stade précoce, mobilerun représente un changement vers des modèles d'interaction basés sur des agents qui pourraient redéfinir notre façon d'interagir avec les appareils mobiles.
mobilerun permet de contrôler les appareils mobiles en langage naturel, automatisant des tâches comme l'ouverture d'applications et l'envoi de messages. Un signal d'une nouvelle ère d'automatisation mobile pilotée par des agents.