mobilerunという新しいオープンソースプロジェクトが、AndroidとiOSの両方で自然言語コマンドを実行できるとして注目を集めています。ユーザーは「設定を開いてダークモードをオンにして」や「ジョンに会議が午後3時に変更になったとメッセージを送って」と言うだけで、AIエージェントがタップ、スワイプ、入力を自動で行います。これは単なる音声アシスタントを超え、UIを直接制御するため、アクセシビリティ、テスト、個人の自動化に強力なツールとなります。開発者にとっては、コンピュータビジョンとUI自動化フレームワークを組み合わせた技術的アプローチが、クロスプラットフォームエージェント構築の青写真を提供します。アクセシビリティツールからエンタープライズデバイス管理まで、商業的可能性は大きいです。まだ初期段階ですが、mobilerunはモバイルデバイスとのインタラクションを再定義するエージェントベースのインタラクションモデルへのシフトを象徴しています。
mobilerunは自然言語でスマホを操作し、アプリの起動やメッセージ送信を自動化。エージェント駆動型モバイル自動化の新時代を示す。