このアプリは現在、Android 15 以降でのみ動作します。
Screen Operator にタスクを記述すると、画面をタップしてタスクを完了する動作をシミュレートします。その動作に対して、視覚言語モデルが画面とスマートフォンを操作するためのコマンドを含むシステムメッセージを受信します。Screen Operator はスクリーンショットを作成し、Gemini に送信します。Gemini はコマンドを返信し、Screen Operator はアクセシビリティサービスの権限を使用してこれらのコマンドを実行します。
利用可能なモデルは、
Gemini 2.0 Flash Lite、
Gemini 2.0 Flash、
Gemini 2.5 Flash lite、
Gemini 2.5 Flash、
Gemini 2.5 Flash live、
Gemini 2.5 Pro、
Gemma 3n E4B it (cloud)、
Gemma 3 27B it です。
Google アカウントで 18 歳未満と確認された場合、Google が(不当に)API キーを拒否するため、成人向けアカウントが必要となります。
Github からより早くアップデートを入手してください: https://github.com/Android-PowerUser/ScreenOperator