Screen Operator

Android PowerUser

Köp i appen

Om appen

Appen fungerar för närvarande bara på Android 15+

Skriv din uppgift i Screen Operator och det simulerar att trycka på skärmen för att slutföra uppgiften. I gengäld får en visionspråkmodell ett systemmeddelande som innehåller kommandon för att styra skärmen och smartphonen. Skärmoperatör skapar skärmdumpar och skickar dem till Gemini. Gemini svarar med kommandona, som sedan implementeras av Screen Operator med tillgänglighetstjänstens behörighet.

Tillgängliga modeller är
Gemini 2.0 Flash Lite,
Gemini 2.0 Flash,
Gemini 2.5 Flash lite
Gemini 2.5 Flash,
Gemini 2.5 Flash live,
Gemini 2.5 Pro,
Gemma 3n E4B det (moln) och
Gemma 3 27B det.

Om du i ditt Google-konto identifierats som under 18 behöver du ett vuxenkonto eftersom Google (orimligt) nekar dig API-nyckeln.

Få uppdateringar snabbare från Github: https://github.com/Android-PowerUser/ScreenOperator

Nyheter

• Gemini 2.5 Flash live preview has been added. This significantly accelerates screen operation and is now the new standard.
• AI can now open apps instantly with a command
• Responses from the language model are now streamed
• less toasts
• Incorrect recognition of other as commands has been fixed
• The system message can now be restored
• 503 error in Gemini 2.5 Pro has been fixed
• Design improved
• Can now click and hold
• Unnecessary has been removed from screen elements