Screen Operator - AI Agent

Android PowerUser

Գնումներ հավելվածի միջոցով

Հավելվածի մասին

**Այս հավելվածն օգտագործում է AccessibilityService API**

Այս խելացի էկրանի կառավարումը հեղափոխություն է մատչելիության ոլորտում։

Մեզանից շատերի համար սմարթֆոնը աշխարհի դարպաս է՝ տեղեկատվության, հաղորդակցման, աշխատանքի և մասնակցության համար։ Սակայն ֆիզիկական, տեսողական կամ ճանաչողական խանգարումներ ունեցող միլիոնավոր մարդկանց համար այս թվացյալ ինտուիտիվ սարքերի օգտագործումը կարող է դառնալ ամենօրյա խոչընդոտ։ Բարդ ժեստերը, փոքր կոճակները, խառնաշփոթ ինտերֆեյսները և ժամանակակից հավելվածների արագությունը ստեղծում են թվային բաժանում, որը նշանակում է մեկուսացում՝ ներառման փոխարեն։

Ահա թե որտեղ արհեստական ​​բանականությունը (AI) գործում է ոչ միայն որպես օգնական, այլև որպես իրական հնարավորություն ընձեռող։

Պատկերացրեք.

Խիստ սահմանափակ շարժիչ հմտություններ ունեցող անձի համար. Փոքրիկ կոճակների վրա ճշգրիտ հպումները կամ բարդ սահող ժեստերը հաճախ անհնար են կամ չափազանց հոգնեցուցիչ։ AI-ն կարող է ստանձնել այս գործողությունները։ Այն վերլուծում է էկրանը, ճանաչում է թիրախը (օրինակ՝ «ուղարկել» կոճակը) և ճշգրիտ կատարում է գործողությունը՝ ի պատասխան պարզ հրամանի (ձայն, գլխի շարժում, մեկ ստեղնաշարի սեղմում)։ Այն հիասթափեցնող առաջադրանքը վերածում է անխափան գործընթացի և հնարավորություն է տալիս օգտագործել հավելվածներ, որոնք այլապես կմնային անհասանելի։ Տեսողության խնդիրներ ունեցող անձի համար. Թեև էկրանի ընթերցողները կարող են բարձրաձայն կարդալ տեքստը, նրանք հաճախ դժվարանում են չնշված գրաֆիկայի կամ բարդ դասավորությունների հետ։ Արհեստական ​​բանականությունը կարող է հասկանալ տեսողական համատեքստը։ Այն կարող է նույնականացնել տարրերը («լոգոյի աջ կողմում գտնվող կոճակը») և ակտիվացնել դրանք հրամանով։ Այն կարող է նույնիսկ լիովին ավտոմատացնել տեսողական սկանավորում պահանջող առօրյա առաջադրանքները (օրինակ՝ ամեն օր հավելվածից որոշակի տեղեկատվություն ստանալը) և արդյունքները ներկայացնել մատչելի ձևով։

Ճանաչողական խնդիրներ ունեցող անձի համար. Բազմաքայլ գործընթացները կամ անծանոթ ընտրացանկերում նավարկությունը կարող են ծանրաբեռնող լինել։ Արհեստական ​​բանականությունը կարող է գործել որպես խելացի օգնական։ Այն հասկանում է օգտատիրոջ նպատակը («Ես ուզում եմ վճարել իմ հաշիվը») և կատարում է անհրաժեշտ քայլերը՝ բացել ճիշտ հավելվածը, անցնել վճարման բաժին, լրացնել հայտնի տվյալները՝ անկախ կամ նվազագույն փոխազդեցությամբ։ Այն նվազեցնում է բարդությունը, նվազագույնի է հասցնում հնարավոր սխալները և խթանում է անկախությունը առօրյա թվային առաջադրանքներում։

Սա շատ ավելին է, քան պարզապես ավտոմատացում։ Խոսքը սեղմումները հաշվելու մասին չէ։ Նպատակն այն է, որ Արհեստական ​​բանականությունը հասկանա համատեքստը, մեկնաբանի օգտատիրոջ մտադրությունը և նպատակասլաց գործի՝ խոչընդոտները հաղթահարելու համար։ Այն սովորում, հարմարվում և հնարավորություն է տալիս փոխազդեցություն կատարել՝ հարմարեցված անհատական ​​կարողություններին և կարիքներին։

Արհեստական ​​բանականությամբ աշխատող այս էկրանային գործողությունները «հաճելի» կամ հարմարության հատկանիշ չեն։ Դրանք հաճախ որոշակի հաշմանդամություն ունեցող անձանց համար թվային գործիքներն արդյունավետ և անկախ օգտագործելու միակ միջոցն են։ Դրանք նշանակում են կրթության, աշխատանքի, սոցիալական կապերի և անհրաժեշտ ծառայությունների հասանելիություն։ Դրանք թվային ներառման և հավասար հնարավորությունների բանալին են։

Հետևաբար, էկրանին անմիջապես գործողություններ կատարող արհեստական ​​բանականության մշակումը և պատասխանատու օգտագործումը կարևոր քայլ է դեպի իսկապես մատչելի թվային աշխարհ, որը ոչ մեկին չի թողնում հետևում։ Այն անտեսանելի ձեռքն է, որը բացում է դռներ այնտեղ, որտեղ մի ժամանակ պատեր էին։

**Այս հավելվածն օգտագործում է AccessibilityService API-ը**

Թույլ տվեք ցանկացած հավելվածի կառավարվել էկրանի օպերատորի կողմից։ Դրա համար տեսողության մոդելները ստանում են խոսքի մոդելներ և համակարգային հաղորդագրություն, որը պարունակում է սմարթֆոնն օգտագործելու հրամաններ։ Լեզվական մոդելները արձագանքում են համապատասխան հրամաններով, որոնք այնուհետև կատարվում են այս հավելվածի կողմից։ Այս հավելվածը կարող է նաև միանալ Termux-ին և այնտեղ կատարել հրամաններ։

Յուրաքանչյուր թարմացումից հետո սեղմեք «Վերականգնել համակարգի հաղորդագրությունը»՝ նոր գործիքներին մուտք գործելու համար։

Ստացեք ավելի արագ թարմացումներ GitHub-ի միջոցով՝ https://github.com/Android-PowerUser/ScreenOperator

Ինչ նոր բան կա

• There is a download progress for the first app start
• Notification instead of overlay for Samsung
• More things can be updated without release.