Screen Operator - AI Agent

Android PowerUser

ஆப்ஸ் சார்ந்த வாங்கல்கள்

இந்த ஆப்ஸ் பற்றி

**இந்தச் செயலி அணுகல்தன்மை சேவை API-ஐப் பயன்படுத்துகிறது**

இந்த அறிவார்ந்த திரைக்கட்டுப்பாடு, அணுகல்தன்மைக்கு ஒரு புரட்சியாகும்.

நம்மில் பலருக்கு, ஸ்மார்ட்போன் என்பது தகவல், தொடர்பு, வேலை மற்றும் பங்கேற்பு என உலகத்திற்கான ஒரு நுழைவாயிலாகும். ஆனால், உடல், பார்வை அல்லது அறிவாற்றல் குறைபாடுகள் உள்ள மில்லியன் கணக்கான மக்களுக்கு, இயல்பாகப் பயன்படுத்தத் தோன்றும் இந்தக் கருவிகளைப் பயன்படுத்துவது ஒரு தினசரித் தடையாக மாறக்கூடும். சிக்கலான சைகைகள், சிறிய பொத்தான்கள், நெரிசலான இடைமுகங்கள் மற்றும் நவீன செயலிகளின் அதிவேகம் ஆகியவை, அனைவரையும் உள்ளடக்குவதற்குப் பதிலாகத் தனிமைப்படுத்தலை ஏற்படுத்தும் ஒரு டிஜிட்டல் பிளவை உருவாக்குகின்றன.

இங்குதான் செயற்கை நுண்ணறிவு (AI) ஒரு உதவியாளராக மட்டுமல்லாமல், ஒரு உண்மையான செயலாக்கியாகச் செயல்படுகிறது.

கற்பனை செய்து பாருங்கள்:

இயக்கத் திறன் மிகவும் குறைவாக உள்ள ஒருவருக்கு: சிறிய பொத்தான்களைத் துல்லியமாகத் தட்டுவது அல்லது சிக்கலான ஸ்வைப் சைகைகள் செய்வது பெரும்பாலும் சாத்தியமற்றது அல்லது மிகவும் சோர்வூட்டக்கூடியது. இந்தச் செயல்களை AI கையாள முடியும். அது திரையைப் பகுப்பாய்வு செய்து, இலக்கை (எ.கா., "அனுப்பு" பொத்தான்) அடையாளம் கண்டு, ஒரு எளிய கட்டளைக்கு (குரல், தலை அசைவு, ஒரு விசை அழுத்தம்) ஏற்ப அந்தச் செயலைத் துல்லியமாகச் செயல்படுத்துகிறது. இது ஒரு சலிப்பூட்டும் பணியை ஒரு தடையற்ற செயல்முறையாக மாற்றி, இல்லையெனில் அணுக முடியாத செயலிகளைப் பயன்படுத்த உதவுகிறது. பார்வைக் குறைபாடு உள்ள ஒருவருக்கு: திரை வாசிப்பான்கள் (screen readers) உரையை உரக்க வாசிக்க முடிந்தாலும், பெயரிடப்படாத வரைகலைகள் அல்லது சிக்கலான தளவமைப்புகளைப் புரிந்துகொள்வதில் அவை பெரும்பாலும் சிரமப்படுகின்றன. செயற்கை நுண்ணறிவால் (AI) காட்சிச் சூழலைப் புரிந்துகொள்ள முடியும். அது கூறுகளை ("சின்னத்தின் வலதுபுறத்தில் உள்ள பொத்தான்") அடையாளம் கண்டு, கட்டளையின் பேரில் அவற்றைச் செயல்படுத்தும். காட்சிவழி ஆய்வு தேவைப்படும் வழக்கமான பணிகளை (எ.கா., தினசரி அடிப்படையில் ஒரு செயலியில் இருந்து குறிப்பிட்ட தகவல்களைப் பெறுதல்) இது முழுமையாகத் தானியக்கமாக்கி, முடிவுகளை எளிதில் அணுகக்கூடிய வகையில் வழங்கும்.

அறிவாற்றல் குறைபாடு உள்ள ஒருவருக்கு: பல-படி செயல்முறைகள் அல்லது அறிமுகமில்லாத மெனுக்களில் வழிசெலுத்துவது பெரும் சுமையாக இருக்கலாம். செயற்கை நுண்ணறிவு ஒரு அறிவார்ந்த உதவியாளராகச் செயல்பட முடியும். அது பயனரின் இலக்கை ("நான் எனது கட்டணத்தைச் செலுத்த விரும்புகிறேன்") புரிந்துகொண்டு, சரியான செயலியைத் திறப்பது, கட்டணப் பகுதிக்குச் செல்வது, தெரிந்த தரவுகளை நிரப்புவது போன்ற தேவையான படிகளைத் தன்னிச்சையாகவோ அல்லது குறைந்தபட்சத் தொடர்போடுடனோ செய்கிறது. இது சிக்கலைக் குறைக்கிறது, ஏற்படக்கூடிய பிழைகளைக் குறைக்கிறது, மேலும் அன்றாட டிஜிட்டல் பணிகளில் சுதந்திரத்தை ஊக்குவிக்கிறது.

இது வெறும் தானியக்கத்தை விட மிக அதிகம். இது கிளிக்குகளை எண்ணுவது பற்றியது அல்ல. சூழலைப் புரிந்துகொள்வது, பயனரின் நோக்கத்தை விளக்குவது, மற்றும் தடைகளைத் தாண்டிச் செல்ல நோக்கத்துடன் செயல்படுவது ஆகியவையே செயற்கை நுண்ணறிவின் (AI) இலக்காகும். அது கற்றுக்கொள்கிறது, தன்னைத் தகவமைத்துக் கொள்கிறது, மேலும் தனிப்பட்ட திறன்கள் மற்றும் தேவைகளுக்கு ஏற்ப ஊடாடலைச் சாத்தியமாக்குகிறது.

இந்த AI-ஆற்றல் பெற்ற திரைச் செயல்பாடுகள், 'இருந்தால் நல்லது' என்ற வகையிலோ அல்லது ஒரு வசதிக்கான அம்சமாகவோ இல்லை. சில குறைபாடுகள் உள்ளவர்கள் டிஜிட்டல் கருவிகளைத் திறம்படவும் சுதந்திரமாகவும் பயன்படுத்துவதற்கு, இவையே பெரும்பாலும் ஒரே வழியாகும். கல்வி, வேலை, சமூகத் தொடர்புகள் மற்றும் அத்தியாவசிய சேவைகளுக்கான அணுகலை இவை குறிக்கின்றன. டிஜிட்டல் உள்ளடக்கத்திற்கும் சம வாய்ப்புகளுக்கும் இவை முக்கியம்.

எனவே, திரையில் நேரடியாகச் செயல்களைச் செய்யும் செயற்கை நுண்ணறிவின் வளர்ச்சியும் பொறுப்பான பயன்பாடும், யாரையும் பின்தங்க விடாத, உண்மையாக அணுகக்கூடிய ஒரு டிஜிட்டல் உலகத்தை நோக்கிய ஒரு முக்கியமான படியாகும். ஒரு காலத்தில் சுவர்களாக இருந்த இடங்களில் கதவுகளைத் திறக்கும் கண்ணுக்குத் தெரியாத கரம் இது.

**இந்தச் செயலி AccessibilityService API-ஐப் பயன்படுத்துகிறது**

எந்தவொரு செயலியையும் Screen Operator மூலம் இயக்கலாம். இதற்காக, பார்வை மாதிரிகள் (vision models), பேச்சு மாதிரிகளையும் (speech models) ஸ்மார்ட்போனைப் பயன்படுத்துவதற்கான கட்டளைகளைக் கொண்ட ஒரு கணினிச் செய்தியையும் (system message) பெறுகின்றன. மொழி மாதிரிகள் (language models) அதற்கேற்ற கட்டளைகளுடன் பதிலளிக்கின்றன, அவை பின்னர் இந்தச் செயலியால் செயல்படுத்தப்படுகின்றன. இந்த செயலி Termux உடன் இணைத்து அங்கே கட்டளைகளை இயக்கவும் முடியும்.

ஒவ்வொரு புதுப்பித்தலுக்குப் பிறகும், புதிய கருவிகளை அணுக "Restore System Message" என்பதைக் கிளிக் செய்யவும்.

GitHub வழியாக வேகமான புதுப்பித்தல்களைப் பெறுங்கள்: https://github.com/Android-PowerUser/ScreenOperator

புதிய அம்சங்கள்

Gesture recognition does not stop on its own