Se med ørene! VOICe for Android kartlegger live kameravisninger til lydlandskap, og tilbyr utvidet virkelighet og enestående visuelle detaljer for de totalt blinde gjennom sansesubstitusjon og datasyn. Inkluderer også direktetalende OCR, en snakkende fargeidentifikator, snakkende kompass, snakkende ansiktsdetektor og en snakkende GPS-lokalisator, mens Microsoft Seeing AI og Google Lookout objektgjenkjenning kan startes fra The vOICe for Android ved å trykke på venstre eller høyre skjermkant.
Er det et augmented reality-spill eller et seriøst verktøy? Det kan være begge deler, avhengig av hva du vil at det skal være! Det endelige målet er å gi en form for syntetisk syn til blinde, men seende brukere kan ganske enkelt ha det gøy med å spille spillet syn-uten-syn. Synshemmede brukere med alvorlig tunnelsyn kan prøve om den auditive tilbakemeldingen hjelper dem å legge merke til endringer i den visuelle periferien. VOICe for Android kjører på smarttelefoner og nettbrett, men er også kompatibel med de fleste smarte briller, ved å bruke det lille kameraet i disse brillene og et spesielt brukergrensesnitt for å generere et levende sonisk augmented reality-overlegg, håndfritt! Det kan være lurt å bruke et eksternt batteri koblet til via USB-kabel for å forhindre at smartbrillebatteriet tømmes for raskt. Du kan hjelpe oss ved å blogge og tweete om erfaringene dine, brukstilfellene dine og om hvordan *du* lærer å se med lyd.
Hvordan virker det? STEMMEN bruker tonehøyde for høyde og lydstyrke for lysstyrke i ett sekunds venstre til høyre skanning av enhver visning: en stigende lys linje høres ut som en stigende tone, et lyst punkt som et pip, et lyst fylt rektangel som et støyutbrudd, en vertikal rutenett som en rytme. Best brukt med stereohodetelefoner for den mest oppslukende opplevelsen og mest detaljerte hørselsoppløsningen.
Bare eksperimenter med enkle visuelle mønstre først, fordi bilder fra det virkelige liv er ekstremt komplekse. Slipp tilfeldig en lys gjenstand som en DUPLO-kloss på en mørk bordplate, og lær å strekke deg etter den gjennom lyd alene (lukk øynene hvis du har syn). Prøv deretter å utforske ditt eget trygge hjemmemiljø, og lær å assosiere de komplekse lydmønstrene med det du allerede vet er der. Seende brukere kan også bruke appen med Google Cardboard-kompatible enheter ved å sveipe ned på hovedskjermen for å bytte kikkertvisning.
For seriøse brukere: Å lære å se med lyd er som å lære et fremmedspråk eller lære å spille et musikkinstrument, noe som virkelig utfordrer utholdenheten og hjernens plastisitet. Det kan godt være det ultimate hjernetreningssystemet, som bygger bro over sansene gjennom kunstig synestesi. En generell opplæringsmanual for The vOICe (ikke spesifikk for Android-versjonen) er tilgjengelig online på
https://www.seeingwithsound.com/manual/The_vOICe_Training_Manual.htm
og bruksnotater for å kjøre The VOICe for Android handsfree på smarte briller er kl
https://www.seeingwithsound.com/android-glasses.htm
Ikke bekymre deg for de mange alternativene til The VOICe for Android: menneskelige øyne har ingen knapper eller alternativer, og The VOICe er på samme måte designet for å utføre hovedfunksjonen rett ut av esken, slik at du ikke trenger å bruke noen alternativer for å komme i gang. Noen av de vanligste alternativene vises når du sakte skyver fingeren over hovedskjermen.
Hvorfor er The VOICe gratis? Fordi vårt fremste mål er å gjøre en reell endring ved å senke barrierer for bruk så mye vi kan. Du vil finne at konkurrerende teknologier koster oppover $10 000 og likevel har lavere spesifikasjoner. Den perseptuelle oppløsningen som tilbys av The VOICe er uovertruffen selv av $150 000 "bionic eye" retinale implantater (PLoS ONE 7(3): e33136).
VoICe for Android støtter engelsk, nederlandsk, tysk, fransk, spansk, italiensk, estisk, ungarsk, polsk, slovakisk, tyrkisk, russisk, kinesisk, koreansk og arabisk (menyalternativer | Språk).
Rapporter feil til feedback@seeingwithsound.com, og besøk nettsiden http://www.seeingwithsound.com/android.htm for detaljert beskrivelse og ansvarsfraskrivelse. Vi er på Twitter på @seeingwithsound.
Takk skal du ha!