Partituras contiene una gran cantidad de información. Cuando una persona vidente lee, pueden elegir qué aspecto que les interesa y hacen caso omiso del resto - es decir, acabo de leer la melodía, sólo se concentra en el ritmo o simplemente el terreno de juego, etc. Esta aplicación tiene como objetivo describir las partituras usando descripciones verbales y de audio - pero permite que la información que se filtra por los requisitos específicos del músico - que cambiará muy probablemente a medida que progresan a través de cada frase.
El objetivo de esta aplicación es hacer música y el aprendizaje interactivo. También tiene como objetivo ser libres mediante el uso de un pedal (que emula un teclado USB) y el reconocimiento de voz manos.
Esta aplicación utiliza un archivo MIDI y puede reproducir o describir una barra específica (s) o una nota (s). El usuario puede modificar la velocidad, arpegiar los acordes, añadir un metrónomo, dividir a la izquierda y la mano derecha y en solitario o eliminar notas superior / inferior en un lado.
La música puede ser descrita mientras se está jugando - es decir, las notas se anuncian una barra de bar antes de que se juegan.
Por defecto se responde a una pulsación de tecla de 'b' - para activar el pedal - o utilizar los botones de la pantalla. Esto se puede cambiar desde Menú -> Mostrar opciones.
La pantalla contiene 3 botones para simular pulsaciones del pedal. La aplicación va a esperar a la entrada de voz después de que el botón superior se presiona (pedal 1). hay botones para pulsación larga y pulse dos veces también. Bajo esas 3 botones es una casilla de verificación para controlar qué resultados se muestran de reconocimiento de voz - = sin marcar, sólo el primer resultado (en azul). Ticked = otros resultados muestran también (en verde).
El botón situado debajo, etiquetado reconocer el habla, esperará a la entrada de voz - pero sólo mostrará los resultados - que en realidad no se pueden procesar para que la música / descripción no responderá.
El resto de la pantalla de abajo tiene un área de desplazamiento que muestra los resultados de reconocimiento de voz (en verde azul y) a lo largo con cualquier descripción de la música que la aplicación proporciona (se muestra en rojo).
Una lista completa de los comandos de reconocimiento de voz que responde a se puede encontrar en - http://www.marchantpeter.co.uk/talking-sheet-music.php
La forma en que la aplicación de los resultados entiende el habla es de ninguna manera totalmente desarrollados - por lo que puede no ser muy precisa.
El motivo de la publicación de esta aplicación en un estado muy pendientes es demostrar el potencial y obtener retroalimentación sobre si podría ser beneficioso y qué dirección tomar a continuación.