Publicado por

Interacción tangible PEC1 – ¿Qué es la interacción tangible?

1. Clasificación, análisis y reflexión

Busqué todas las técnicas del temario del curso y fui pensando en algún ejemplo práctico que usara alguna. Después, fui comprobando que no estaban mencionadas en los ejemplos antes de indagar más sobre ellas en Google.
Para hacer su análisis, comparé las técnicas y elementos que usaba cada proyecto con el temario.

Face projection mapping

Wildbytes comenzó haciendo escaneos 3D de la modelo, capturando su imagen utilizando luz estructurada y fotogrametría. A partir de ahí, se imprimió en 3D un busto de su cara que usaron para las pruebas y el desarrollo de los efectos de mapeo en posición estática. Después de eso, el equipo necesitaba lanzarse a las imágenes coloridas y caleidoscópicas que se proyectarían.

Más adelante trabajaron en el mapeo en tiempo real con un potente motor de renderizado 3D y el trackeo de la cara de la modelo con el sistema de ftrack.

Me parece el proyecto menos relevante, porque no ayuda con ningún problema de usabilidad o accesibilidad, los temas donde me gustaría centrarme.

Sensor de temperatura (domótica)

Los sensores de temperatura están formados por mecanismos muy sencillos constituidos por dos materiales combinados mediante uniones llamadas unión fría y unión caliente. El grado de temperatura que detectan estas uniones, genera una diferencia de potencial que se transforma en una señal eléctrica.

Los sensores de humedad nos dirán el porcentaje de vapor de agua que se encuentra en el ambiente.

El sensor de temperatura analiza dos niveles de temperatura: uno por debajo de la temperatura que se requiere para calefacción y otro por encima que activa el aire acondicionado de la vivienda.

Existen varios tipos de sensores de humedad, como mecánicos o de sales higroscópicas, y de temperatura, como Termopares o RTD.

El modelo de Xiaomi se conecta a dispositivos inteligentes a través de la app “Mi Bluetooth Gateway”.

No me parece demasiado relevante porque no es algo muy novedoso. A día de hoy hay multitud de fabricantes de este tipo de sensores.

Asistente de Google

El asistente utiliza un modelo de aprendizaje automático que convierte lo que se tararea o silba en una secuencia numérica. Después se compara dicha secuencia numérica con las secuencias de canciones existentes y ya escaneadas. Cuanto más coincidan ambas secuencias, más probabilidad hay de que sea la canción que se busca.

Dicen que han entrenado al modelo de aprendizaje basándose en personas cantando, silbando y tarareando y no tiene en cuenta los instrumentos o la calidad vocal de cada usuario.

Me parece bastante interesante, sobretodo el cómo es capaz de analizar la melodías con sólo un tarareo.

2. Análisis del proyecto elegido

Tobii dynavox TD Pilot

TD Pilot es un dispositivo para iPadOS que te permite generar de voz y controlar tu iPad con seguimiento ocular. Está diseñado para personas con discapacidad y dificultades para comunicarse como personas con afecciones como ELA, lesión de la médula espinal o parálisis cerebral. TD Pilot ayuda a estas personas a comunicarse, usar sus aplicaciones de iPad
favoritas y les permite que su voz se escuche alto y claro.

El dispositivo viene precargado con aplicaciones de CAA: TD Talk para personas alfabetizados o TD Snap para aquellos que utilizan la comunicación basada en pictogramas.

Mecanismos de la interacción y su usabilidad

  • Visión artificial, eye tracking
    El sistema de seguimiento ocular que usa es el Tobii IS5, compuesto por 4 sensores de 850nm (luz infraroja).
  • Tratamiento de datos
    Usa como periférico de entrada los sensores electrónicos del eye tracking para mostrar un cursor en la pantalla del iPad con el que interactuar con los elementos de la GUI. Como periféricos de salida se encuentran los altavoces integrados en el TD Pilot para dictar el mensaje del usuario en forma de audio y la pantalla en la parte posterior para reproducirlo en formato texto.

Análisis y descripción del diseño de interacción

TD Pilot es un dispositivo que te permite controlar un iPad y escribir mensajes con seguimiento ocular. TD Pilot captura el movimiento ocular del usuario gracias a sus 4 sensores infrarrojos y lo plasma con un cursor en pantalla, lo que permite interactuar sin necesitad de usar las manos con cualquier aplicación de tu iPad.

Por otro lado, también viene con 2 aplicaciones, TD Talk y TD Snap, que permiten al usuario introducir textos mediante caracteres o pictogramas y generar un mensaje de voz o reproducir el texto en la parte trasera del TD Pilot.

Diagrama de flujo

Valoración de la usabilidad y facilidad de uso

TD Pilot está diseñado para que las personas con discapacidad o dificultades para comunicarse puedan acceder y usar con mucha más facilidad cualquier aplicación que se pueda instalar en un iPad. Además, les ayuda a comunicarse con los demás pese a sus discapacidades.

Para ayudar a aprender a usar esta herramienta, tobii ha hecho una serie de vídeos guía y elpaquete viene con unas instrucciones detalladas. También tienen la app de TD CoPilot para ayudar con la calibración. Una vez configurado, iniciar el trackeo es bastante sencillo, sólo hay que encender el dispositivo.

El dispositivo se adapta a las necesidades de cada persona, por ejemplo, usando la entrada de texto de TD Talk o con pictogramas con TD Snap. Estas aplicaciones también se pueden utilizar con los dedos.

Opinión personal y aportaciones creativas

Personalmente me parece un producto fantástico y muy flexible, que se puede adaptar apersonas con distintas discapacidades o dificultades y les brinda una mayor calidad de vida.
Lo único que veo negativo es que sólo funciona con iPad, por lo que fuerza un poco a disponer de uno o tener que comprarlo.

3. Webgrafía y enlaces

  1. Wildbytes pioneers live facial projection mapping with ftrack – ftrack
  2. Wildbytes FACE PROJECTION MAPPING FOR PONDS
  3. Wildbytes Kat Von D’s Live Face Projection Mapping – Wildbytes
  4. Domótica para control de temperatura y humedad (hogarsense.es)
  5. Xiaomi Mi Temperature and Humidity Monitor 2 – Termómetro/Higrómetro (tuxiaomi.es)
  6. El buscador de Google ahora es capaz de encontrar una canción con sólo tararearla o silbarla (xataka.com)
  7. Google introduce Hum to Search – «Hey Google, what’s that song that goes na na doo da?» – RouteNote Blog
  8. Tobii gives disabled users the power to control iPads with their eyes (newatlas.com)
  9. TD Pilot – seguimiento ocular disponible en iPad – Seguidor ocular #1 en el mundo – Tobii Dynavox ES
  10. TD Pilot – Tobii Dynavox ES
  11. TD Talk
  12. TD Snap
  13. TobiiDynavox_TDPilot_UsersManual_v1-0-5_es-MX_13000444.pdf (mytobiidynavox.com)
  14. Tobii Eye Tracker 5L | Engineered for innovation – Tobii – Tobii
  15. TD Pilot Product Support – Tobii Dynavox Global

4. Archivo PDF

Debate0en Interacción tangible PEC1 – ¿Qué es la interacción tangible?

Deja un comentario