Extranet
Intranet
TMT Blog
home mapa web contacto ENGLISH


Empresa
Servicios
Proyectos
Productos
Blogs
Laboratorio
Contacto
Televisión interactiva para todos

Servicios adaptados de ocio, información y teleasistencia a través de la televisión con funcionalidades avanzadas de comunicación por voz en lenguaje natural para personas con discapacidades sensoriales y personas de edad avanzada.


Un consorcio coordinado por TMT Factory formado además por la Universidad Ramón Llull (Enginyeria i Arquitectura La Salle, UserLab), la Universidad Politécnica de Madrid (Departamento de Inteligencia Artificial) y la Universidad Carlos III de Madrid (Departamento de Informática) está llevando a cabo un proyecto de investigación industrial orientado a la investigación planificada relacionada con la Acción Estratégica e-inclusión y e-asistencia del Programa Nacional Español de Tecnologías de Servicios de la Sociedad de la Información, cuyo objeto es la adquisición y aplicación de nuevos conocimientos que puedan resultar de utilidad para contribuir a mejorar considerablemente el servicio IntegraTV.

El nombre del proyecto, IntegraTV-4all, quiere representar los esfuerzos hacia una nueva televisión para todos y para promover el acceso de las personas con discapacidad a las nuevas tecnologías, con un desarrollo tecnológico adecuado y orientado a sus posibilidades y necesidades, y el impulso del diseño para todos en este ámbito.



Universidad Politécnica de Madrid Universidad Carlos III de Madrid La Salle Fundación ONCE



El proyecto también cuenta con la ayuda del Ministerio de Industria, Turismo y Comercio a través de una importante subvención PROFIT, y con la colaboración de la Fundación ONCE, y las empresas ATLAS y Fundosa Teleservicios.

El proyecto IntegraTV-4all quiere extender IntegraTV en nuevas direcciones, a través del desarrollo e integración de un nuevo módulo que contribuya a facilitar la autonomía personal y la integración social de colectivos tales como, primariamente, personas con alguna discapacidad sensorial (ceguera, deficiencias visuales, sordera, hipoacusia, limitaciones de habla). Potencialmente, sin embargo, el resultado del proyecto puede ser útil también para personas con alguna discapacidad física o psíquica i personas de avanzada edad.

El ámbito de la fase piloto del proyecto son tres hoteles de la cadena Confortel (hoteles especialmente preparados para discapacitados) y cuatro usuarios domésticos. De esta manera se demuestra la posibilidad de conectar en teleconferencia usuarios que utilicen el servicio IntegraTV-4all en entornos no homogéneos y al mismo tiempo se demuestra la robustez de la aplicación.



Configuración para diferentes discapacidades sensoriales
Menú de servicios y contenidos adaptados para discapacidades visuales (ASR + TTS)
Avisos para sordos o con hipoacusia
Presentador virtual para personas mayores
(3D +ASR + TTS)


La Fase 1 de desarrollo de IntegraTV-4all incluye el estudio del diseño de la interfaz gráfica y de los contenidos. El equipo de desarrollo de IntegraTV-4all está convencido de que aparte de proporcionar una interfaz de usuario totalmente accesible para las personas con alguna discapacidad, también es imprescindible proporcionar unos contenidos adaptados a esas personas. En este sentido, se lleva a cabo una investigación para ver qué contenidos hay accesibles para personas con discapacidad visual y/o auditiva. Básicamente, los contenidos encontrados son películas y juegos infantiles para personas con discapacidades visuales.

En la Fase 2 del proyecto se implementa un servicio básico de televisión interactiva que permita navegar por los menús usando la voz. Para este servicio IntegraTV-4all básico se utiliza el software de reconocimiento del habla y conversión de texto en habla Verbio (de la empresa ATLAS). El sistema de reconocimiento del habla en lenguaje natural permite seleccionar con la voz los menús disponibles en el contexto actual más una serie de menús de acceso directo desde cualquier punto. El sistema de conversión de texto en habla permite sintetizar de forma automática los textos necesarios para el sistema.

En la Fase 3 del proyecto se implementan los componentes fundamentales del servicio avanzado: el sistema de diálogo con lenguaje natural libre, el locutor virtual (desarrollado por la Universitat Ramon Llull) y el presentador virtual. Se plantea la incorporación de técnicas avanzadas de interacción hombre-máquina para hacer posible que ciertos servicios de IntegraTV-4all (por ejemplo, los servicios de despertador y dormidor) se ofrezcan a través de un diálogo libre entre el usuario y el sistema (ver figura).

Para ello es necesario:

1)  Desarrollar la capacidad del sistema para comprender el lenguaje;
2)  Facilitar el seguimiento de un diálogo pro-activo y de iniciativa mixta (en el que tanto el sistema como el usuario pueden intervenir en el mismo).


Casos

Para facilitar la comprensión del funcionamiento del proyecto, se presentan de 2 posibles casos relativos a la prueba piloto en hoteles:

Caso 1        Caso 2

Para hacer todo esto posible se parte de los resultados alcanzados por los equipo de la Universidad Politécnica de Madrid y la Universidad Carlos III de Madrid, en los proyectos europeos ADVICE (Virtual Sales Assistant for the Complete Customer Service Process in Digital Markets) y VIP-ADVISOR (Virtual, Independent Advisor for Personal Insurance and Finance Risk Management). El esquema de funcionamiento del servicio final se describe en la siguiente figura. El usuario se comunica mediante una expresión en lenguaje natural que es analizada por un reconocedor de habla. La salida de este reconocedor se procesa para extraer tanto la semántica como la pragmática, esto es, lo que dice el usuario y la intención o finalidad con la que lo dice. Esta información es interpretada en el contexto de una conversación por un gestor de la interacción que decide de qué modo debe responder el sistema y para ello utilizará información tanto del servicio que se solicite como conocimiento sobre características o preferencias del usuario, aunque el uso de perfiles de usuario es costoso y posiblemente estará muy limitado en los primeros prototipos. Una vez decidida la respuesta, se genera una expresión en lenguaje natural que es transmitida finalmente al usuario mediante un sintetizador de voz.


Esquema de comunicacion por voz en lenguaje natural »



Ficha técnica:
Ver más imágenes:
Tipo de producto: Sistema de televisión interactiva
Encargo: Análisis y desarrollo (incluyendo diseño y estudio de usabilidad)
Arquitectura: .NET
Comunicaciones: SOAP, lenguaje natural, ASR, TTS
Gestión de diálogos : Modelo de hilos, agentes software
Desarrollo: Visual Studio C#
Cliente: Integra Interactive
Web: www.integra.tv
Menú para discapacitados:
ampliar imagen
Avisos para sordos:
ampliar imagen
Presentador virtual:
ampliar imagen
 
Internet Global CongressProyecto finalista en los premios IGC 2005 a la innovación digital que el Internet Global Congress (www.igcweb.net) promueve. El IGC 2005 se celebró en Barcelona
del 6 al 10 de junio y tuvo como objetivo promover la innovación y conocimiento en la sociedad digital.

Link Relacionados
El proyecto cuenta con la ayuda del Ministerio de Industria, Turismo y Comercio. Ministerio de Industria, Turismo y Comercio
copyright©tmtfactory 2004 · www.tmtfactory.com