La síntesis del habla 1/8 La síntesis del habla Objetivos de la síntesis del habla Objetivos Nociones generales sobre la síntesis Líneas de investigación actuales Resultados conseguidos en síntesis del habla Aplicaciones de la síntesis del habla Diseño de una aplicación en síntesis del habla • El objetivo de la síntesis del habla es la producción (generación) artificial de mensajes orales • La síntesis es una técnica complementaria del reconocimiento en la comunicación persona máquina Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola La síntesis del habla Generación de una señal vocal • Síntesis a partir de la decodificación de unidades sonoras previamente codificadas • Síntesis a partir de un texto escrito (CTH conversión de texto en habla - TTS Text to Speech Synthesis) • Síntesis a partir de representaciones conceptuales Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola La síntesis del habla Del texto ... … al habla GTP-UPC Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola La síntesis del habla 2/8 La síntesis del habla “Carlos”, incorporado al sistema operativo Mac OS (v.9) de Apple Nociones generales sobre la síntesis • Parámetros para la caracterización de los sistemas de síntesis • Condicionantes lingüísticos y condicionantes tecnológicos • Relación entre el sistema y la aplicación • La síntesis como modelo de producción del habla y como aplicación tecnológica • El papel del conocimiento fonético en la síntesis Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola • La voz • Inteligibilidad • Naturalidad • Versatilidad • Mensajes limitados • Mensajes ilimitados • Complejidad del procesamiento Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Parámetros para la caracterización de los sistemas de síntesis Alarmas industriales Inteligibilidad Parámetros para la caracterización de los sistemas de síntesis Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Telecomunicaciones Automóviles Videojuegos Naturalidad Bristow (1984) Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola La síntesis del habla 3/8 Parámetros para la caracterización de los sistemas de síntesis Calidad requerida (naturalidad o inteligibilidad) Parámetros para la caracterización de los sistemas de síntesis Versatilidad Grabación digital Unidades parametrizadas Rendimiento ideal Conversión de texto a habla Síntesis paramétrica Complejidad Síntesis por reglas Calidad Tamaño del vocabulario Bristow (1984) Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Señal codificada Flanagan (1982, 1984) Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Líneas de investigación actuales Líneas de investigación actuales • Desarrollo de métodos estandarizados para la evaluación de los resultados de la síntesis • Estudio de los factores cognitivos que inciden en la percepción del habla sintetizada • Mejora de la naturalidad de los sistemas existentes, especialmente en el campo de la prosodia • Introducción de conocimientos lingüísticos en la síntesis extraídos de grandes bases de datos • Flexibilidad en la selección de la voz sintetizada y en la producción de enunciados que reflejen actitudes del hablante y estilos de habla diferentes • Síntesis multimodal Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola La síntesis del habla 4/8 Resultados conseguidos en síntesis del habla Sistemas de conversión de texto en habla Sistemas de síntesis “Chips hablantes” Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Sistemas de síntesis • Inteligibilidad media • Calidad media o baja • Fácilmente integrables en cualquier sistema informático • Número de mensajes ilimitado • Procesamiento relativamente simple Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Sistemas de conversión de texto en habla • Inteligibilidad muy elevada • Calidad y naturalidad relativamente altas • Número de mensajes ilimitado • Procesamiento muy complejo Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Chips hablantes • Calidad baja o media • Introducidos en electrodomésticos,videojuegos, automóviles... • Número limitado de mensajes previamente almacenados Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola La síntesis del habla 5/8 Aplicaciones de la síntesis del habla Síntesis de palabras aisladas Síntesis a partir del texto (Conversión de texto en habla) Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Síntesis de palabras aisladas Síntesis de palabras aisladas • Aplicaciones industriales • Generación de mensajes sobre el estado de un sistema: alarmas • Aplicaciones a servicios públicos • Generación de anuncios: transportes, lugares públicos Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Aplicaciones domésticas • Aplicaciones domésticas • Electrodomésticos • Juguetes • Juegos • Coches • Distribuidores de bebidas, tabaco Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola La síntesis del habla 6/8 Síntesis de palabras aisladas • Aplicaciones a invidentes • Reloj, calculadora, termómetro, despertador... hablantes • Indicadores de planta, semáforos Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Síntesis a partir del texto Conversión de texto en habla • Sistemas de información telefónica • Páginas Amarillas • Información meteorológica, noticias • Información ciudadana: transportes, farmacias, museos, cines Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Síntesis a partir del texto Conversión de texto en habla • Acceso telefónico a textos escritos • Consulta a distancia de bases de datos • Mensajería vocal, correo electrónico • Portales de voz Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola La síntesis del habla 7/8 Lectura del correo electrónico Síntesis a partir del texto Conversión de texto en habla • Aplicaciones a los invidentes • Lectura de textos en soporte electrónico • escáner + reconocimiento óptico de caracteres + conversión de texto en habla • Aplicaciones a los disminuidos vocales • Prótesis vocales • Síntesis a partir de conceptos para simplificar la tarea de teclear • Síntesis a partir de ideogramas Bliss Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Kurzweil 1000, Kurzweil Educationsl Systems Crespeaker, Crestwood Communication Aids http://www.kurzweiledu.com/kurz1000.aspx http://www.communicationaids.com/ 200 palabras/segundo 400 palabras/segundo Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola La síntesis del habla 8/8 Diseño de una aplicación en síntesis del habla • Concept trial • Consideración de la utilidad del producto y realización de pruebas con un interfaz de evaluación que permite verificar si el concepto del diseño es adecuado para el entorno de aplicación • Diseño del programa • Elección de los mensajes que debe producir el sistema tamaño del vocabulario • Consideración de las necesidades de inteligibilidad y naturalidad • Evaluaciones de campo Joaquim Llisterri Grup de Fonètica, Departament de Filologia Espanyola