La síntesis del habla

Anuncio
La síntesis del habla
1/8
La síntesis del habla
Objetivos de la síntesis del habla
Objetivos
Nociones generales sobre la síntesis
Líneas de investigación actuales
Resultados conseguidos en síntesis del habla
Aplicaciones de la síntesis del habla
Diseño de una aplicación en síntesis del habla
• El objetivo de la síntesis del habla es
la producción (generación) artificial
de mensajes orales
• La síntesis es una técnica
complementaria del reconocimiento
en la comunicación persona máquina
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis del habla
Generación de una señal vocal
• Síntesis a partir de la decodificación de unidades
sonoras previamente codificadas
• Síntesis a partir de un texto escrito (CTH
conversión de texto en habla - TTS Text to
Speech Synthesis)
• Síntesis a partir de representaciones
conceptuales
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis del habla
Del texto ...
… al habla
GTP-UPC
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis del habla
2/8
La síntesis del habla
“Carlos”,
incorporado al
sistema
operativo Mac
OS (v.9) de
Apple
Nociones generales sobre la síntesis
• Parámetros para la caracterización de los sistemas
de síntesis
• Condicionantes lingüísticos y condicionantes
tecnológicos
• Relación entre el sistema y la aplicación
• La síntesis como modelo de producción del habla y
como aplicación tecnológica
• El papel del conocimiento fonético en la síntesis
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
• La voz
• Inteligibilidad
• Naturalidad
• Versatilidad
• Mensajes limitados
• Mensajes ilimitados
• Complejidad del procesamiento
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Parámetros para la caracterización de los
sistemas de síntesis
Alarmas industriales
Inteligibilidad
Parámetros para la caracterización de los
sistemas de síntesis
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Telecomunicaciones
Automóviles
Videojuegos
Naturalidad
Bristow (1984)
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis del habla
3/8
Parámetros para la caracterización de los
sistemas de síntesis
Calidad
requerida
(naturalidad o
inteligibilidad)
Parámetros para la caracterización de los
sistemas de síntesis
Versatilidad
Grabación digital
Unidades
parametrizadas
Rendimiento
ideal
Conversión de
texto a habla
Síntesis
paramétrica
Complejidad
Síntesis por reglas
Calidad
Tamaño del vocabulario
Bristow (1984)
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Señal
codificada
Flanagan
(1982, 1984)
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Líneas de investigación actuales
Líneas de investigación actuales
• Desarrollo de métodos estandarizados para
la evaluación de los resultados de la síntesis
• Estudio de los factores cognitivos que inciden
en la percepción del habla sintetizada
• Mejora de la naturalidad de los sistemas
existentes, especialmente en el campo de la
prosodia
• Introducción de conocimientos lingüísticos en
la síntesis extraídos de grandes bases de
datos
• Flexibilidad en la selección de la voz
sintetizada y en la producción de enunciados
que reflejen actitudes del hablante y estilos
de habla diferentes
• Síntesis multimodal
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis del habla
4/8
Resultados conseguidos en síntesis del habla
Sistemas de conversión de texto
en habla
Sistemas de síntesis
“Chips hablantes”
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Sistemas de síntesis
• Inteligibilidad media
• Calidad media o baja
• Fácilmente integrables en cualquier sistema
informático
• Número de mensajes ilimitado
• Procesamiento relativamente simple
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Sistemas de conversión de texto en habla
• Inteligibilidad muy elevada
• Calidad y naturalidad
relativamente altas
• Número de mensajes ilimitado
• Procesamiento muy complejo
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Chips hablantes
• Calidad baja o media
• Introducidos en
electrodomésticos,videojuegos,
automóviles...
• Número limitado de mensajes
previamente almacenados
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis del habla
5/8
Aplicaciones de la síntesis del habla
Síntesis
de palabras aisladas
Síntesis a partir del texto
(Conversión de texto en habla)
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Síntesis de palabras aisladas
Síntesis de palabras aisladas
• Aplicaciones industriales
• Generación de mensajes sobre el
estado de un sistema: alarmas
• Aplicaciones a servicios públicos
• Generación de anuncios: transportes,
lugares públicos
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Aplicaciones domésticas
• Aplicaciones domésticas
• Electrodomésticos
• Juguetes
• Juegos
• Coches
• Distribuidores de bebidas, tabaco
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis del habla
6/8
Síntesis de palabras aisladas
• Aplicaciones a invidentes
• Reloj, calculadora, termómetro,
despertador... hablantes
• Indicadores de planta, semáforos
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Síntesis a partir del texto
Conversión de texto en habla
• Sistemas de información telefónica
• Páginas Amarillas
• Información meteorológica, noticias
• Información ciudadana: transportes,
farmacias, museos, cines
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Síntesis a partir del texto
Conversión de texto en habla
• Acceso telefónico a textos escritos
• Consulta a distancia de bases de datos
• Mensajería vocal, correo electrónico
• Portales de voz
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis del habla
7/8
Lectura del correo electrónico
Síntesis a partir del texto
Conversión de texto en habla
• Aplicaciones a los invidentes
• Lectura de textos en soporte electrónico
• escáner + reconocimiento óptico de caracteres +
conversión de texto en habla
• Aplicaciones a los disminuidos vocales
• Prótesis vocales
• Síntesis a partir de conceptos para simplificar la tarea de
teclear
• Síntesis a partir de ideogramas Bliss
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Kurzweil 1000, Kurzweil Educationsl Systems
Crespeaker, Crestwood Communication Aids
http://www.kurzweiledu.com/kurz1000.aspx
http://www.communicationaids.com/
200 palabras/segundo
400 palabras/segundo
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis del habla
8/8
Diseño de una aplicación en síntesis del habla
• Concept trial
• Consideración de la utilidad del producto y realización
de pruebas con un interfaz de evaluación que permite
verificar si el concepto del diseño es adecuado para el
entorno de aplicación
• Diseño del programa
• Elección de los mensajes que debe producir el sistema tamaño del vocabulario
• Consideración de las necesidades de inteligibilidad y
naturalidad
• Evaluaciones de campo
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Descargar