La síntesis por reglas

La síntesis por reglas
1/4
La síntesis por reglas
Características generales
El Pattern Playback de los Laboratorios
Haskins
El sistema Delta de desarrollo de reglas
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis por reglas
Características generales
• Unidades: fonemas, alófonos o tramas
• Para cada unidad se almacenan los valores de los
parámetros acústicos que la definen.
• Las reglas permiten determinar las características
acústicas de cada una de las unidades y establecen la
manera de concatenarlas
• Se basa en el conocimiento fonético obtenido del
análisis del habla natural y en resultados de pruebas de
percepción
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Pattern Playback
Pattern Playback
Haskins Laboratories
Haskins Laboratories
• Sistema analógico de reproducción de
espectrogramas estilizados
http://www.haskins.yale.edu/featured/sentences/ppsentences.html
http://www.haskins.yale.edu/featured/patplay.html
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis por reglas
2/4
Pattern Playback
Pattern Playback
Haskins Laboratories
Haskins Laboratories
http://www.haskins.yale.edu/featured/sentences/ppsentences.html
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
http://www.haskins.yale.edu/featured/sentences/ppsentences.html
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Pattern Playback
Pattern Playback
Haskins Laboratories
Haskins Laboratories
http://www.haskins.yale.edu/featured/sentences/ppsentences.html
• El Pattern Playback como
herramienta para el estudio de la
percepción
Continuum sonoro [b d g]
http://www.haskins.yale.edu/featured/bdg.html
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis por reglas
3/4
Pattern Playback
Delta Rule Development System
Haskins Laboratories
(Hertz, Kadin & Karplus, 1985)
Estímulos que constituyen un continuum sonoro [b
d g]
http://www.haskins.yale.edu/featured/bdg.html
• Delta: “ high-level programming language [...]
for expressing synthesis rules”
• “The system centers around the multi-tiered
delta data structure, custom designed for
flexibility and expressive power in representing
utterances and formulating rules”
http://www.novaspeech.com/sue_hertz.htm
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Delta Rule Development System
input: |E
|X |C |I
|T |I |N |G |! |
text:
|e
|x |c |i
|t|e |i |n |g |!
syllable: |stress0 |stress1
|stress0
| |
phone: |X
|k |s |a
|y |D| |I |G | |
AV:
|55
|0
|60
50 |55
| |
F0:
|129 |
|137 |
|70| | |
Ms:
|17 |18 |65 |130 |30|0 |70 |50 |65 |120 | |
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
Delta Rule Development System
(Hertz, Kadin & Karplus, 1985)
• Reglas de modificación de rasgos
• Añaden cambios dependientes del contexto a la
matriz de rasgos fonéticos
• Reglas de parámetros
• Crean una cadena de parámetros de control del
sintetizador a partir de una matriz de rasgos
fonéticos
• Asignan duraciones segmentales
• Determinan la evolución temporal de los parámetros
de control del sintetizador
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola
La síntesis por reglas
4/4
Conversión de texto en habla
mediante el sistema Delta
1983-2001 Eloquent Technology Inc.
Ithaca, NY
• voz masculina
• voz femenina
Susan Hertz
http://www.novaspeech.com/sue_hertz.htm
Joaquim Llisterri
Grup de Fonètica, Departament de Filologia Espanyola