Tecnologías para la enseñanza de la pronunciación en español...

Enseñanza de la pronunciación asistida por ordenadorAproximaciones en la EPAO

Reconocimiento de habla y EPAOReflexiones finales

Tecnologías para la enseñanza de lapronunciación en español como lengua

extranjera

Joaquim LlisterriUniversitat Autònoma de Barcelona

http://liceu.uab.cat/~joaquim

II Congreso Internacional de Español como Lengua ExtranjeraUniversidad de Costa Rica

10 de marzo de 2017

Joaquim Llisterri Tecnologías para la enseñanza de la pronunciación

http://liceu.uab.cat/~joaquim



1 La enseñanza de la pronunciación asistida porordenador

2 Aproximaciones empleadas en los sistemas deenseñanza de la pronunciación asistida por ordenador

3 El reconocimiento automático del habla en los sistemasde enseñanza de la pronunciación asistida por ordenador

4 Reflexiones finales




La enseñanza de la pronunciación asistida porordenador

Interés por la pronunciación en el contexto de laenseñanza de lenguas asistida por ordenador (ELAO -CALL, Computer Assisted Language Teaching)

EPAO: Enseñanza de la Pronunciación Asistida porOrdenador (CAPT, Computer Assisted PronunciationTeaching)




La enseñanza de la pronunciación asistida porordenador

Facilitada por el desarrollo de los sistemas detratamiento automático del habla

Técnicas de visualización de la señal sonora en tiemporealReconocimiento automático del hablaConversión de texto en habla

Surgimiento de sistemas de autoaprendizaje quecontienen actividades o materiales para la práctica de lapronunciación

Cursos de uso local en un ordenadorSistemas en líneaAplicaciones (apps) para dispositivos móviles




Descripciones articulatoriasAudiciónAudición y repeticiónAudición y repetición con evaluación









Aproximaciones empleadas en los sistemas deenseñanza de la pronunciación asistida por ordenador

Escudero, D. y Carranza, M. (2015). Nuevaspropuestas tecnológicas para la práctica yevaluación de la pronunciación del español comolengua extranjera. En M. P. Celma, M. J. Gómez delCastillo, y C. Morán (Eds.), Actas del L CongresoInternacional de la AEPE (Asociación Europea deProfesores de Español). La cultura hispánica: de susorígenes al siglo XXI (pp. 218-227). UniversidadIsabel I de Castilla, Burgos, España. 20-24 de juliode 2015.http://cvc.cervantes.es/ensenanza/biblioteca_ele/aepe/pdf/congreso_50/congreso_50_24.pdf

https://www.infor.uva.es/~descuder/

https://uab.academia.edu/MarioCarranza


http://cvc.cervantes.es/ensenanza/biblioteca_ele/aepe/pdf/congreso_50/congreso_50_24.pdf










Descripciones articulatorias

Descripciones explícitas de la posición de losarticuladores en la producción de un sonido del habla

Ilustradas conRepresentaciones estáticasAnimacionesFilmaciones reales

Puede implicar el uso del metalenguaje de la anatomía






Fonética: Los sonidos del español. Iowa: The University of Iowa.

http://soundsofspeech.uiowa.edu/spanish/spanish.html


http://soundsofspeech.uiowa.edu/spanish/spanish.html





Rosetta Stone (2016). Tell Me More Spanish.

http://www.rosettastone.es/







Implican una “proyección” (mapping) entre la imagen yla posición de los articuladores del estudiante

Requieren buenas habilidades propioceptivas

H Si se presentan sonidos aislados, no se tiene en cuenta lacoarticulación

H No se considera la posibilidad de la compensaciónarticulatoria

H Se asume (implícitamente) que la causa del error es ladificultad para la articulación de un sonido





Audición

Presentación de una palabra o de un enunciado que elestudiante debe escuchar

Estímulo acompañado deRepresentación ortográficaTraducción a la L1 del alumnoImagen





Audición

Sevilla, P. (2016). Spanishpronunciation. Audio (v. 4.0.0).

https://play.google.com/store/apps/details?id=com.

mobincube.la_fonetica_espanola_audio.sc_3ZYVUW


https://play.google.com/store/apps/details?id=com.mobincube.la_fonetica_espanola_audio.sc_3ZYVUW







AudiciónEscritura y audición

El estudiante escribe una palabra o un texto y puedeescuchar su lectura en voz alta

ç Habla sintetizada mediante conversión de texto en hablacomo modelo de pronunciación





Escritura y audición

Suen, J. (2017). SpanishSpeech - Pronouncing Spanish

words for you (v. 1.0).





Escritura y audición

Clump Software (2017).Pronunciation King (Spanish)

(v. 1.3).

https://play.google.com/store/apps/details?id=clump.pk.es.activity








Audición

¿Actividades enfocadas al trabajo sobre la percepción o ala lectura?

H La representación ortográfica puede inducir a erroresdebidos a la transferencia de las reglas de asociaciónentre grafías y sonidos en la L1





Aproximaciones basadas en la escritura

“L’écrit s’avérera aussi nefaste àl’intégration de la prononciation que latraduction à celle de la syntaxe” (p. 59).

Renard, R. (1979). Introduction à la méthode verbo-tonale decorrection phonétique (3ème ed.). Bruxelles - Mons: Didier -Centre International de Phonétique Appliquée.





Audición y repetición

Presentación de un estímulo auditivo (en general,acompañado de la representación ortográfica y, enocasiones, de la traducción) que el estudiante deberepetir

Posibilidad de reducir la velocidad de habla del estímuloPosibilidad de que el estudiante grabe y escuche supropia producción: autoevaluación






Study Languages.(2017). Spanishpronunciation -

StudySpanish.com.

http://studyspanish.com/pronunciation








Study Languages. (2017). Spanish pronunciation -StudySpanish.com.








H Estímulos asociados en muchas ocasiones con la formaortográfica

H En algunos casos, ejercicios con palabras aisladas

H No se proporciona una evaluación






“La tipología de los materiales utilizadospara la enseñanza de la fonética españolasigue centrada en ejercicios de ‘escucha yrepite’, drills, lecturas en voz alta y listadosde palabras” (p. 59).

Boquete, G. (2014). Presencia actual de la fonéticaen el aula de ELE y su reflejo en la enseñanza de laprosodia. Revista Internacional de LenguasExtranjeras / International Journal of ForeignLanguages, 3, 7-29. doi:10.17345/rile20147-29

http://www.alcalingua.com/

es/users/gabino-boquete-martín


http://www.alcalingua.com/es/users/gabino-boquete-mart�n







Audición y repeticiónAudición y repetición con autoevaluación

Presentación de estímulos auditivos que constituyenmodelos que el estudiante debe repetir

El estudiante graba su propia pronunciación, la escuchay la compara con el modelo nativo

Si la comparación no resulta satisfactoria, se repite elproceso





Audición y repetición con autoevaluación

“Ouino lets you record your voice and compare the recordingwith the voice of a native speaker. By recording yourself,you’ll be able to hear what you are doing wrong and will beable to record it again and again until you get it exactly likethe native speaker or until you are satisfied with yourpronunciation.”

Ouino Languages (2017). User guide: The pronunciation module.Québec: Ouino Languages.https://www.ouinolanguages.com/guide/part3/


https://www.ouinolanguages.com/guide/part3/





Ouino Languages(2017). Ouino

LanguagesSpanish.

https://www.ouinolanguages.com/spanish/









Bravolol (2017). LearnSpanish: Phrases & words for

travel in Spain (v. 10.1).http://bravolol.com/

learn-spanish/

ç Versión ralentizada delestímulo

ç Autoevaluación


http://bravolol.com/learn-spanish/

http://bravolol.com/learn-spanish/





H ¿Capacidad de autoevaluación en estudiantes de nivelelemental?

H La “criba fonológica”





La metáfora de la criba





La “criba fonológica”

El sistema de categoríasde la L1 actúa como un“filtro” en la percepciónde las categorías de la L2

ç “Sordera fonológica”

Polivanov, E. (1931). La perception des sons d’une langue étrangère. Travaux du CercleLinguistique de Prague, 4.Troubetzkoy, N. S. (1939). Grundzüge der phonologie. Travaux du Cercle Linguistique dePrague, 7.





La “criba fonológica”

Francés:/s/ [pwa"sõ] ~/z/ [pwa"zõ]Español:[z] ([s

ˇ]) ["mizmo] ["dezðfle]





El papel de la percepción

“Ainsi s’expliquent nos erreurs deprononciation lorsque nous voulonsreproduire un message en langueétrangère. Nous le reproduisons mal parceque nous le percevons mal: cette mauvaiseperception résulte d’une structuration deséléments informationnels inadéquate cardictée par des habitudes sélectives propresà la perception de notre languematernelle” (p. 24).

Renard, R. (1979). Introduction à la méthode verbo-tonale decorrection phonétique (3ème ed.). Bruxelles - Mons: Didier -Centre International de Phonétique Appliquée.





Audición y repetición con evaluación

Presentación de un modelo para que el estudiante lorepita

El estudiante graba su propia pronunciación y recibeuna evaluación automática basada en la semejanza entrela producción nativa y la no nativa

ç Diferentes estrategias para presentar la evaluación






Edushire Technologies (2016).Learn Spanish with

SpeakTribe.http://www.speaktribe.com/

spanish/

ç Modelo con hablasintetizada


http://www.speaktribe.com/spanish/

http://www.speaktribe.com/spanish/





Babbel (2017).Learn Spanishwith Babbel (v.

5.6.6).

https://play.google.com/store/apps/details?id=com.babbel.mobile.

android.es


https://play.google.com/store/apps/details?id=com.babbel.mobile.android.es










Babbel (2017). Learn Spanish with Babbel.

https://www.babbel.com


https://www.babbel.com





Duolingo (2017). Duolingo Spanish.https://www.duolingo.com/course/es/en/Learn-Spanish-Online


https://www.duolingo.com/course/es/en/Learn-Spanish-Online





Sanako (2017). Pronounce Live.http://www.sanako.com/en-gb/products/pronounce-live/


http://www.sanako.com/en-gb/products/pronounce-live/





Sanako (2017). PronounceLive.


ç Modelo con hablasintetizada

Voces de la empresa Ivona

Español de América

Español peninsular








Rocket Languages (2017). Learn Spanish online.https://www.rocketlanguages.com/spanish/learn/

learn-spanish-online/


https://www.rocketlanguages.com/spanish/learn/learn-spanish-online/

https://www.rocketlanguages.com/spanish/learn/learn-spanish-online/





Transparent Language (2017). Transparent Language Online - Spanish.

http://www.transparent.com


http://www.transparent.com





Rosetta Stone (2016). Tell Me More Spanish.http://www.rosettastone.es/






Audición y repetición con evaluaciónEstrategias para proporcionar una evaluación

Forma escrita de la palabra pronunciadaç SpeakTribe

“Correcto - Incorrecto”ç Babbel

“Correcto - (Casi correcto) - Incorrecto” con traducciónç Duolingo

Puntuación y localización del errorç Sanako, Rockett Language, Transparent Language,

Rosetta Stone






H La información en términos de “correcto - incorrecto” noprecisa la localización del error en el enunciado

H La puntuación automática no informa sobre lalocalización del error

H La localización del error y la puntuación automática nose acompañan, en general, de indicaciones sobre cómocorregirlo






Indicaciones para lacorrección del error

ç Descripciónarticulatoria

ç Representacionesarticulatoriasdinámicas

Rosetta Stone (2016). Tell Me MoreSpanish.








Indicaciones parala corrección delerror

ç Curvamelódica

ç Forma deonda: perfilde intensidad

Rosetta Stone (2016). Tell Me MoreSpanish.






Reconocimiento del hablaReconocimiento del habla en EPAO










El reconocimiento automático del hablaEl reconocimiento automático del habla en los sistemasde enseñanza de la pronunciación asistida porordenador





Estructura de un sistema de reconocimiento automáticodel habla

Overview of a typical speech recognition system. (2010). Interactive Speech.http://interactive-speech.com/2010/01/26/

overview-of-a-typical-speech-recognition-system/


http://interactive-speech.com/2010/01/26/overview-of-a-typical-speech-recognition-system/

http://interactive-speech.com/2010/01/26/overview-of-a-typical-speech-recognition-system/




Reconocimiento automático del habla

Etapa deentrenamiento delsistema: seproporciona lainformaciónnecesaria para elfuncionamiento






Corpus para elentrenamiento delsistema

Corpus oralCorpus textual






A partir del corpusoral se creanmodelos acústicospara cada sonidodel habla






A partir del corpusescrito se crea unmodelo de lenguajey un diccionariofonético






Funcionamientodel sistema a partirde los datosadquiridos durantela etapa deentrenamiento






Análisis de la señal de entrada en parámetros acústicos






Señal de entrada

?

Modelos acústicos

Modelo para [a]

Modelo para [i]






Segmentación y etiquetado fonético a partir de losmodelos acústicos de cada sonido del habla aprendidosdurante la fase de entrenamiento






Modelo de lenguajea

las

ochosieteseis

la

una

Diccionario fonético

mañana [maJana]a [a]las [las]ocho [otSo]






Búsqueda en el modelo de lenguaje creado durante lafase de entrenamiento

Búsqueda en un diccionario con la transcripciónfonética de las palabras






El reconocimiento automático del hablaEl reconocimiento automático del habla en los sistemasde enseñanza de la pronunciación asistida porordenador





Reconocimiento del habla en un sistema de EPAO

Entrenamiento conhablantes nonativos

ç Entrenamientoespecífico paracada L2

ç Necesidad decorpus con laanotación de loserrores





Corpus de español L2 con anotación de errores

Carranza, M. (2013). Intermediate phonetic realizations in a Japanese accented L2 Spanishcorpus. En SLaTE 2013. Speech and Language Technology in Education (pp. 168-171).

Grenoble, France. August 30-31 & September 1st, 2013.http://www.isca-speech.org/archive/slate_2013/sl13_168.html


http://www.isca-speech.org/archive/slate_2013/sl13_168.html




Tipología de errores segmentales

Errores de substitución

Errores de inserción

Errores de elisión





Codificación de errores segmentales

Carranza, M. (2013). Intermediate phonetic realizations in a Japanese accented L2 Spanishcorpus. En SLaTE 2013. Speech and Language Technology in Education (pp. 168-171).

Grenoble, France. August 30-31 & September 1st, 2013.http://www.isca-speech.org/archive/slate_2013/sl13_168.html






Codificación de errores segmentales

a02#26_23

Tipo de error: error de substitución (a)

Segmento esperado en la producción nativa: [e] (02)

Segmento que aparece en la producciónn no nativa: [i]

Segmento anterior: [Bfl

] (26)

Segmento posterior: [s] (23)

Carranza, M. (2013). Intermediate phonetic realizations in a Japaneseaccented L2 Spanish corpus. En SLaTE 2013. Speech and LanguageTechnology in Education (pp. 168-171). Grenoble, France. August 30-31 &September 1st, 2013.http://www.isca-speech.org/archive/slate_2013/sl13_168.html








Análisis acústico dela señal de entrada

Alineación entre laseñal de entrada yel modelo

División ensegmentos

Detección deerrores: diferenciaentre segmentos dela señal de entraday segmentos delmodelo

Puntuación

http://slideplayer.com/slide/1581510/







Alineación: falta decorrespondenciaentre lapronunciación realy la esperada

ç Tipología de erroresespecífica paracada L2

ç Reglas dealineaciónespecífica paracada L2 http://slideplayer.com/slide/1581510/






Alineación

Ottercall (2013). Learn Spanish with speech recognition - Otterwave (v. 1.3).https://itunes.apple.com/us/app/

learn-spanish-with-speech-recognition-otterwave/id547874548?mt=8


https://itunes.apple.com/us/app/learn-spanish-with-speech-recognition-otterwave/id547874548?mt=8

https://itunes.apple.com/us/app/learn-spanish-with-speech-recognition-otterwave/id547874548?mt=8





Variabilidad: unhablante nativopuede aceptar másde una realizaciónfonética para elmismo enunciado

ç Criterios para laevaluación







Variabilidad

Rosetta Stone (2016). Tell Me More Spanish.







Reconocimiento automático del habla en un sistema deEPAO

Parte del buen funcionamiento del sistema depende del“motor de reconocimiento”

Sistema desarrollado específicamente para unaaplicación de enseñanza de L2

Sistemas generales en red usados por navegadores o pordispositivos móviles

Con modelos acústicos de la L2Sin entrenamiento específico





Reconocimiento automático del habla en un sistema deEPAO

El principal problema actual es encontrar la mejor formade presentar la información que recibe el estudiante(feedback) para permitirle corregir el error depronunciación

Modelo nativoPuntuaciónLocalización del errorRepresentaciones acústicasRepresentaciones articulatorias

Necesidad de estudios experimentales para determinarla eficacia de las herramientas




¿Innovación?

“The Internet exponentially increases thedimensions of quantity, speed, andaccessibility in learning environments; but,except for virtual environments like MOOs(Massive Online Open Courses), fewlearning or teaching activities developedso far are genuine pedagogicalinnovations” (p. 59).

Colpaert, J. (2006). Pedagogy-driven design foronline language teaching and learning. CALICOJournal, 23(3), 477-497.

http://www.jozefcolpaert.net






¿Innovación?

“Or, ces mêmes critiques, formulées il y aplus de trois décennies, s’adressent toutautant à l’EAO, dans la mesure où, sous lecouvert d’un habillage informatif attractif,celui-ci véhicule des pratiques et descontenus qui sont restés, au demeurant,fort traditionnels et peu innovants sur leplan méthodologique”.

Billières, M. (20 avril 2016). « Technè » verbo-tonaleet nouvelles technologies informatiques : deuxapproches compatibles ? Au son du fle. Toulouse.http://www.verbotonale-phonetique.com

http://www.verbotonale-phonetique.

com/a-propos/


http://www.verbotonale-phonetique.com

http://www.verbotonale-phonetique.com/a-propos/





¿Innovación?Prácticas realativamente tradicionales

Interfaces en la L1 del estudiante

Presencia habitual de la traducción

Presencia importante de la lengua escrita

Práctica con elementos aislados

Predominio de ejercicios basados en la audición y en larepetición




¿Innovación?Prácticas derivadas de las posibilidades de las tecnologías

H Presentación de modelos con habla sintetizada

H Evaluación basada en sistemas genéricos dereconocimiento automático del habla

H Representaciones acústicas de la señal sonora

N Evaluación automática con puntuación y localizacióndel error

N Componente social de algunas aplicaciones




La formación del profesor

“Les développements des outilsinformatiques peuvent ouvrir desperspectives nouvelles à l’apprentissage dela prononciation, mais il serait regrettablede sacrifier la méthodologie desenseignants sur l’autel des technologiesnouvelles et de minimiser l’importance dela formation des maîtres.”. . .




La formación del profesor

“Le risque est grand, en effet, que lesenseignants ne se retranchent derrière lesNTICE pour s’exonérer d’une véritablequalification professionnelle qui leurassure une totale autonomie et lesaffranchisse de ce qui pourrait biendevenir une prothèse pédagogique”.

Billières, M. (20 avril 2016). « Technè » verbo-tonaleet nouvelles technologies informatiques : deuxapproches compatibles ? Au son du fle. Toulouse.http://www.verbotonale-phonetique.com

http://www.verbotonale-phonetique.

com/a-propos/


http://www.verbotonale-phonetique.com






Tecnologías para la enseñanza de la pronunciación enespañol como lengua extranjera

liceu.uab.cat/~joaquim/applied_linguistics/CIELE_17/CIELE_17.html





Tecnologías para la enseñanza de la pronunciación en español...

Documents

Transcript of Tecnologías para la enseñanza de la pronunciación en español...