13 de noviembre de 2000 ~joaquim/teaching/...

Joaqu im LlisterriGrup de Fonegravetica Seminari d e F ilologi a i In formagravetica

Departam en t de Filologia Espanyola Uni versitat Autogravenoma de Barcelon a

Intro duccioacuten a las tecnologiacuteas lin guumliacutestica s y su s aplicacionesIntro duccioacuten a las tecnologiacuteas lin guumliacutestica s y su s aplicacionesFacultad de Filosofiacutea y Letras Univers idad de DeustoFacultad de Filosofiacutea y Letras Univers idad de Deusto

13 de noviemb re de 200013 de noviemb re de 2000

La lengua y las nuevas tecnologiacuteasLa lengua y las nuevas tecnologiacuteasJoaquim LlisterriJoaquim Llisterri

Departament de Filologia EspanyolaDepartament de Filologia EspanyolaUniversitat Autogravenoma de BarcelonaUniversitat Autogravenoma de BarcelonaJoaquimLlisterriuabesJoaquimLlisterriuabes

httpliceuuabes~joaquimhomehtmlhttpliceuuabes~joaquimhomehtml





httpliceuuabes~joaquimteachingLanguage_technologyDeusto_2000Deusto_2000html



La lengua y las nuevas tecnologiacuteas

Ingenieriacutea linguumliacutestica e industrias de lalengua

La comunicacioacuten oral con losordenadores

La conversioacuten de texto en habla

Los sistemas de diaacutelogo



Ingenieriacutea linguumliacutestica(Language Enginee ring )

ldquoAplicacioacuten de los c onocimientos sobre la lenguaal desarrollo de sistemas informaacuteticos q ue puedanreconocerreconocer comprendercomprender interpretarinterpretar y gen erargen erar ellenguaje humano en todas sus formasen todas sus formasrdquo

Ingenieriacutea linguumliacutestica Coacutemo aprovechar la fuerza del lenguajeLuxembourg Anite Systems Versioacuten espantildeola Observatorio Espantildeolde Industrias de la Lengua Instituto Cervanteshttp wwwhltcentralorglee sbrochharnesshtml



Ingenieriacutea linguumliacutestica

bull La ingenieriacutea linguumliacutestica se basa en

Procesamiento del lenguaje natural(NLP Natural Language Processing)Tecnologiacuteas del habla (SpeechTechnologies)

Recursos linguumliacutesticos



Industrias de la lengua

ldquoAbarca un a serie de actividades comerciales enlas q ue el tratam iento del len guaje por personaspor maacutequinas o por un a com binacioacuten de unas yotras forma u na parte fundamental del product oproduct oo servicioserviciordquo

Lenguaje y tecnologiacutea De la torre de Babel a la aldea global Luxemburgo Oficina de Publicaciones Oficiales de las ComunidadesEuropeas 1997



A World of Understanding 2000Information Society Directorate General European Commission










Ventajas de la comunicacioacuten oralpersona-maacutequina

Liber tad para otras tare as sim ultaacuteneas

Acceso al ordenador mediante el teleacutefono

Sistem a poten cialm ente econoacutem ico

Medio de comunicacioacuten natu ral



Libertad para otras tareas simultaacuteneas

Libera las manos y las vista

Es omnidireccional y permite movilidadNo interfiere con otras actividades




bull Entrada de datos sobre productos en gestioacuten defondos de almaceacuten

bull Control de calidad en entornos industr iales

bull Acceso a informacioacuten en cabinas de aviones

bull Control de los accesorios e n veh iacuteculos

bull Dictado de informes meacutedicos o legales



VODIS Voice Driving Interactive System




Rapidez de acceso

Facilidad de acceso sin equipo especiacuteficoIndependiente de la distancia




bull Horarios de transportes puacute blicos

bull Consulta de paacuteginas amarillas

bull Consulta de notas

bull Banc a electroacutenica

bull Centralitas automatizadas

bull Lectura d el correo e lectroacutenico



Sistema potencialmente econoacutemico

Utilizacioacuten de equipos electroacutenicos

Produccioacuten a bajo costeNo requiere el uso de pantalla ni deteclado



Medio de comunicacioacuten natural

CHAPANIS A (1975) Interactive HumanCommunication Scientific A merican 232

36-42



Canales de comunicacioacuten

Visual

Microacutefono y altavozMecanismo de transmisioacuten de escrituramanuscrita

Maacutequina de escribir e impresora adistancia (Telex)



Tiempo de resolucioacuten de problemas

bull Cualquier c anal e n combinacioacuten con el hablamenos de 15 m inutosmenos de 15 m inutos

bull Uacutenicam ente el habla 16 minut os16 minut os

bull Cualquier c anal soacutelo o combinado con otrosmaacutes de 20 minut os

bull Uacutenicam ente escritura a mano omecanografiada maacutes d e 30 minutosmaacutes d e 30 minutos



Limitaciones de la comunicacioacuten oralpersona-maacutequina

Falta d e naturalidad de los sistem as de siacutente sis

Dif icultades en el reconocimiento de l hablacontinu a en sistemas independientes d el locutor

Falta d e adec uacioacuten de los m odelos de diaacutelogopersona-m aacutequina










Esquema general de unconversor de texto en habla

text-to-speech T TSbull Un sistema de conversioacuten de texto en habla

transformatransforma cualqu ier texto escrito en surealizacioacuten sonora

bull La e structura de un conversor suele sermodularmodular

bull Cada m oacutedulo se ocupa de un aspec to de latransformacioacuten de la cadena d e caracte resinicial hasta llegar a la sentildeal sonora




Pre-procesado y normalizacioacuten

Anaacutelisis linguumliacutestico Tran scr ipc ioacuten foneacutetica

Asignacioacuten de prosodia Selecc ioacuten de unidades

Conversioacuten en paraacutemetros acuacutesticos



Semisiacutelaba

bull Fragmento de siacutelaba comprendidoentre su inicio y el centro de la vocal oentre el centro de la vocal y su final

kasa - ka + asa

Unidades de siacutentesis




Difonemabull Segmento acuacutestico que incluye la transicioacuten

entre dos f onemas consecutivos formado porla parte estac ionaria del primero latransicioacuten del p rimero al segun do y la parteestacionaria d el segundo

kasa - k + ka + as + sa + a



El modelo de la fuente y el filtroen la siacutentesis del habla

bull Implica la ut ilizac ioacuten de conocimiento f oneacuteticoen la parametrizac ioacuten de las unidades desiacutentesis

Fuente

Filtro



Fuente y filtro en la produccioacuten del habla

Filtr o

Fuente






Modelo del tracto vocal en la siacutent esis de l habla

Fuente perioacutedi caFuente perioacutedi caFuente perioacutedi ca

Fuente aperioacuted icaFuente aperioacuted icaFuente aperioacuted ica

FiltroFiltroFiltro

Sonidos sonoros

Sonidos sordos

Punto y modo dearticulacioacuten



La siacutentesis parameacutetrica

Paraacutemetrospropios de lafoneacutetica acuacutesticapara almacenary sintetizar lasunidades



Actor CSELThttptechnovoicecseltitdemoactordefaulthtm

Es h



ATampT Labs Researchhttpwwwresearchattcom~mjmcgi-binttsdemo

Ingl h

Ingl m

Ingl n



BaBel T echnologieshttpwwwbabeltechcom

Ing h

Ing m

Es h



Bell Labs - Lucent Technologieshttpwwwbell-labscomprojectttsindexhtml

Ing h

Ing m

EsMx h

EsCas h



Elan Lernout amp Hauspiehttpwwwelanfrspeechdemosd_inter0htm

Ing h

Ing m

Es h



Eloquent Technologieshttpwwweloqcomdemoshtml

Ing h

Ing m

EsCas h

EsMx h



Infovox Telia Promotorhttpwwwpromotorteliaseinfovoxlistenhtm

IngA m h

IngBr h

Es h



Laureate British Telecommhttpwwwbtcominnovationexhibitionlaureateinteractivehtm

Ing h-m

Es h

Ing m

Ing h



RealSpeak Lernout amp Hauspiehttpwwwlhscomrealspeakdemocfm

Ing h

Es h



Comparacioacuten de sistemas desarrolla dos p ara el espantildeolhttpmorphldcupennedultts



Comparacioacuten de sistemas desarrolladospara el espantildeol










Moacutedulos de un sistema de diaacutelogo

Un sistema de diaacutelogo es un conjunto deconjunto demoacutedulosmoacutedulos

Reconocimiento de habla Analizador Base de datos Generador de unidades linguumliacutesticas Siacutentesis del habla




bull Moacutedulo principal qu e lleva a cabo el contr ol d elcontr ol d eldiaacutelogodiaacutelogo

coher encia ent re la pr egunta d el usuario y elsistema

resolucioacuten de anaacuteforas y e lipsisgener acioacuten de respuestas

prediccioacuten de las re acc iones del usuario



Tareas de un sistema de diaacutelogo

Reconocimiento de los enunciados del usuario Gestioacuten del diaacutelogo

Anaacutelisis linguumliacutestico (morfoloacutegico s intaacutecticosemaacutentico pragmaacutetico) de los enunciados Creacioacuten de una representacioacuten interna

Tratamiento de la representacioacuten interna enfuncioacuten de la tarea

Generacioacuten de secuencias de respuesta Siacutentesis del habla



Aplicaciones de los sistemas de diaacutelogo

Sistem as de inf ormacioacuten

Sistem as de t ransacc iones

Trad uccioacuten automaacutetica del habla




bull Sistemas de informacioacutenbull Tran sport es puacuteb licos

RAILTEL ARISE MAITS DGXIII CE WAXHOLM Department of Speech Music andHearing KTH

MASK LIMSI-CNRS ATIS SRI International



RAILTEL ARISE MAITSDGXIII CE

ARISE Automatic Railway Information Systems for Europehttpwww2echolulangengenle3arisearisehtml

RAILTEL Railway Telephone Information Servicehttpwww2echolulangengenmlap94railtelhtml

MAIS Multilingual Inquiry Systemshttpwww2echolulangengenmlap94maishtml



WAXHOLM Dept of Speech Music and Hearing KTH httpwww speechkthsewaxholmwaxholm2html

bullInformacioacuten de traacuteficomariacutetimo en elarchipieacutelago de Estocolmo

bullEntrada mediantereconocimiento del habla

bullInformacioacutenproporcionada mediantesiacutentesis del hablacomplementada porsiacutentesis visual y un interfazgraacutefico






MASK LIMSI-CNRS httpwwwlimsifrRechercheTLPkiosk-sncfhtml

MASK Le systeme MA SK vouseacutecoute

USER Euh je v oudrais allerdemain de Paris agrave Bordeaux

MASK A q uelle heure voulez-vouspartir

USER Vers 1230

MASK I l y a un train a 1243voulez-vous reacuteserver

USER Oui en p remiegravere class e



ATIS SRI Internationalhttpwww-speechsricomdemosatishtml

bull Inform acioacuten sobre horarios y tarifas de vuelos

bull Incluye comprensioacuten del lenguaje



ATIS SRI International




bull Sistemas de informacioacutenbull Inform acioacuten ciudadana

MAIRIEVOX CNET Lannion VOYAGER MIT Spoken Language SystemsGroup AdApt Department of Speech Music andHearing KTH

bull Inform acioacuten meteoroloacutegica JUPITER MIT Spoken Language SystemsGroup



VOYAGER MIT Spoken Language Systems Group httpsls-wwwlcsmiteduVOYAGERhtml

ldquoVOYAGER can engage in verbal dialogues with users abouta geographical region within Cambridge Massachusetts inthe USA It can provide users with information aboutdistances travel times or directions b etween objectslocated within this area (eg restaurants hotels post officessubway stops) as well as information such as addresses ortelephone numbers of the objects themselvesAs of the present time VOYAGER operates in a trilingual modewhere the user can select among the three choices EnglishJapanese or Italian for the communication languagerdquo



AdApt Department of Speech Music and Hearing KTHhttpwwwspeechkthsecttprojadapt

bull Inform acioacuten sobre laciudad de Estocolmo

bull Agentesconversacionalespara ayudar en elproce so d e obte ncioacutende informacioacuten

bull Siacutente sis visual







bull Sistemas de informacioacutenbull Consulta de calificac iones

SACC G rupo de Procesamiento de Sentildeales yComunicaciones Universidad de Granada



SACC Un iversidad de Granada httpceres ugressaccindexhtml

ldquoSACC es un sistema automaacutetico de consulta remota de calificacionesdesarrollado por el GiPSyC del Departamento de Electroacutenica yTecnologiacutea de Computadores de la Universidad de GranadaEl sistema se compone de dos subsistemas para hacer posible el accesoa las calificaciones mediante interfaz telefoacutenica y mediante InternetEn ambos casos el acceso se realiza a traveacutes de un menuacute jeraacuterquicoen el que se resuelven la titulacioacutenasignatura y DNI del alumno querealiza la consulta proporcionando el sistema como resultado lacalificacioacuten correspondienterdquo




bull Sistemas de transaccionesbull Reserva de billetes

PEGASUS MIT Spoken Language SystemsGroup

bull Pedidos por teleacute fono SAPLEN Grupo de Procesamiento d e Sentildeales yComunicaciones Universidad de Granada

bull Gestioacuten d e itinerarios TRAINS Rochester University



PEGASUS MIT Spoken Language Systems Group httpsls -wwwlcsmiteduPEGASUShtml

ldquoPEGASUS is a spoken language interfaceconne cted to th e American A irlines EAASYSABRE reservation system which allowssubscribers to obtain fligh t inform ation andmake f light r eservat ions via a large on-linedynam ic dynamic database accessed throughtheir personal computer over t he telephonelinerdquo



SAPLEN Universidad de Granada httpceres ugres~ramonsaplenhtml

ldquoEl sistema S APLEN (Sistema Automaacutetico dePedidos en LEnguaje Natural) puedeconsiderarse un Sistema Exp erto basado enreglas y guiado p or objetivos que intentamos seacapaz d e comport arse de forma similar a comolo hace e l depe ndiente de un restaurante decomida raacutepida a la hora de atend er laspet iciones de comida y consultas de los clientesrdquo



TRAINS Department of Computer Science Rochester Universityhttpwwwcsrochesteredu80researchtrains

bull Gestioacuten de itinerarios de trenes

Siacutentesis y reconocimiento del hablaDiaacutelogo

Comprensioacuten del lenguaje

Interfaz visualIntegracioacuten en un sistema interactivo






Traduccioacuten automaacutetica del habla(spoken language translation)

Reconocimiento del habla

Gestioacuten del diaacutelogo

Traduccioacuten automaacutetica de textos

Conversioacuten de texto a habla



JANUS Interactive Systems LabshttpwwwiscscmueduISLspeechjanushtml

bull Dominios limitados citas reserva de hotelesitinerarios d e viajes

bull Lenguas de e ntrada ingleacutes y alemaacuten

bull Lenguas de salida ingleacutes alemaacuten y j aponeacutes



Versioacuten portaacutetil de JANUShttpislirauka deISLspeechjanusporthtml



Spoken Language Translation SRI Inter nationalhttpwwwcamsricom

bull Dominio restr ingido informacioacuten sobre vuelos

bull Trad uccioacuten de l ingleacutes al franceacutes





Teleface Dept of Speech Music and Hearing KTHhttpwwwspeechkthseteleface

bull Generacioacuten dehabla sintetizadacon apoyo visual(lectura labial)para personas condificultades deaudicioacuten


















A World of Understanding 2000Information Society Directorate General European Commission










Ventajas de la comunicacioacuten oralpersona-maacutequina

Liber tad para otras tare as sim ultaacuteneas


Sistem a poten cialm ente econoacutem ico

Medio de comunicacioacuten natu ral




Libera las manos y las vista

Es omnidireccional y permite movilidadNo interfiere con otras actividades




bull Entrada de datos sobre productos en gestioacuten defondos de almaceacuten

bull Control de calidad en entornos industr iales

bull Acceso a informacioacuten en cabinas de aviones

bull Control de los accesorios e n veh iacuteculos

bull Dictado de informes meacutedicos o legales



VODIS Voice Driving Interactive System




Rapidez de acceso




















36-42




Visual







































Semisiacutelaba


kasa - ka + asa












Fuente

Filtro




Filtr o

Fuente









FiltroFiltroFiltro

Sonidos sonoros

Sonidos sordos









Es h




Ingl h

Ingl m

Ingl n




Ing h

Ing m

Es h




Ing h

Ing m

EsMx h

EsCas h




Ing h

Ing m

Es h




Ing h

Ing m

EsCas h

EsMx h




IngA m h

IngBr h

Es h




Ing h-m

Es h

Ing m

Ing h




Ing h

Es h


































































USER Vers 1230













































































































Rapidez de acceso




















36-42




Visual







































Semisiacutelaba


kasa - ka + asa












Fuente

Filtro




Filtr o

Fuente









FiltroFiltroFiltro

Sonidos sonoros

Sonidos sordos









Es h




Ingl h

Ingl m

Ingl n




Ing h

Ing m

Es h




Ing h

Ing m

EsMx h

EsCas h




Ing h

Ing m

Es h




Ing h

Ing m

EsCas h

EsMx h




IngA m h

IngBr h

Es h




Ing h-m

Es h

Ing m

Ing h




Ing h

Es h


































































USER Vers 1230







































































































































Semisiacutelaba


kasa - ka + asa












Fuente

Filtro




Filtr o

Fuente









FiltroFiltroFiltro

Sonidos sonoros

Sonidos sordos









Es h




Ingl h

Ingl m

Ingl n




Ing h

Ing m

Es h




Ing h

Ing m

EsMx h

EsCas h




Ing h

Ing m

Es h




Ing h

Ing m

EsCas h

EsMx h




IngA m h

IngBr h

Es h




Ing h-m

Es h

Ing m

Ing h




Ing h

Es h


































































USER Vers 1230














































































































Fuente

Filtro




Filtr o

Fuente









FiltroFiltroFiltro

Sonidos sonoros

Sonidos sordos









Es h




Ingl h

Ingl m

Ingl n




Ing h

Ing m

Es h




Ing h

Ing m

EsMx h

EsCas h




Ing h

Ing m

Es h




Ing h

Ing m

EsCas h

EsMx h




IngA m h

IngBr h

Es h




Ing h-m

Es h

Ing m

Ing h




Ing h

Es h


































































USER Vers 1230













































































































Ingl h

Ingl m

Ingl n




Ing h

Ing m

Es h




Ing h

Ing m

EsMx h

EsCas h




Ing h

Ing m

Es h




Ing h

Ing m

EsCas h

EsMx h




IngA m h

IngBr h

Es h




Ing h-m

Es h

Ing m

Ing h




Ing h

Es h


































































USER Vers 1230













































































































Ing h-m

Es h

Ing m

Ing h




Ing h

Es h


































































USER Vers 1230

























































































































































USER Vers 1230










































































































13 de noviembre de 2000 ~joaquim/teaching/...

Documents

Transcript of 13 de noviembre de 2000 ~joaquim/teaching/...