Llisterri, J. (2016). Com ha après a parlar...

Com ha après a parlar Siri?

Joaquim LlisterriÀrea de Lingüística General

Departament de Filologia Espanyola

http://liceu.uab.cat/~joaquim

L’estudi del so i de la parla a la Facultat de LletresServei de Tractament de la Parla i del So

Universitat Autònoma de Barcelona19 de maig de 2016

Joaquim Llisterri Com ha après a parlar Siri?

http://liceu.uab.cat/~joaquim

Què és un assistent virtual?

ç Interacció mitjançant la parla


Assistents virtuals

SiriApple

CortanaMicrosoft

Google NowGoogle


Assistents virtuals

IndigoArtificial Solutions

Assistant.aiSpeaktoit

Sherpa NextSherpa


Qui és Siri?

Cendrowski, M. (2012). The Beta Test Initiation, The Big Bang Theory, Season 5, Episode 14.United States: Chuck Lorre Productions, Warner Bros Television. Consultat a

https://www.youtube.com/watch?v=WXqRmBrBboA


https://www.youtube.com/watch?v=WXqRmBrBboA

La primera veu de Siri per a l’anglès americà

Susan Bennethttp://susancbennett.com


http://susancbennett.com

La veu de Siri

La tecnologia: conversió de text en parla

Les veus de Siri tenen com a base un corpusd’enregistraments realitzats per locutors professionals

Els enregistraments es processen per a crear una base dedades amb fragments de parla etiquetats fonèticament

son las ocho en punto


Base de dades etiquetada fonèticament


Conversió de text en parla

Tractament del textd’entrada

Transcripció fonèticaautomàtica

la alarma de las ocho estáactivada

la a"larma De las "otSoes"ta kti"BaDa



Selecció de fragments de la base de dades

las otSo



Concatenació de fragments



Assignació de la prosòdia


Com ens enten Siri?

La tecnologia: reconeixement automàtic de la parla

Creació d’un corpus d’entrenament per a que Siri“aprengui”

Representatiu de la comunitat de parlantsRepresentatiu de les variants de la llenguaRepresentatiu de les característiques fonètiques de lallengua

A partir del corpus d’entrenament es creen:Models acústics per a cada so de la llenguaModel de llenguatge amb les probabilitats d’aparició deles paraulesDiccionari de pronúncia amb la transcripció fonètica deles paraules


Reconeixement automàtic de la parla

Anàlisi del senyal d’entrada en paràmetres acústics

Mañana despiértame a las ocho



Senyal d’entrada

?

Models acústics

Model per a [a]

Model per a [i]



Segmentació i etiquetatge fonètic a partir dels modelsacústics de cada so de la parla apresos del corpusd’entrenament



Model de llenguatgea

las

ochosieteseis

la

una

Diccionari fonètic

mañana [maJana]a [a]las [las]ocho [otSo]



Cerca en el model de llenguatge creat durant l’etapad’entrenament

Cerca en un diccionari amb la transcripció fonètica deles paraules



Representació ortogràfica

ç Comprensió del llenguatge natural


Quina feina fa un fonetista?

Disseny dels corpus i selecció de parlants per a laconversió de text en parla i per al reconeixementautomàtic de la parla

Validació d’eines d’etiquetatge fonètic i de transcripciófonètica automàtica

Verificació de l’etiquetatge fonètic dels corpus

Models de prosòdia per a la conversió de text en parla

Validació de diccionaris de pronúncia per alreconeixement automàtic de la parla

Avaluació de la qualitat lingüística dels sistemes


La fonètica pot contribuir al desenvolupament de lestecnologies de la parla


Llisterri, J. (2016). Com ha après a parlar...

Documents

Transcript of Llisterri, J. (2016). Com ha après a parlar...