Post on 18-Aug-2020
Com ha après a parlar Siri?
Joaquim LlisterriÀrea de Lingüística General
Departament de Filologia Espanyola
http://liceu.uab.cat/~joaquim
L’estudi del so i de la parla a la Facultat de LletresServei de Tractament de la Parla i del So
Universitat Autònoma de Barcelona19 de maig de 2016
Joaquim Llisterri Com ha après a parlar Siri?
Què és un assistent virtual?
ç Interacció mitjançant la parla
Joaquim Llisterri Com ha après a parlar Siri?
Assistents virtuals
SiriApple
CortanaMicrosoft
Google NowGoogle
Joaquim Llisterri Com ha après a parlar Siri?
Assistents virtuals
IndigoArtificial Solutions
Assistant.aiSpeaktoit
Sherpa NextSherpa
Joaquim Llisterri Com ha après a parlar Siri?
Qui és Siri?
Cendrowski, M. (2012). The Beta Test Initiation, The Big Bang Theory, Season 5, Episode 14.United States: Chuck Lorre Productions, Warner Bros Television. Consultat a
https://www.youtube.com/watch?v=WXqRmBrBboA
Joaquim Llisterri Com ha après a parlar Siri?
La primera veu de Siri per a l’anglès americà
Susan Bennethttp://susancbennett.com
Joaquim Llisterri Com ha après a parlar Siri?
La veu de Siri
La tecnologia: conversió de text en parla
Les veus de Siri tenen com a base un corpusd’enregistraments realitzats per locutors professionals
Els enregistraments es processen per a crear una base dedades amb fragments de parla etiquetats fonèticament
son las ocho en punto
Joaquim Llisterri Com ha après a parlar Siri?
Base de dades etiquetada fonèticament
Joaquim Llisterri Com ha après a parlar Siri?
Conversió de text en parla
Tractament del textd’entrada
Transcripció fonèticaautomàtica
la alarma de las ocho estáactivada
la a"larma De las "otSoes"ta kti"BaDa
Joaquim Llisterri Com ha après a parlar Siri?
Conversió de text en parla
Selecció de fragments de la base de dades
las otSo
Joaquim Llisterri Com ha après a parlar Siri?
Conversió de text en parla
Concatenació de fragments
Joaquim Llisterri Com ha après a parlar Siri?
Conversió de text en parla
Assignació de la prosòdia
Joaquim Llisterri Com ha après a parlar Siri?
Com ens enten Siri?
La tecnologia: reconeixement automàtic de la parla
Creació d’un corpus d’entrenament per a que Siri“aprengui”
Representatiu de la comunitat de parlantsRepresentatiu de les variants de la llenguaRepresentatiu de les característiques fonètiques de lallengua
A partir del corpus d’entrenament es creen:Models acústics per a cada so de la llenguaModel de llenguatge amb les probabilitats d’aparició deles paraulesDiccionari de pronúncia amb la transcripció fonètica deles paraules
Joaquim Llisterri Com ha après a parlar Siri?
Reconeixement automàtic de la parla
Anàlisi del senyal d’entrada en paràmetres acústics
Mañana despiértame a las ocho
Joaquim Llisterri Com ha après a parlar Siri?
Reconeixement automàtic de la parla
Senyal d’entrada
?
Models acústics
Model per a [a]
Model per a [i]
Joaquim Llisterri Com ha après a parlar Siri?
Reconeixement automàtic de la parla
Segmentació i etiquetatge fonètic a partir dels modelsacústics de cada so de la parla apresos del corpusd’entrenament
Joaquim Llisterri Com ha après a parlar Siri?
Reconeixement automàtic de la parla
Model de llenguatgea
las
ochosieteseis
la
una
Diccionari fonètic
mañana [maJana]a [a]las [las]ocho [otSo]
Joaquim Llisterri Com ha après a parlar Siri?
Reconeixement automàtic de la parla
Cerca en el model de llenguatge creat durant l’etapad’entrenament
Cerca en un diccionari amb la transcripció fonètica deles paraules
Joaquim Llisterri Com ha après a parlar Siri?
Reconeixement automàtic de la parla
Representació ortogràfica
ç Comprensió del llenguatge natural
Joaquim Llisterri Com ha après a parlar Siri?
Quina feina fa un fonetista?
Disseny dels corpus i selecció de parlants per a laconversió de text en parla i per al reconeixementautomàtic de la parla
Validació d’eines d’etiquetatge fonètic i de transcripciófonètica automàtica
Verificació de l’etiquetatge fonètic dels corpus
Models de prosòdia per a la conversió de text en parla
Validació de diccionaris de pronúncia per alreconeixement automàtic de la parla
Avaluació de la qualitat lingüística dels sistemes
Joaquim Llisterri Com ha après a parlar Siri?
La fonètica pot contribuir al desenvolupament de lestecnologies de la parla
Joaquim Llisterri Com ha après a parlar Siri?