SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
description
Transcript of SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 1/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 2/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 3/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 4/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 5/171
i
CAPÍTULO 1.- INTRODUCCIÓN. ..................................................................................................... 1
.......................................................................................................... 2
............................................................ 2
.................................................................. 2
................................................. 3
................................................................................................. 3
............................................................................. 6
....................................................................................................................... 7
............................................................................................................ 8
.............................................................................. 8
CAPITULO 2.- MARCO TEÓRICO. ................................................................................................. 12
............................................................................... 12
............................................................................................................ 12
......................................................................................................... 13
......................................................................... 14
............................................................................................ 14
.............................................................. 15
........................................................................................ 16
............................................................................................... 16
.......................................................................... 16
........................................................................................................................ 17
.................................................................................................... 18
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 6/171
ii
.............................................................................................................. 18
......................................................................................... 18
.............................................................................................................. 19
............................................................................................................ 19
................................................................................................... 20
................................................................................................................. 21
.................................................................... 21
....................................................................................... 22
.............................................................................................. 22
....................................................................... 23
.......................................................................................................... 23
............................................................... 24
......................................................................................... 25
............................................................................................ 25
.......................................................................................... 25
...................................................................................... 25
.......................................................................................... 25
........................................................... 26
.............................................................................................. 26
......................................................................................................... 26
..................................... 26
........................................................................................................ 26
........................................................................................................ 26
..................................................................................................... 27
................................................................................................ 27
............................................................. 27
...................................................................................... 28
............................................................................... 30
....................................................................... 31
....................................................................................................... 32
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 7/171
iii
................................................................................................... 33
.......................................................... 34
................................................................................. 34
......................................................................... 34
....................................................................................................................... 34
35
.............................................. 35
...................................................................... 36
....................................................... 36
............................................................ 36
...................................................... 36
......................................................................................... 36
............................................................................................. 37
............................................................................... 37
.............................................................................................. 37
......................................................... 38
............................................................................................. 39
................................................................. 39
.................................................................. 39
............................................................................... 41
.............................................................................................. 43
.............................................................................. 44
.............................................................................. 44
CAPITULO 4.- ANÁLISIS DE REQUERIMIENTOS. ....................................................................... 46
....................................................................................................... 46
....................................................................................................... 46
................................................................................................................ 48
.................................................................................................. 48
....................................................................................................................... 48
......................................................................................................... 48
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 8/171
iv
.............................................................................................................. 48
.................................................................................................. 48
............................................................................................ 48
......................................................................................... 49
......................................................................................... 49
.................................................................................. 49
......................................................................................................... 49
............................................................... 49
.......................................................................... 51
....................................................................... 51
............................................................................... 51
....................................................................... 52
.............................................................................. 52
.................................. 53
.......................................... 53
................................... 54
.............................................................. 54
...................................................................... 54
.................................................................................. 55
.......................................................................... 55
................................... 55
........................................................................................... 55
...................................................................................................................... 56
......................................................................................................................... 56
................................................................................................. 56
......................................................................................... 57
............................................................................................................ 57
........................................................................................................... 58
.................................................................................................... 59
................................................................... 59
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 9/171
v
.................................................................................................. 59
..................... 61
.............................. 63
...................... 64
..................................... 65
................................... 66
............................................... 68
............................................. 70
................................................ 71
......................................................... 73
..................................................................... 74
................ 76
.................................................. 77
CAPITULO 5.- ARQUITECTURA DEL SISTEMA. ......................................................................... 79
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 10/171
vi
CAPITULO 6.- IMPLEMENTACIÓN DEL PROTOTIPO. ............................................................... 97
.............................................. 97
.................... 98
................. 99
........................................................................................... 99
........................................................................... 99
................................................... 99
............................................... 100
................................................................................... 100
.................................................................................. 101
.............................................................................. 101
........................................................................................ 102
....................................................................................... 102
........................................................................................... 102
....................................................................................... 102
...................................................................... 103
........................................................................................................... 103
CAPITULO 7.- PRUEBAS Y RESULTADOS DEL PROTOTIPO. ................................................. 104
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 11/171
vii
CAPITULO 8.- CONCLUSIONES Y RECOMENDACIONES. ......................................................... 119
BIBLIOGRAFÍA ................................................................................................................................. 123
Glosario de Términos ................................................................................................................. 125
Anexo A. Diagramas de Clases correspondientes a la Arquitectura lógica del sistema 126
Anexo B. Base de Datos para la implementación del prototipo ......................................... 140
Anexo C. Datos Técnicos de Kinect ........................................................................................... 142
Anexo D. Seudocódigo de algoritmos. ..................................................................................... 144
Anexo E. Demostraciones y Deducciones Matemáticas. ...................................................... 150
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 12/171
viii
......................................................................... 12
....... 13
............................................................... 13............................... 14
................................................................ 15
.............. 15
........................................ 16
.......................................................................................... 17
.................................................................. 17
............................................................................................. 18
........................................................................................ 19
..................................................... 19.............................. 20
..................................................................................... 21
........................................................................... 21
............... 22
................................................ 23
...................................................... 23
...... 27
........................................ 30
.............................. 33
............................................................ 34
................................................................ 35
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 13/171
ix
........................................................................... 98
.............................................. 99
................................................................... 100
..................................................... 100
......................................................................................... 101
............................................................ 103
......................................................... 104
..................................................................... 105
.................................................................. 106
............................................................ 106
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 14/171
x
........................................................... 107
................................................ 107
........................................................ 108
......... 109
... 110
............................... 111
........................... 115
............................................................. 116
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 15/171
xi
...................... 83
..... 86
........ 87
....... 88
.......................... 90
....................... 93
................. 95
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 16/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 17/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
1
CAPÍTULO 1.- INTRODUCCIÓN.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 18/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
2
Descriptor o Modelo de Objeto (Herramienta en el campo de Visión por Computador), sirve para modelar un determinado objeto de forma que
sus características sean independientes a colocación, tamaño, orientación, etc.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 19/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
3
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 20/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
4
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 21/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
5
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 22/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
6
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 23/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
7
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 24/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
8
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 25/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
9
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 26/171
Parte I. Presentación del Proyecto Capítulo 1. Introducción
10
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 27/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 28/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
12
CAPITULO 2.- MARCO TEÓRICO.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 29/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
13
, (2. 1)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 30/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
14
0,0 0,1 1,0 1,1 ⋯ 0, 1⋯ 1, 1⋮ ⋮ 1,0 1,1 ⋱ ⋮… 1, 1
(2. 2)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 31/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
15
, , , , , , (2. 3)
, 0,299∗, 0,587∗, 0,114∗, (2. 4)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 32/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
16
, , (2. 5)
, y ,
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 33/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
17
, , ∗ (2. 6)
, ℎ , ∗ , (2. 7)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 34/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
18
, , , (2. 8)
, 1 , > , 0 , ≤ (2. 9)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 35/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
19
(2. 10)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 36/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
20
, … , ; + , + , … , ∑ = y ∑ =+
(2. 11)
∗ = ; ∗
=+(2. 12)
∗ ∗ ; 1 (2. 13)
∗ ∗ (2. 14)
} ; 1 ≤ ≥ (2. 15)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 37/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
21
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 38/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
22
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 39/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
23
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 40/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
24
-
-
-
-
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 41/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
25
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 42/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
26
1 ,= ; :( , ) { 0 1 ≠ (2. 16)
(, ), (2. 17)
≤ √ ℎlog2ℎ 1 l o g 4 ; ∶ ℎ
(2. 18)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 43/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
27
, , … } ⊂ ⊆ − ∈ : ∗ 0 } ∈ , ∈
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 44/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
28
∈ ∶ ∗ ≥ 1} − − ∈ ∶ ∗ ≤ 1 }
∗ 1 ≥ 0 1 ∗ 1 ≤ 0 1 (2. 19)
∗ ( ∗
) 1 ≥ 0(2. 20)
2 ∗ ∗ ( ∗ )‖‖
2‖‖ ; ∗ ( ∗ ) 1(2. 21)
‖‖ ∗ ∗ 1 ≥ 0 (2. 22)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 45/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
29
‖‖
∗ ∗ 1 ≥ 0 (2. 23)
min
= 12
,= 12 :
= 0 ; 0 ≤ ≤ 1 , … .
(2. 24)
""
∗ ∗ = → ∗
=
(2. 25)
= (2. 26)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 46/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
30
≥ 1
≤ 1 −
"" "Φx → z x ∈ X ⊂ ; ∈ ⊂ ; para m > n }"
‖‖
∗ ∗ Φ 1 ≥ 0(2. 27)
= 12 Φ()Φ,= 12
:
= 0 ; 0 ≤ ≤ 1 , … .
(2. 28)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 47/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
31
(Φ()Φ() ∗ ).
Φ
Φ
= ↔1,2
(2. 29)
ΦΦ Φ
= 12 , ,=
:
= 0 ; 0 ≤
≤ 1 , … .
(2. 30)
, ′ exp ‖ ′‖2 (2. 31)
‖ ′‖
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 48/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
32
""
, } ⊂ 1,2,…} ≡1,2,…}\
( ) ( ) 0 ≤ ≤ ;
(2. 32)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 49/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
33
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 50/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
34
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 51/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 2. Marco Teórico
35
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 52/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 3. Marco Referencial
36
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 53/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 3. Marco Referencial
37
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 54/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 3. Marco Referencial
38
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 55/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 3. Marco Referencial
39
2 Gesto – espacial, que involucra gestos en un contexto espacial (3D).3 Gesto – viso – espacial, que involucra gestos en un contexto espacial, que además requiere percepción visual.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 56/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 3. Marco Referencial
40
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 57/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 3. Marco Referencial
41
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 58/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 3. Marco Referencial
42
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 59/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 3. Marco Referencial
43
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 60/171
Parte II. Aspectos Referenciales del Proyecto Capítulo 3. Marco Referencial
44
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 61/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 62/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
46
CAPITULO 4.- ANÁLISIS DE REQUERIMIENTOS.
Figura 4. 1
COMPONENTEINTÉRPRETE
COMPONENTEENTRENADOR
SISTEMA INTERPRETE
LENGUAJE DE SEÑAS
COMPONENTE DEALMACENAMIENTO
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 63/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
47
Interfaz HumanoMáquina
(HMI)
Adquisición yTratamiento de
Datos
Servicios dealmacenamiento y
recuperación de datos
COMPONENTE DE
ALMACENAMIENTO
PRESENTACIÓN
LÓGICA DEAPLICACIÓN
SERVICIOS
ALMACENAMIENTO
Creación decaracterísticas dereconocimiento
Inferencia de la basede conocimientos
Interfaz HumanoMáquina
(HMI)
Creación decaracterísticas de
Entrenamietno
Entrenamiento declasificadores
Servicios dealmacenamiento y
recuperación de datos
COMPONENTE INTÉRPRETE COMPONENTE ENTRENADOR
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 64/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
48
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 65/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
49
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 66/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
50
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 67/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
51
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 68/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
52
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 69/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
53
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 70/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
54
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 71/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
55
Figura 4. 3 Organización del Sistema
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 72/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
56
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 73/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
57
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 74/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
58
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 75/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
59
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 76/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
60
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 77/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
61
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 78/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
62
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 79/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
63
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 80/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
64
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 81/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
65
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 82/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
66
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 83/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
67
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 84/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
68
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 85/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
69
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 86/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
70
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 87/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
71
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 88/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
72
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 89/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
73
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 90/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
74
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 91/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
75
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 92/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
76
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 93/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
77
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 94/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 4. Análisis de Requerimientos
78
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 95/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
79
CAPITULO 5.- ARQUITECTURA DEL SISTEMA.
Almacén de Datos
Adquisición de Datos
Gestión del Sistema
EntrenamientoReconocimiento
.
.
Capa de Servicios de Negocio
Capa de servicios de Usuario
Capa de Servicios de Datos
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 96/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
80
Retención temporal enmemoria
Obtención de Datos deDispositivos de entrada
Obtención de Datosde Interés
(Sincronización de Tramas)
- Retención de Información arribada- Tratamiento de datos.- Identificación y configuración delDispositivos de entrada.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 97/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
81
MantenedorTramas
-ImagenColor: byte[][]-skeleton: Int[][]
Imagen Relevante
-Imagen: byte[][]
Parámetros IR
-letra: string-SetEntrenamiento: bool
Características
-vectorHOG: double[]-celda: int
DispositivoDeEntrada
-estado: bool-ID: string
TramaColor
-metaData: byt e[][]
TramaSkeleton
-metadata: int[][]
-bin: int-solapamiento: int
+ObtenerImagenRelevante(im): void
+CrearCaracteristicas(): void
+Adquirir tramas(): void
+ProcesarImagen(): void
+VerificarConexion(): bool
-SegmentarImagen(): void
Controlador deadquisicion de datos
+AdquirirDatos(): void
+Iniciar(): void+CopiarMetadata(dest): void
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 98/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
82
:Caracteristicas:ImagenRelevante
:Controlador deAdquisicion de datos
:MantenedorTramas
3:[TramasListas]:Adquirir tramas()
AdquirirDatos() :DispositivoDeEntrada
2:[estado]: Iniciar()
1: estado := VerificarConexion()
3.1:CopiarMetadata(ImagenColor)
3.2:CopiarMetadata(skeleton)
3.3[skeleton!=null] ObtenerImagenRelevante(ImagenColor)
4: ProcesarImagen()4.1: CrearCaracteristicas()
Ademas de configurar losparámetros del dispositivo, Inicialos evento de sincronización de
tramasRecibe las Tramas de datos conuna ltencia de 30 tramas porsegundo
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 99/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
83
Interfaz HMI
Generar de Bancos deCaracteristicas
Generar ConjuntoClasificadores
Elegir Clasificador Óptimo
Elemento dealmacenamiento
(Acciones del Usuario)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 100/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
84
Controlador de entrenamiento
conjunto clasificadores
-Clasificadores: Resultadoclasificador[]
Resultado cla sificador
-sigma: double
-error estimado: double
Set de Datos
Set de Entrenamiento
-Caracteristicas Negativas: double[][]-Caracteristicas Negativas: double[][]
Set de Prueba
Banco de Caracteristicas
Caracteristicas EntrenamientoCaracteristicas Prueba
Controlador de almacenamiento
Controlador de aplicacion
-Características: double[][] -Características: double[][]
-Caracteristicas Negativas: double[][]-Caracteristicas Negativas: double[][]
-error real: double
+RecuperarDatos(letra): string[][]+GuardarDatos(datos): void
+GenerarBancosCaracteristicas(): void+GenerarConjuntoClasificadores(letra):void+ElegirClasificadorÓptimo(): void
+VisualizarResumenEntrenamiento(letra):void
Caracteristicas
-vectorC: double[]
+ExtraerCaracteristicas(imagen,letra):void
-AgregarAlBanco(vector,letra):void
+Generar(bancoDeCaracteristicas,letra):void
+EstimarResultados(sigma,boxC): void
-generalización: double-boxC: double
+AgregarAlConjunto(ResultadoClsificador): void
+AgregarSetEntrenamiento(caracteristica):void +AgregarSetPrueba(caracteristica):void
ClasificadorSVM
-alpha: double[][]
+Entrenar():double[][]
-supporVectors: double[][]
Figura 5. 6
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 101/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
85
:Controlador deentrenamiento
:Controlador dealmacenamiento
GenerarBancosCaracteristicas()
1. datos:=RecuperarDatos()
:Caracteristicas2:*Nuevo()
:Caracteristicas3:*ExtraerCaracteristicas(imagen,letra)
:BancoDeCaracteristicas
4: * AgregarAlBanco(caracteristica)
5:GuardarDatos(bancoDeCaracteristicas)Instancia un objetocaracterísticas
Emplea eldescriptor HOG
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 102/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
86
:Controlador deentrenamiento
:Controlador de almacenamiento
GenerarConjuntoClasificadores()
1. datos:=RecuperarDatos(Datos)
2:Generar(Datos,letra):SetDeDatos
:SetDeEntrenamiento
SetdePrueba
2.1a:[entrenamiento]:AgregarSetEntrenamiento(datos)2.1b:[prueba]:AgregarSetPrueba(datos)
:ResultadoClasificador
3: EstimarResultados(sigma,boxC,SetDeDatos)
:ConjuntoClasificadores
4: AgregarAlConjunto(resultadoClasificador)
5:GuardarDatos(conjuntoClasificadores)
:ClasificadorSVM3.1: resultados:= Entrenar()
Asignación de losconjuntos deentrenamientos,dependinetes d e la letra
estima indices de erroresperado, error de
clasificación ygeneralización
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 103/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
87
:Controlador deentrenamiento
:Controlador de almacenamiento1. datos:=RecuperarDatos(Datos)
:ClasificadorSVM
ElegirClasificadorOptimo()
:Controlador de Aplicación
2:VisualizarResumenEntrenamiento()
3: Entrenar()
4: GuardarDatos(ClsificadorSVM)
Calcula los vertores desoporte, coeficientes delagrange, etc.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 104/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
88
Evaluación de pertenencia
Visualización del resultadoAdquisición de las
características de entrada
Interfaz HMI
(El usuario solo recibe unarespuesta visual)
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 105/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
89
Controlador deReconocimiento
+Clasificar()
Banco de clasificadores
-clasificadores: clasificador[24]
clasificadorSVM
-supportVectors: double[][]-coeficientesLagrange: double[][] Controlador de Aplicacion
+RealimentaciónVisual(clase): void
+Evaluar(caracteristicas):bool
ControladorAdquisición de datos
+Ver característica(): void+BuscarPertenencia(caracteristicas):intl
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 106/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
90
Controlador deReconocimiento
:Controlador deAdquisicion de datos
:ClasificadorSVM
Controlador de Aplicación
Clasificar()
1: dato:= VerCaractertistica()
:Banco de Clasificadores
2: clase:= BuscarPertenencia(dato)
2.1:[i=1,...24]Evaluar(dato)
3:[ReglaValida]RealimentacionVisual(clase)
Se busca la pertenencia para cadaclasificador dentro del Banco declasificadores
Se envia el mensaje cuando la Condicion qdetermina si el resultado es obtenido esvalido es verdadera
El mensaje es enviado al Controlador deAdquisición de datos, que es la clase que secomunica con la clase caracteristicas. Verelemento de adquisición de datos
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 107/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
91
Repositorio de Datos
Almacenamiento de DatosRecuperación de Datos
Servicio deAlmacenamiento
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 108/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
92
letra
-nombre: string-letra: string-set: bool-usuario: string
clasificador
-letra: string-sigma: double-boxConstraint: double
coeficientes alpha
-letra: string-ruta de archivo: string coeficientes de traslacion
-letra: string-ruta de archivo: string
Vectores de Soporte
- letra: string-ruta de archivo: string
Imagen asociada
-nombre: string-ruta de imagen: string
Descriptor HOG
-letra: string
-celda:int-solapamiento:int-bins:int
Se compone de
Se compone deSe compone de
poseees interpretada por
posee
Controlador de almacenamiento
+GuardarDatos(): void-RecuperarDatos(): void-Eliminar datos(): void
Usuario Base de datos
-Nombre: string-Password:int
+RechazaUsuario(): void+ValidarUsuario(): void+AutenticarUsuario():void
Conexion Base de datos
-Conexion: string-Estado: string
+AbrirConexion():void+CerrarConexion(): void
Controlador Base de datos
+Guardar(): void+Eliminar(): void+recuperar():void
Controlador memoria
+Guardar archivo(): void+Borrar archivo(): void+Leer archivo(): void
Consulta
+CrearRegistro(): void+ModificarRegistro():void
archivo
-nombre: string-estado: string
+Eliminar Registro(): void
+Abrir(): void+Cerrar(): void+leer():void
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 109/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
93
:Controlador dealmacenamiento
:UsuarioBaseDeDatos :Controlador memoria
:consulta
Transacción*()
1: ValidarUsuario()
ConexionBasededatos2. Abrir Conexión()
3.Transaccion*()
4. CerrarConexion()
:archivo
6. Transacción*()
5.AccederMemoria()
"Transacción*" este mensaje puedereemplazarse por cualquiera de los validos,como ser Guardar(), Borrar(), etc.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 110/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
94
controlador de reconocimiento
+ActualizarBancoClasificadores(): void
Controlador almacenamiento
+RecuperarInfClasificadores(): void
Banco de clasificadores
-clasificadores: clasificador[24]
clasificadorSVM
-supportVectors: double[][]-coeficientesLagrange: double[][]
+Evaluar(caracteristicas):bool
+AgregarClasificador(clasificadorSVM): void
:Controlador deReconocimiento
:ClasificadorSVM:Controlador dealmacenamiento
ActualizarBancoClasificadores()
1: datos= RecuperarInfClasificadores()
:ClasificadorSVM
2: [i=1.2...24]Nuevo(datos(i))
3:[i=1...24]AgregarClasificador(clasificadorSVM)
Se realiza la operación para cada clasificadorque vaya a formar parte del Banco declasificadores
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 111/171
Parte III. Desarrollo del Proyecto: Concepción, Requerimientos y Diseño Capítulo 5. Arquitectura del Sistema
95
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 112/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 113/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 6. Implementación del Prototipo
97
CAPITULO 6.- IMPLEMENTACIÓN DEL PROTOTIPO.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 114/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 6. Implementación del Prototipo
98
DATOSENTRENAMIENTO
SVM
BD - Archivos
Adquisición de Datos
Reconocimiento
DISPOSITIVO DEENTRADA
entrenamiento
BASE DE CONOCIMIENTOS(BANCO DE CL ASIFICADORES
SVM)
HMI
INTÉRPRETE
ENTRENADOR
ALMACENAMIENTO
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 115/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 6. Implementación del Prototipo
99
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 116/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 6. Implementación del Prototipo
100
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 117/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 6. Implementación del Prototipo
101
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 118/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 6. Implementación del Prototipo
102
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 119/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 6. Implementación del Prototipo
103
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 120/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
104
CAPITULO 7.- PRUEBAS Y RESULTADOS DELPROTOTIPO.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 121/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
105
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 122/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
106
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 123/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
107
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 124/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
108
Figura 7. 7
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 125/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
109
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 126/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
110
6 ∗ 4 24
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 127/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
111
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 128/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
112
Tabla 7. 1 indicador de error previsto para el banco de clasificadores óptimos
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 129/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
113
Tabla 7. 2 Indicador de error de clasificación para el banco de clasificadores
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 130/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
114
Tabla 7. 3 Índice de generalización del banco de clasificadores
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 131/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
115
Tabla 7. 4 Distancias Euclideanas de las clases referidas a la letra “i”
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 132/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
116
Tabla 7. 5 Distancias Euclideanas de las clases referidas al primer grupo de la letra “i”, para condiciones
similares de iluminación a las de entrenamiento.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 133/171
Parte IV. Desarrollo del Proyecto: Prototipo y Pruebas Capítulo 7. Pruebas y Resultados del Prototipo
117
Tabla 7. 6 Distancias Euclideanas de las clases referidas al segundo y tercer grupo de la letra “i”, para
condiciones diferentes de iluminación a las de entrenamiento.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 134/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 135/171
Parte V. Conclusiva Capítulo 8. Conclusiones y Recomendaciones
119
CAPITULO 8.- CONCLUSIONES Y RECOMENDACIONES.
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 136/171
Parte V. Conclusiva Capítulo 8. Conclusiones y Recomendaciones
120
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 137/171
Parte V. Conclusiva Capítulo 8. Conclusiones y Recomendaciones
121
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 138/171
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 139/171
Material Anexo y Complementario Bibliografía
123
BIBLIOGRAFÍA
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 140/171
Material Anexo y Complementario Bibliografía
124
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 141/171
Material Anexo y Complementario Glosario de Términos
125
Glosario de Términos
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 142/171
Material Anexo y Complementario Anexo A
126
Anexo A. Diagramas de Clasescorrespondientes a la Arquitectura lógica
del sistema
MantenedorTramas
-ImagenColor: byte[][]-skeleton: Int[][]
Imagen Relevante
-Imagen: byte[][]
Parámetros IR
-letra: string-SetEntrenamiento: bool
Características
-vectorHOG: double[]
-celda: int
DispositivoDeEntrada
-estado: bool-ID: string
TramaColor
-metaData: byte[][]
TramaSkeleton
-metadata: int[][]
-bin: int-solapamiento: int
+ObtenerImagenRelevante(im): void
+CrearCaracteristicas(): void
+Adquirir tramas(): void
+ProcesarImagen(): void
+VerificarConexion(): bool
-SegmentarImagen(): void
Controlador de
adquisicion de datos
+AdquirirDatos(): void
+Iniciar(): void+CopiarMetadata(dest): void
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 143/171
Material Anexo y Complementario Anexo A
127
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 144/171
Material Anexo y Complementario Anexo A
128
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 145/171
Material Anexo y Complementario Anexo A
129
Controlador de entrenamiento
conjunto clasificadores
-Clasificadores: Resultadoclasificador[]
Resultado clasificador
-sigma: double
-error estimado: double
Set de Datos
Set de Entrenamiento
-Caracteristicas Negativas: double[][]-Caracteristicas Negativas: double[][]
Set de Prueba
Banco de Caracteristicas
Caracteristicas EntrenamientoCaracteristicas Prueba
Controlador de almacenamiento
Controlador de aplicacion
-Características: d ouble[][] -Características: d ouble[][]
-Caracteristicas Negativas: double[][]-Caracteristicas Negativas: double[][]
-error real: double
+RecuperarDatos(letra): string[][]+GuardarDatos(datos): void
+GenerarBancosCaracteristicas(): void+GenerarConjuntoClasificadores(letra):void+ElegirClasificadorÓptimo(): void
+VisualizarResumenEntrenamiento(letra):void
Caracteristicas
-vectorC: double[]
+ExtraerCaracteristicas(imagen,letra):void
-AgregarAlBanco(vector,letra):void
+Generar(bancoDeCaracteristicas,letra):void
+EstimarResultados(sigma,boxC): void
-generalización: double-boxC: double
+AgregarAlConjunto(ResultadoClsificador): void
+AgregarSetEntrenamiento(caracteristica):void +AgregarSetPrueba(caracteristica):void
ClasificadorSVM
-alpha: double[][]
+Entrenar():double[][]
-supporVectors: double[][]
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 146/171
Material Anexo y Complementario Anexo A
130
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 147/171
Material Anexo y Complementario Anexo A
131
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 148/171
Material Anexo y Complementario Anexo A
132
Controlador deReconocimiento
+Clasificar()
Banco de clasificadores
-clasificadores: clasificador[24]
clasificadorSVM
-supportVectors: double[][]-coeficientesLagrange: double[][] Controlador de Aplicacion
+RealimentaciónVisual(clase): void
+Evaluar(caracteristicas):bool
ControladorAdquisición de datos
+Ver característica(): void+BuscarPertenencia(caracteristicas):intl
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 149/171
Material Anexo y Complementario Anexo A
133
letra
-nombre: string-letra: string-set: bool-usuario: string
clasificador
-letra: string-sigma: double
-boxConstraint: double
coeficientes alpha
-letra: string-ruta de archivo: string coeficientes de traslacion
-letra: string-ruta de archivo: string
Vectores de Soporte
- letra: string-ruta de archivo: string
Imagen asociada
-nombre: string-ruta de imagen: string
Descriptor HOG
-letra: string-celda:int-solapamiento:int-bins:int
Se compone de
Se compone deSe compone de
posee es interpretada por
posee
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 150/171
Material Anexo y Complementario Anexo A
134
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 151/171
Material Anexo y Complementario Anexo A
135
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 152/171
Material Anexo y Complementario Anexo A
136
Controlador de almacenamiento
+GuardarDatos(): void-RecuperarDatos(): void-Eliminar da tos(): void
Usuario Base de datos
-Nombre: string-Password:int
+RechazaUsuario(): void+ValidarUsuario(): void+AutenticarUsuario():void
Conexion Base de datos
-Conexion: string-Estado: string
+AbrirConexion():void+CerrarConexion(): void
Controlador Base de datos
+Guardar(): void+Eliminar(): void+recuperar():void
Controlador memoria
+Guardar archivo(): void+Borrar archivo(): void+Leer archivo(): void
Consulta
+CrearRegistro(): void+ModificarRegistro():void
archivo
-nombre: string-estado: string
+Eliminar Registro(): void
+Abrir(): void+Cerrar(): void+leer():void
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 153/171
Material Anexo y Complementario Anexo A
137
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 154/171
Material Anexo y Complementario Anexo A
138
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 155/171
Material Anexo y Complementario Anexo A
139
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 156/171
Material Anexo y Complementario Anexo B
140
Anexo B. Base de Datos para laimplementación del prototipo
La implementación fue desarrollada con la herramienta SQL Server 2008, a continuación se
muestra el código del script para la creación de la Base de Datos
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 157/171
Material Anexo y Complementario Anexo B
141
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 158/171
Material Anexo y Complementario Anexo C
142
Anexo C. Datos Técnicos de Kinect
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 159/171
Material Anexo y Complementario Anexo C
143
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 160/171
Material Anexo y Complementario Anexo E
144
Anexo D. Seudocódigo de algoritmos.
1 , 0 , 0; ≤
≤ 2 5 5 1 , 0 , 0 ∗ ≤ ∗ ≤ 2 5 5
∗ ∗ ∗ ∗
≤ 2 5 5 }
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 161/171
Material Anexo y Complementario Anexo E
145
15∗
∗0 . 8 5 ; ∗ 0 . 1 5 .
óó≠0
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 162/171
Material Anexo y Complementario Anexo E
146
_ ∗ 1 0 1; ∗ 1 0 1´, atan,,
0 ; 0 ;() ∗ ( ) ∗
: , : 180°, 0; ℎ 0; ∗ << 1 ∗ ℎ < < ( ) ∗ <()∗
,ℎ;() ∗ < , () ∗ < ,
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 163/171
Material Anexo y Complementario Anexo E
147
min 12 0 : {0 ≤ ≤ , 1 , 2 , … , 0,
, } ⊂ 1, …} ≡ 1, … }\
min 12
12 12 [ ]
Sujeto a: 0 ≤ , ≤ , yNT , +
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 164/171
Material Anexo y Complementario Anexo E
148
≡ | < , 1 > 0 , 1} ≡| < , 1 > 0 , 1}
, ∈ a r g ma x ∇ | ∈ } ∈ arg min ∇ | ∈ }
∇ 1 0
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 165/171
Material Anexo y Complementario Anexo E
149
, , , 0 2 ( , ) , ,
≥ 0 < < 0 ≤ 0
,
,
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 166/171
Material Anexo y Complementario Anexo E
150
Anexo E. Demostraciones y DeduccionesMatemáticas.
"" " 0" """ ≤ 0"
∗ ∗ ∗ 0 ∗ ≤ 0ℎ∗ 0 ∗ ≤ 0 ≥ 0 ≥ 0
∇∗ ∇ℎ∗
= ∇∗
= 0 ‖‖ ∗ ∗ 1 ≥ 0 1,2…
12 ‖‖ ∗ ∗ ∗ 1= 0
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 167/171
Material Anexo y Complementario Anexo E
151
∇ 12 ‖‖ ∇= ∗ ∗ 1 0
∇ , ∂∂w 12 ‖‖ ∗ ∗ ∗ 1= 0
∂∂b 12 ‖‖ ∗ ∗ ∗ 1= 0
= 0
= 0 12 ∗ ∗ ∗ ∗
= ∗ ∗
=
= 0
12 =
= =
= 0 ∗ = 0
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 168/171
Material Anexo y Complementario Anexo E
152
= 12
,= 0
= 12
,= 12 :
= 0 ; 0 ≤ ≤ 1 , … .
=
1 ∗ i ≠ 0
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 169/171
Material Anexo y Complementario Anexo E
153
ΦΦ = ↔,
(2. 35)
, ex p ‖1 2‖222
, ex p ‖1 2‖222 exp 12 2 ∗ 1 ∗ 2 2222 , ex p 1222 ∗exp 2222 ∗exp 2 ∗ 1 ∗ 222
, ex p 12
22 ∗exp 22
22 ∗ 212
2!∞
0
, 22! ∗ exp 1222 ∗ 1 ∗ exp 2222 ∗ 2∞0, Φ1 ∗ Φ2 12∞
0
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 170/171
Material Anexo y Complementario Anexo E
154
, , , ∫
∫, ≥ 0
, exp ‖1 2‖222
, 22! ∗ exp 1222 ∗ 1 ∗ exp 2222 ∗ 2∞
0 , 22! ∗ exp 2222 ∗ 2 ∗ exp 1222 ∗ 1∞
0
,
,
, exp ‖ ‖222
7/21/2019 SISTEMA INTERPRETE DEL LENGUAJE DE SEÑAS BOLIVIANO BAJO TECNOLOGIA DE VISION POR COMPUTADOR
http://slidepdf.com/reader/full/sistema-interprete-del-lenguaje-de-senas-boliviano-bajo-tecnologia-de-vision 171/171
Material Anexo y Complementario Anexo E
22! ∗ exp 222 ∗ ∗ exp 222 ∗ 2∞0
22! ∗ exp 222 ∗ ∗ exp 222 ∗ 2 ∞0
2
2
!∗ exp 2
22 ∗ ∞
0
∗ 2
2
!∗ exp 2
22 ∗
2 ∗ exp 2 ∗ 2∞