Albornoz - Indic Bilbiom Arg 2003-2006

7/24/2019 Albornoz - Indic Bilbiom Arg 2003-2006

1/15

VOLVERALINICIO

Indicadores bibliomtricos como

herramienta para la evaluacininstitucional

Autores:

Mario AlbornozRodolfo BarrereMartn BagenetaLautaro Matas

Centro Argentino de Informacin Cientfica !ecnolgicaCAIC"!#CONICE!
http://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htm


2/15

.1 Introduccin

Los indicadores de ciencia$ tecnologa e inno%acin$ desagregados &asta el ni%el de las

instituciones$ resultan una im'ortante &erramienta de e%aluacin$ as como un e(celenteinsumo 'ara la toma de decisiones) En este marco$ los estudios bibliom*tricos$ basados enel an+lisis de las 'ublicaciones cientficas$ son de 'articular inter*s en el marco de lasinstituciones ',blicas de in%estigacin$ -ue re-uieren 'autas cuantitati%as 'ara lae%aluacin del resultado de sus acti%idades)

.in embargo$ la realizacin de este ti'o de estudios 'resenta serias dificultades almomento de identificar la filiacin de los traba/os en bases de datos -ue no tienennormalizada esta informacin) 0ara solucionar este 'roblema$ se desarroll unametodologa$ con un fuerte com'onente de tecnologas inform+ticas$ -ue 'ermite laidentificacin de las 'ublicaciones de cada in%estigador$ solucionando 'roblemas deafiliacin incom'leta la e(istencia de &omnimos) Esta fue a'licada con *(ito a la

'roduccin registrada en el .cience Citation Inde( 1.CI2 'or el CONICE!$ organismo en elcual la maor 'arte de los in%estigadores tienen su lugar de traba/o en la esferauni%ersitaria$ suelen firmar sus 'ublicaciones reconociendo slo ese +mbito)

Este traba/o 'resenta los resultados del an+lisis de la 'roduccin cientfica argentinaregistrada en .CI$ centrada en la 'ers'ecti%a del CONICE! como institucin demandantede esta informacin con fines de e%aluacin 'lanificacin) .e detalla com'arati%amenteel %olumen de la 'roduccin de las 'rinci'ales instituciones$ las redes de colaboracin -uese &an establecido entre ellas los distintos ni%eles de colaboracin con otros 'ases$ enbase a la obser%acin de las coautoras)3inalmente se 'rofundiza en la 'roduccin cientfica del CONICE!$ con datos sobre ladistribucin de los artculos 'ublicados de acuerdo con el escalafn la disci'lina de losautores$ datos de gran utilidad 'ara la e%aluacin la gestin)

.2 Indicadores de ciencia y tecnologa

Los indicadores son re'resentaciones cuantitati%as de los 'rocesos 'ar+metros -uedefinen el estado las din+micas de los fenmenos -ue se desea monitorear) Losindicadores constituen un elemento de diagnstico $ 'or lo tanto$ los m+s a'tos son

a-uellos -ue resultan ser m+s funcionales al ti'o de diagnstico -ue se 'retende realizar)4iscutir sobre indicadores$ 'or consiguiente$ es discutir acerca de cmo diagnosticar)

5n indicador sir%e 'ara re'resentar$ de manera sim'lificada$ una situacin dada en elmarco de un sistema maor generalmente com'le/o) Los indicadores constituen una delas maneras en las -ue es 'osible 6%er6 lo -ue est+ 'asando en el marco de las relaciones acti%idades -ue se desencadena dentro de esos sistemas)

Entre los ob/eti%os 'rinci'ales de los indicadores en el +mbito de la gestin se encuentra elan+lisis de la eficiencia la eficacia de la institucin$ a fin de me/orar el 'roceso de tomade decisiones de corregir e%entuales des%iaciones -ue 'uedan afectar el logro de lasmetas 'ro'uestas) Asimismo$ los indicadores a'untan a e%aluar ob/eti%amente las%ariaciones -ue se 'roducen 'or la a'licacin de una accin 1a sea -ue se trate de una

CAIC"! 7 CONICE!) 0+gina 8


3/15

'oltica$ un 'rograma$ un 'roecto u otro ti'o de iniciati%a2$ as como determinar el im'actoen los ob/eti%os fi/ados)

En el terreno de la ciencia la tecnologa$ los indicadores &an tenido a 'artir de la'osguerra un desarrollo mu significati%o) 3rente a un escenario de creciente im'ortanciade la ciencia la tecnologa 'ara el desarrollo social econmico$ la toma de decisin eneste cam'o se &a con%ertido en un desafo cla%e) 4ebido a la com'le/idad del sistema$ lamulti'licidad &eterogeneidad de los agentes in%olucrados las limitaciones de recursos$los flu/os de informacin resultan centrales 'ara la toma de decisiones$ tanto en los+mbitos gubernamentales como em'resariales acad*micos)

Es as como el 'roblema de dis'oner de informacin -ue refle/e$ cuantitati%a cualitati%amente$ los distintos as'ectos de las acti%idades cientficas tecnolgicasre%isten una gran im'ortancia a la &ora de asignar recursos$ determinar 'olticas e%aluarel im'acto de su e/ecucin) La informacin e indicadores confiables$ 'ertinentes$ com'arables internacionalmente$ resaltan como com'onentes b+sicos 'ara 'rofundizar los

diagnsticos orientar los esfuerzos en su desarrollo)

Como se9ala Annerstedt 1:;;oficial? el resultado de sutraba/o) El con/unto de las 'ublicaciones cientficas encarna$ entonces$ el acer%o deconocimiento dis'onible $ a la %ez$ demarcan el cam'o dan escenario a los debatescientficos)

La %alidez de los indicadores bibliom*tricos de'ende de -ue su materia 'rima$ las

'ublicaciones cientficas$ sean re'resentati%as de los resultados de la in%estigacin) Estoim'lica -ue e(istan mecanismos -ue garanticen la estabilidad de sus contenidos la

CAIC"! 7 CONICE!) 0+gina @


4/15

calidad de los mismos) Esos mecanismos est+n dados 'or estrictas restricciones deacceso a la 'ublicacin$ basados en la e%aluacin de 'ares$ de manera -ue los miembrosde la 'ro'ia comunidad cientfica$ desem'e9an alternati%amente el 'a'el de e%aluador ode e%aluado) 4e esta manera se establece un mecanismo de re%isin rigurosa -ue 'ermiteconfiar en la calidad de la obra de otros -ue se encuentra 'ublicada) Estos mecanismos decontrol de calidad adecuacin a los c+nones cientficos est+n orientados a mantener elcr*dito la re'utacin de los miembros de la comunidad)

.eg,n Maltr+s 18@2$ la re%isin -ue sir%e de filtro al ingreso del sistema de 'ublicacin secaracteriza 'or tres as'ectos= 'aridad 1es realizada 'or colegas de la misma condicin2$'luralidad 1se demanda el dictamen de %arios +rbitros2 anonimato 1la identidad del autor de los +rbitros se mantiene oculta en todo el 'roceso de e%aluacin2)

En base a lo considerado anteriormente$ es 'osible dar cuenta de la base terica de losindicadores bibliom*tricos$ como e('resiones de la 'roduccin del conocimiento) 0or unlado$ la necesidad de reconocimiento 1refle/ada tambi*n en los mecanismos burocr+ticos

de e%aluacin de los in%estigadores en base a sus 'ublicaciones2 im'ulsa a los cientficosa 'ublicar todos sus resultados$ mientras -ue el sistema de re%isin 'or 'ares de lasre%istas cientficas garantiza -ue los documentos -ue se contabilizan tienen calidad originalidad cientfica)

La fuente m+s difundida 'ara los indicadores bibliom*tricos consiste en la e(traccin deinformacin estadstica de bases bibliogr+ficas) Estas fuentes de informacin cuentan condatos acumulados durante muc&os a9os$ de los documentos 'ublicados en re%istascientficas seleccionadas) Contienen referencias bibliogr+ficas -ue incluen el ttulo delartculo$ sus autores$ la 'ertenencia institucional de los mismos$ la re%ista de 'ublicacin el abstract del documento$ entre otros datos) E(isten bases multidisci'linarias$ como elScience Citation Index 1utilizada en este estudio2 Pascal$ de disci'linas es'ecficas$

como Medlineo Chemical Abstracts)

La seleccin de las re%istas -ue son inde(adas en esas bases de datos se realiza confuertes criterios de calidad editorial 1reconocimiento del comit* editor$ calidad acad*micade los encargados del referato$ etc2$ o'iniones de e('ertos an+lisis de las citas recibidas'or las re%istas como una muestra de su %isibilidad) Esa seleccin tambi*n debe garantizaruna correcta cobertura de los temas -ue la base de datos 'retende cubrir) En el caso delas bases internacionales se busca cubrir la corriente 'rinci'al 1mainstream2 de la cienciainternacional)

.in embargo$ los indicadores bibliom*tricos tienen ciertas limitaciones como m*todo demedicin de la 'roduccin cientfica) En 'rimer lugar$ la in%estigacin tiene di%ersos

as'ectos -ue no 'ueden ser ca'tados 'or los estudios bibliom*tricos) .iguiendo a MaraBordons 18:2$ la in%estigacin inclue$ adem+s de la cientfica b+sica e('resada en la'ublicacin de resultados$ tareas de car+cter tecnolgico$ docente social) La bibliometrasolo 'uede abordar la faceta cientfica$ mientras -ue el resto de las acti%idades deben serestudiadas 'or otro ti'o de indicadores)

0or otra 'arte$ no e(isten bases bibliogr+ficas ca'aces de cubrir la totalidad de la'roduccin cientfica de un 'as) En general estas fuentes intentan re'resentar la corriente'rinci'al 1mainstream2 internacional de la ciencia$ mediante la seleccin de las re%istasm+s re'resentati%as de cada tema 'ara la comunidad de los in%estigadores$'rinci'almente 'ertenecientes a los 'ases centrales) Esto im'lica -ue los temas -ueinteresan a esa corriente 'rinci'al se %er+n re'resentados$ mientras -ue otros casi noa'arecer+n) Este fenmeno afecta fuertemente a la los 'ases latinoamericanos$ cuos

CAIC"! 7 CONICE!) 0+gina


5/15

temas de in%estigacin$ en algunas disci'linas m+s -ue en otras$ 'ueden di%ergir dea-uellos estudiados en los 'ases m+s desarrollados)

A 'esar de estos incon%enientes$ los indicadores bibliom*tricos se &an con%ertido en las&erramientas m+s difundidas 'ara la medicin de la 'roduccin cientfica en todo elmundo$ a -ue brindan un enfo-ue ob/eti%o com'arable) La madurez de estasmetodologas 'uede %erse en la am'lia bibliografa e(istentes sobre el tema$ incluendodocumentos de la OC4E$ el organismo rector de las estadsticas de ciencia$ tecnologa einno%acin a ni%el mundial 1Oubo$ :;;2)

.4 Metodologa para la construccin deindicadores bibliomtricos del !"I#$

.i bien los indicadores bibliom*tricos resultan una im'ortante &erramienta 'ara la gestininstitucional la e%aluacin de las acti%idades cientficas tecnolgicas$ la identificacin dela afiliacin de los autores -ue firman un artculo resulta una tarea com'le/a)

La fuente utilizada fue el Science Citation Index$ una base interdisci'linaria$ -ue reco'ilalas citas bibliogr+ficas de todos los documentos 'ublicados en m+s de seis mil re%istascientficas internacionales de 'rimer ni%el) En el .CI$ como en la maora de las bases dedatos bibliogr+ficas$ se cuenta con un cam'o -ue inclue la afiliacin institucional de losautores 'ero *ste carece de normalizacin) 4e esta manera$ una misma institucin 'uedefigurar de maneras mu di%ersas$ a causa de la utilizacin de siglas distintas o deabre%iaturas diferentes) 0or este moti%o$ resulta im'osible &acer una clasificacin

autom+tica de la afiliacin institucional de los registros sin un tratamiento 're%io de losdatos)

A tal efecto$ se desarroll un m*todo de clasificacin autom+tica$ -ue 'artiendo de unatabla de instituciones -ue inclue el nombre com'leto en es'a9ol$ el nombre com'leto eningl*s una o %arias abre%iaturas normalmente utilizadas$ analiza el cam'o de afiliacin lo asigna a las instituciones corres'ondientes) 0ara esto$ se recurre a la a'licacin det*cnicas de e('resiones regulares -ue subsanan las %ariaciones en las abre%iaturas$ entreotros casos de desnormalizacin)

Esta t*cnica acelera muc&o el 'roceso de clasificacin en relacin con la alternati%a deltraba/o manual$ aun-ue en su eta'a de desarrollo re-uiri una fuerte tarea de an+lisis de

los datos 'osterior c&e-ueo de los resultados) 3inalmente$ se obtu%ieron m+rgenes deerror inferiores al :D de la 'ublicacin total de cada institucin)

La identificacin de los artculos del CONICE!$ sin embargo$ no 'uede ser abordada conesta misma t*cnica$ a -ue muc&os in%estigadores tienen una doble de'endenciainstitucional$ manteniendo como lugar de traba/o uni%ersidades$ institutos o centros -ue no'ertenecen a la esfera del Conse/o Nacional) .i bien en ocasiones los autores mencionansu afiliacin institucional al CONICE! /unto con su otra de'endencia$ esto no sucede entodos los casos)

0or ese moti%o$ se decidi identificar la 'roduccin de cada uno de los in%estigadores delConse/o en la base de datos 'ara el 'eriodo 8#8$ utilizando como insumo el listadocom'leto de 'ersonal del CONICE!) .e inclueron in%estigadores$ becarios 'ersonal dea'oo de las ciencias duras$ +reas cubiertas 'or el .CI)

CAIC"! 7 CONICE!) 0+gina


6/15

Al igual -ue la identificacin de las afiliaciones institucionales$ la deteccin de los artculosde cada in%estigador 'resenta ciertas dificultades) 0or un lado$ los nombres tam'oco est+nnormalizados$ de manera -ue un mismo in%estigador 'uede a'arecer de formas distintas$sobre todo en el caso de los a'ellidos com'uestos) Adem+s$ el .CI slo consigna ela'ellido las iniciales de los autores$ 'or lo -ue resulta a,n m+s com'le/o identificar deforma un%oca a cada autor 1Fa%ier 3ern+ndez Fosefina 3ern+ndez resultanindistinguibles= >F) 3ern+ndez?2)

0ara garantizar la correcta asignacin de registros se utilizaron %ariables accesorias -ue'ermiten %erificar la relacin entre autores 'ublicaciones) 0articularmente$ se %erific ellugar de traba/o declarado en las bases de 'ersonal del CONICE! la disci'lina cientficaconsignada)

Luego de di%ersos ensaos$ -ue 'ermitieron constatar la confiabilidad del m*todo$ seasignaron autom+ticamente a-uellos artculos en los -ue coincidan el a'ellido$ las iniciales

com'letas el lugar de traba/o$ -ue &aba sido 're%iamente codificado) 0osteriormente$ serealiz una %erificacin manual de a-uellos registros en -ue el a'ellido la 'rimera inicialcoincida con los datos de alg,n in%estigador del CONICE!$ -ue no &aban cado en el'rimer con/unto asignado autom+ticamente)

A continuacin se 'resentan indicadores descri'ti%os de la distribucin institucional de losartculos argentinos registrados en el .CI) 0ara los indicadores de colaboracin entreinstituciones se utiliz la metodologa de contabilizacin 'or enteros$ es decir -ue unartculo firmado 'or in%estigadores de m+s de una institucin se contabiliza como uno 'aracada una de las entidades 'artici'antes)

.% Indicadores de la produccin cient&icaargentina

En 8G se registraron un total de );@ artculos cientficos con la 'artici'acin deinstituciones argentinas) Estos %alores colocan a la Argentina en el tercer lugar entre los'ases latinoamericanos$ luego de Brasil M*(ico -ue cuentan con 8)HG8 )Hres'ecti%amente)

El r+fico : 'resenta la e%aluacin de la 'roduccin argentina a 'artir de :;;$

obser%+ndose un marcado crecimiento &asta 8@$ cuando se registra una cadasignificati%a -ue se re%ierte en los a9os siguientes) Este decrecimiento 'arece estarrelacionado con el im'acto de la crisis econmica de 8:#88 su im'acto sobre elsistema cientfico$ -ue %io reducida su ca'acidad de 'ublicar en los a9os subsiguientes)

El mismo gr+fico 'resenta la discriminacin de los artculos seg,n colaboracininternacional$ es decir a-uellos en los -ue 'artici'an instituciones e(tran/eras /unto conargentinas) .e obser%a -ue el 'eso de las 'ublicaciones realizadas en colaboracininternacional se &a ido incrementando de forma sostenida en los ,ltimos -uince a9os$'asando de un :D en :;; a un


7/15

Grfico 1. Produccin argentina en SCI segn colaboracin internacional

Al mismo tiem'o$ el 'roceso 'aralelo de crecimiento de los registros en colaboracin

internacional es ca'az de sostener el aumento de la 'roduccin total$ a 'esar delamesetamiento de los artculos de autores e(clusi%amente argentinos a 'artir de :;;;) .inembargo$ este fenmeno se rom'e en 8@$ cuando la cada de los registros sincolaboracin no alcanza a ser com'ensado) La cada en las 'ublicaciones con autorese(clusi%amente locales 'uede asociarse con los costos -ue im'lica la 'ublicacin en lasre%istas inde(adas en el .CI$ cotizados en dlares$ con las facilidades -ue im'lica contarcon socios e(tran/eros) 0or este moti%o$ a 'esar del fuerte re'unto de las 'ublicacionestotales desde 8$ la cantidad de artculos e(clusi%amente argentinos a,n no alcanza los%alores -ue 'resentaba en 88)

4entro de la 'roduccin argentina$ la institucin -ue 'resenta una maor 'roduccin es elCONICE!$ cuos in%estigadores tienen 'artici'acin en el )HD de los artculos

registrados en 8) .in embargo$ si se agru'a el con/unto de las 5ni%ersidadesNacionales 155)NN)2$ tambi*n alcanzan una 'resencia mu im'ortante$ con el GH)@D) Latabla :$ 'resenta los %alores 'ara cada con/unto 'ara los artculos -ue tienen en com,n)

Tabla 1. Produccin cientfica del COIC!T " #ni$ersidades acionales en SCI %&&'

CONICE! < @@ )HD

55)NN) @ HH; GH)@D

CONICE! 55)NN) @ :G )


8/15

Como se obser%a en el gr+fico :$ e(iste una im'ortante su'er'osicin de ambos con/untos$-ue alcanza el )


9/15

Tabla %. Produccin cientfica (or institucin

%&&& %&&1 %&&% %&&) %&&* %&&'COIC!T @ @G; @ H @ H:< @ @ HH < @@

#+A : @8< : @:H :


10/15

El r+fico @ muestra la red construida a 'artir de la co'ublicacin de artculos en la basede datos) El di+metro de los crculos re'resenta la cantidad de registros 'or institucin$mientras -ue las lneas dan cuenta de los artculos con autores 'ertenecientes a las dosinstituciones -ue %inculan) El grosor de estas lneas se9ala la cantidad de artculoscom'artidos)

Otro fenmeno interesante es la co'ublicacin de artculos en con/unto con institucionese(tran/eras) En los ,ltimos : a9os$ la colaboracin internacional dentro de la 'roduccinargentina &a crecido fuertemente$ tri'licando su %alor 'orcentual en relacin con :;;)0ara dar cuenta de esto$ se &an coloreado las instituciones de acuerdo a si se encuentran'or arriba o 'or deba/o de la media 1


11/15

difcil de com'render a sim'le %ista) .i se disminuera la cantidad mnima deco'ublicaciones$ de manera -ue los lazos a'arecieran en el gr+fico$ la red se 'resentaramuc&o m+s conectada$ aun-ue la gran maora de las relaciones tienen %alores muba/os) 4el total de las relaciones entre instituciones$ el :GD se da a tra%*s de una solaco'ublicacin el D 'or menos de co'ublicaciones)

En el gr+fico se 'uede obser%ar el 'a'el central del CONICE!$ -ue m+s all+ de sudimensin en cuanto a cantidad de 'ublicaciones$ cuenta con %nculos con todas lasdem+s instituciones$ e(ce'to con la 5ni%ersidad Nacional de Lu/an) La 5ni%ersidadNacional de La 0lata 15NL02$ 'or su 'arte$ muestra una gran integracin a la red$'resentando m+s lazos con las dem+s instituciones -ue la 5ni%ersidad de Buenos Aires$ a'esar de contar con una menor cantidad de registros)

En cuanto a la colaboracin internacional$ el CONICE! tiene un 'orcenta/e deco'ublicacin con autores e(tran/eros le%emente su'erior al 'romedio) 0or el contrario$ la5BA la 5NL0$ -ue ocu'an el segundo tercer lugar en cantidad de 'ublicaciones$ est+n

un 'oco 'or deba/o de la media$ ambas con un


12/15

&an e(cluido del an+lisis a las Ciencias .ociales Jumanidades$ 'or no ser *sta la fuentea'ro'iada 'ara su estudio)

Tabla *. Publicaciones del (ersonal de COIC!T en SCI %&&' segn rea

/ISCIP,IA CATI/A/ I4!STIGA/O-!S P-O!/IOCiencias M*dicas :G :88 $G

Biologa :G $


13/15

Con el ob/eti%o de com'arar la 'roduccin cientfica del CONICE! con el total nacional$ se&an desagregado las 'ublicaciones de ambos con/untos seg,n las disci'linas -ue el I.Iasigna a cada una de las re%istas -ue inde(a) Los datos se resumen en la !abla elr+fico )

.e 'uede obser%ar -ue el CONICE! es mu fuerte en las +reas de >3sica$ -umica ciencias de la tierra? >Ciencias de la %ida?$ donde 'artici'a en el H:D el :D de la'roduccin total argentina en esas disci'linas) En >Medicina Clnica?$ 'or el contrario$'resenta una 'artici'acin muc&o menor$ cercana al @GD)

Tabla '. Publicaciones del (ersonal de COIC!T " total argentino en SCI %&&' segn reas deISI

/ISCIP,IA COIC!T TOTA, 8

3sica$ -umica ciencias de la tierra :8 8:@G H:D

Ingeniera$ com'utacin tecnologa @;H 8H D

Ciencias de la %ida :


14/15

.( onsideraciones &inales

Los indicadores bibliom*tricos son$ &o en da$ una de las &erramientas m+s utilizadas ani%el mundial 'ara la e%aluacin de la acti%idad cientfica) Entre sus fortalezas est+ laca'acidad de ser a'licados a distintos ni%eles$ desde 'ases &asta instituciones$ gru'os dein%estigacin e in%estigadores) .us metodologas$ adem+s$ est+n %alidadas a ni%elinternacional$ lo -ue facilita su utilizacin como unidad de com'aracin entre las unidades-ue se desea analizar)

La informacin a-u 'resentada da cuenta de algunas de las 'osibilidades de estosindicadores 'ara la gestin e%aluacin de instituciones dedicadas a las acti%idadescientficas tecnolgicas) Asimismo$ su utilizacin 'ermite obtener 'anoramas mu ,tiles

'ara la 'lanificacin la definicin de lneas de in%estigacin)

Actualmente$ en nuestro 'as a'arece una 'reocu'acin cada %ez maor de lasinstituciones de in%estigacin desarrollo 'or la utilizacin de estos indicadores como unamedida ob/eti%a de la 'roducti%idad de sus in%estigadores) El CONICE! es una institucin'ionera en este sentido$ -ue utiliza estas estadsticas tanto como &erramienta dee%aluacin de sus in%estigadores$ como 'ara el monitoreo de +reas estrat*gicas ladefinicin de 'olticas)

En ese conte(to$ se obser%a tambi*n una maor demanda de este ti'o de informacin 'or'arte de las uni%ersidades$ aun-ue el acceso a las bases de datos internacionales a'arececomo una limitante crtica$ dado -ue su costo no es menor) Actualmente e(isten iniciati%as

'ara solucionar este 'roblema$ -ue /unto la necesaria ca'acitacin$ dar+ maor 'asi%idada la utilizacin de los indicadores bibliom*tricos como &erramientas 'ara la gestininstitucional)

.) *ibliogra&a

Annerstedt$ Fan 1:;;


15/15

Oubo$ "os&io 1:;;2$ >Bibliometric indicators and analsis of researc& sstems= Met&odsand e(am'les?$ .!I Qoring 0a'er$ OC4E$ 0aris)

VOLVERALINICIO

CAIC"! 7 CONICE!) 0+gina :
http://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htmhttp://var/www/apps/conversion/tmp/index.htm

Albornoz - Indic Bilbiom Arg 2003-2006

Documents

Transcript of Albornoz - Indic Bilbiom Arg 2003-2006