Definición de un modelo de evaluación de la...
32
Transcript of Definición de un modelo de evaluación de la...
Premio RIMA – Fundación Biblioteca Central de Medicina 2
Resumen
El Departamento de Sistemas y el Comité Médico de Calidad de Contenidos de la Fundación Biblioteca
Central de Medicina han desarrollado un autómata destinado a la aplicación de tres funciones de
evaluación de conductas de uso en la Red Informática de Medicina Avanzada: una métrica de valoración
de actividades entendidas como procesos de autogestión del conocimiento, un test estandarizado
convertidor de horas virtuales en horas lectivas y un artefacto tutorial personalizado que define el mapa
de ubicación del usuario y lo orienta hacia contenidos y actividades que incitan procesos reflexivos.
El modelo de evaluación del Premio RIMA es también un modelo de evaluación de la autogestión del
conocimiento como resultante de procesos metacognitivos. Dicho modelo se basa en la ponderación de
las actividades desarrolladas por el usuario dentro del Programa de Autorregulación del Aprendizaje en
el contexto del Desarrollo Profesional Continuo al que adhiere RIMA, reconociendo en cada ciclo del
proceso (6 por año) a los profesionales que alcanzan puntuación para obtener créditos para el
mantenimiento de su certificación; y a la vez, en un continuum sumatorio de los seis ciclos otorga a los
especialistas más destacados el Premio a la Excelencia en la Actualización Científica Internacional por
medio de la certificación “Medalla de Plata” y “Medalla de Oro”.
Introducción
El ejercicio de la medicina obliga a los profesionales a un aprendizaje continuo para mantener al día sus
conocimientos y habilidades que le aseguren un nivel satisfactorio de desempeño clínico. El vertiginoso
desarrollo científico y tecnológico en el terreno de las ciencias médicas conduce a una renovación
constante de los conocimientos, de los procedimientos diagnósticos y terapéuticos y de los protocolos de
manejo de las enfermedades. Ello impone al médico una imperiosa necesidad de actualización
permanente para sostener, a lo largo de su vida, una práctica profesional cualificada, con altos
estándares de calidad. Dicho proceso de aprendizaje y desarrollo profesional continuo constituye
además una obligación ética para cualquier médico, por su responsabilidad frente al paciente, la
comunidad y la sociedad.
En este sentido, la formación médica continuada cumple con el importante rol de garantizar el
mantenimiento de la competencia clínica, es decir, de la calidad del ejercicio médico, evitando que la
capacitación y el entrenamiento obtenido en las fases de pregrado y de postgrado inmediato,
generalmente a través de sistemas de residencias médicas, se torne obsoleto e insuficiente para
fundamentar y sostener un desempeño eficiente.
La recertificación de especialistas es a su vez un proceso de acreditación de la idoneidad profesional muy
vinculado con el concepto de formación médica continuada o “long life education”. Aún cuando se lleva
a cabo a través de un abanico de componentes o modalidades, toda recertificación tiene implícito el
reconocimiento a la formación continua del especialista. Y al mismo tiempo, busca estimular este
Premio RIMA – Fundación Biblioteca Central de Medicina 3
proceso de aprendizaje permanente y de autoexigencia del médico para mantener actualizados los
conocimientos y habilidades propios de su disciplina.
RIMA como herramienta de formación médica continuada
Hay dos procedimientos o modelos básicos para lograr el objetivo citado de la formación médica
continuada. El primero, es la enseñanza estructurada organizada por diversas entidades profesionales en
las que participan los médicos con fines formativos. El segundo y más importante, responde al proceso
de reflexión del médico respecto de la atención de sus pacientes y sus resultados, desencadenando
actividades autorreguladas de aprendizaje, es decir, la formación adquirida de forma individual y
personal mediante el estudio y la reflexión sobre su propia experiencia práctica frente a los pacientes.
Es importante señalar que, en las dos últimas décadas, el concepto de “autogestión del conocimiento”
ha adquirido especial connotación en el terreno de la pedagogía y del proceso enseñanza-aprendizaje.
Los aportes de la psicología cognitiva y de las neurociencias referentes al aprendizaje significativo y a la
organización de la estructura cognitiva vinculada a la práctica, ha conducido a que el paradigma del
proceso de la educación se haya ido transformando, desde una perspectiva conductista basada en la
transmisión de información (educación informativa) a un enfoque formativo individualizado, que apunta
a un tipo de aprendizaje adaptado a las necesidades del propio individuo.
Esta autogestión del conocimiento por parte del médico en respuesta a los requerimientos que impone
su quehacer profesional y a las necesidades de sus pacientes ha demostrado ser mucho más eficiente
que la transmisión y recepción pasiva de información (a través de lecturas recomendadas, conferencias,
etc.) para lograr un aprendizaje constructivista, capaz de ser transferido al cuidado y atención de los
pacientes.
No cabe duda por tanto de que la lectura de la literatura científica representa uno de los pilares
fundamentales del aprendizaje y de la actualización del profesional de la medicina, especialmente
cuando es resultado de la propia iniciativa y motivación interna del médico. En ese contexto, el médico se
convierte en protagonista activo de su propia formación y la encauza a favor de su ejercicio profesional y
en beneficio de sus pacientes.
Un estudio publicado en 1999 en “The Journal of Continuing Education in the Health Profession”, que
involucró a 652 médicos participantes en el “Maintenance of Competence Program (MOCOMP)” del
Royal College of Physicians and Surgeons of Canadá puso en evidencia que la lectura de artículos
médicos representaba el principal estímulo para su aprendizaje.
Premio RIMA – Fundación Biblioteca Central de Medicina 4
En consecuencia, se torna cada vez más necesario poner al alcance de los médicos modelos de
información y de autogestión de conocimientos que complementen los sistemas “formales” de educación
médica estructurada y que apoyen su esfuerzo formativo individual y su anhelo ético y profesional de
ofrecer la mejor atención a sus enfermos.
La Red Informática de Medicina Avanzada (RIMA) cumple con este cometido. En su objetivo de
contribuir al desarrollo del máximo potencial individual, RIMA ofrece a los profesionales un completo
sistema de información científica y de apoyo a la gestión e investigación clínica, a través un conjunto de
servicios y productos, que están destinados a la construcción del conocimiento, la capacitación médica
continua y la actualización científica. Nuestro modelo se centra en el autoaprendizaje y en la práctica de
una medicina basada en las mejores evidencias.
Entre los principales recursos que RIMA pone a disposición de los profesionales están los siguientes:
Core Journals
Una de las hemerotecas más grandes y actualizadas del mundo que permite acceder a más de
2400 revistas internacionales, todas ellas ordenadas por especialidad, y mediante la cual el
médico puede obtener libremente copia completa de artículos.
Central de Inteligencia Médica
Servicio interactivo que permite realizar búsquedas semánticas de información biomédica
internacional. Posibilita al médico formular cualquier consulta en su propio idioma y recibir por
respuesta los resultados de una búsqueda exhaustiva y precisa de información sobre el tema o
el caso clínico consultado, extraída de 33 fuentes internacionales, con copias completas de
artículos y capítulos de libros.
Reporte para Investigadores
Pone a disposición del médico un servicio personalizado de recuperación automática
permanente de información biomédica, sobre los temas que constituyen un foco de interés en
su trabajo asistencial o en su quehacer investigativo. Brinda la oportunidad de recibir, semana
a semana, información de lo nuevo publicado en las mejores revistas internacionales sobre los
temas de búsqueda solicitados, así como solicitar copia completa de los artículos de interés.
Instituto de Seguridad del Paciente
Difunde las mejores prácticas de las organizaciones de más alta fiabilidad para la prevención
del error médico. Brinda acceso a artículos full text que se actualizan semanalmente y a los
más importantes documentos oficiales internacionales.
Premio RIMA – Fundación Biblioteca Central de Medicina 5
Medline Pearls
Programa integral de actualización científica que responde a los principios de selección,
análisis estadístico, lectura crítica y filtros metodológicos propuestos por la Medicina Basada
en Evidencias. Permite al médico leer en su propio idioma las sinopsis analíticas de los mejores
trabajos de medicina basada en evidencias de la literatura médica internacional.
Mi biblioteca
Un portafolio personal que posibilita al médico clasificar y archivar los textos completos de los
artículos que ha seleccionado para leer.
Guías de práctica clínica
Ofrece al profesional una completa y actualizada colección de guías y consensos, ordenadas
por especialidad, y comentadas por expertos.
Miríada
Calendario actualizado de congresos, seminarios, conferencias y cursos de capacitación local e
internacional en cada especialidad, con el fin de contribuir a la participación de los
profesionales en estos eventos.
Medical Mobile
Acceso a una selección semanal de las mejores utilidades médicas para teléfonos móvi
les u ordenadores, con breves descripciones y acceso directo a las descargas.
Todos estos recursos tienen un potencial y un fin formativo, directo o indirecto. Con su uso sistemático, el
profesional tiene acceso, en todo momento, a la información más actual sobre todos los avances
mundiales de su especialidad, cuenta con soporte bibliográfico para resolver sus propios problemas
clínicos y dispone de la mejor literatura internacional para leer y aprender. Todas estas razones
convierten a RIMA en una herramienta, válida y efectiva, para la formación médica continuada.
RIMA como sistema de certificación y obtención de créditos para la recertificación
Toda política de recertificación lleva implícito el reconocimiento del esfuerzo del especialista por su
formación médica continuada.
La Asociación Médica Americana sostiene como primer o principal elemento para recertificar, la lectura
médica continua de al menos 2 horas semanales de bibliografía médica relacionada con la especialidad.
En nuestros días, existe una clara tendencia de los organismos recertificadores (asociaciones, sociedades,
colegios médicos) a otorgar créditos a los médicos por actividades de lectura. Pero, la mayoría de estas
entidades acreditan la lectura de información médica, que es posteriormente evaluada a través de
Premio RIMA – Fundación Biblioteca Central de Medicina 6
preguntas de elección múltiple. En concordancia con los hallazgos de las neurociencias puede aseverarse
que esta metodología sólo logra, en gran parte de los casos, un tipo de aprendizaje memorístico (de
corta duración, fuera de contexto) y no significativo, que es en definitiva la forma de aprendizaje
(“fijación de conocimientos”) que busca promover la pedagogía médica moderna. Y por otro lado, deja
de reconocer el esfuerzo autodidacta de los especialistas a través de la lectura sistemática, responsable y
reflexiva de la literatura médica.
Por estas razones, se está prestando cada vez mayor atención en muchos países a la búsqueda de un
modelo que complemente el sistema tradicional de otorgamiento de créditos académicos por la lectura
“controlada” de artículos, con un modelo capaz de reconocer la autogestión del conocimiento por parte
del médico, en su afán interno de aprendizaje.
Premio al mérito y obtención de créditos para recertificación a través del uso de RIMA
El médico encuentra en RIMA una oferta de información científica, constantemente actualizada que da
total respuesta a sus necesidades de lectura y de aprendizaje médico continuado. Esta información es
además cuidadosamente supervisada por un comité profesional altamente cualificado.
Es nuestra meta contribuir a la excelencia profesional, en beneficio de los pacientes, de la comunidad y
de la sociedad, y a su vez actuar en conjunto con las autoridades locales competentes para reconocer el
esfuerzo de lectura y actualización de los profesionales de la salud que utilizan RIMA para su
capacitación.
En la búsqueda de este objetivo, la Fundación Biblioteca Central de Medicina ha desarrollado un modelo
que combina:
- una sólida herramienta de educación médica (RIMA), con una amplia oferta de recursos formativos,
dirigidos a la construcción del conocimiento a través de un autoaprendizaje que retroalimenta el
ejercicio profesional
- un sistema de medición del grado de utilización de dichos recursos por parte de los profesionales de la
salud
Este sistema de acreditación de la formación médica continuada, a través de RIMA, se basa en un
riguroso control del uso, consciente y juicioso, de los diferentes servicios y productos de información
médica que brinda nuestra plataforma por parte de los médicos que integran los “Campus RIMA”, a
través de un software “inteligente” que ha sido creado con tales fines.
Con este instrumento se logra evaluar el uso de RIMA, no sólo desde el punto de vista cuantitativo, sino
también cualitativo, a través de una ponderación relativa del grado de aporte que cada recurso brinda
Premio RIMA – Fundación Biblioteca Central de Medicina 7
para la formación médica y el desempeño clínico, con el fin de tener no sólo una medida estática, sino
también una valoración analítica y adecuada del alcance de los objetivos de actualización y capacitación.
La medición de estos desempeños dentro de RIMA, es decir, de los comportamientos observables,
permite clasificar y categorizar, de manera objetiva, a los profesionales de la salud en cada ciclo de
valoración anual, con vistas a tomar decisiones acertadas para su reconocimiento a través de premios
y/o créditos de recertificación.
Dicha categorización, toma en cuenta dos aspectos:
- De manera individual, el tiempo y calidad de utilización de los recursos de actualización científica de
RIMA,
- El percentil particular en que se encuentra cada profesional, a partir de su ubicación dentro de una
curva de distribución normal o gaussiana, respecto al resto de los miembros de cada “Campus RIMA”,
atribuible al uso cuantitativo y cualitativo de RIMA.
A través de este modelo, la Fundación Biblioteca Central de Medicina persigue el objetivo de premiar el
mérito de aquellos profesionales que tienen un elevado nivel de actividad y uso de RIMA como
herramienta para la formación médica continúa. Dicho reconocimiento se expresará en dos categorías
de excelencia en consonancia con el grado de esfuerzo de actualización científica:
Certificado “MEDALLA DE ORO”. Premio RIMA anual a la Excelencia en Actualización Científica
Internacional.
Certificado “MEDALLA DE PLATA”. Premio RIMA anual a la Excelencia en Actualización Científica
Internacional.
Los organismos recertificadores tienen además a su disposición una metodología válida y confiable para
el otorgamiento de créditos para la recertificación de especialistas, en virtud de su anhelo individual de
capacitación.
Marco Conceptual
A medida que nos internamos en la era del conocimiento, van cambiando nuestros conceptos acerca de
qué es el aprendizaje, de dónde y cómo se realiza y para qué sirve.
Esto implica un giro drástico hacia sistemas didácticos centrados en el usuario, con fronteras permeables
entre sectores y niveles. Para que los médicos puedan aprender activamente es preciso mejorar las
prácticas actuales y desarrollar enfoques nuevos y variados que aprovechen las oportunidades que
ofrecen las Tecnologías de la Información y Comunicación (TICs)
Premio RIMA – Fundación Biblioteca Central de Medicina 8
Las tecnologías de aprendizaje basadas en las TICs ofrecen un enorme potencial para la innovación en
métodos de enseñanza y aprendizaje. Los sistemas de Formación médica continuada deben adaptarse a
la manera en que los profesionales, ahora, viven y organizan su existencia. Esto es especialmente
importante a la hora de lograr la igualdad entre los profesionales de diferentes recursos y localizaciones
geográficas.
El reconocimiento explícito –independientemente de la forma– es un medio eficaz para motivar a
quienes adhieren a la formación no tradicional. Los modelos innovadores de certificación de aprendizajes
no formales también son importantes para ampliar el espectro del reconocimiento, cualquiera que sea el
tipo de sujeto que aprenda.
Es absolutamente vital desarrollar sistemas de calidad para la certificación del aprendizaje empírico
previo, y promover su aplicación en contextos muy variados. Es preciso comenzar a tomar conciencia del
valor de este tipo de certificación para lograr que todos y cada uno de los integrantes de la comunidad
médica, a lo largo de toda su vida, puedan acceder fácilmente a un aprendizaje continuado.
Métricas
“Medición es la asignación de números a cosas de acuerdo con alguna regla deterministica 1 y no
degenerativa”.
El concepto de métrica es puramente cuantitativo. Implica asignar un número real a cualquier ítem
seleccionado en el dominio de un concepto. Se aplica para obtener indicadores cuantitativos de aspectos
de diferentes naturalezas para disciplinas que van desde la ingeniería de software2 hasta modelos de
administración y gestión como el Balanced Scorecard3 (KPIs).
Como ejemplos clásicos de conceptos de métrica podemos mencionar la temperatura en grados Celsius,
y la longitud en centímetros. Con el fin de establecer estas métricas, las abstracciones “temperatura” y
“longitud” están relacionadas a eventos de observación a través de reglas. Las reglas determinan las
escalas de grados Celsius y centímetros correspondientes. Un concepto cuantitativo, las reglas asociadas
a él y los eventos de observación, unidos, constituyen un modelo de métrica para los conceptos escalares
de “temperatura” y “longitud”.
Para la evaluación de la autogestión del conocimiento seleccionamos y formulamos los conceptos
necesarios para medir el desempeño basado en las actividades realizadas por el médico en RIMA.
Algunos conceptos se relacionan directamente con las nociones centrales de los objetivos que plantea la
1 Asignación numérica constante ante condiciones constantes 2 Algunas métricas usadas son en Ingeniería de Software: LOC (líneas de código), complejidad ciclomática de McCabe, complejidad de Halstead, coeficiente de complejidad de un grafo. 3 Es una herramienta de administración de empresas que muestra continuamente cuándo una compañía y sus empleados alcanzan los resultados definidos por el plan estratégico. También es una herramienta que ayuda a la compañía a expresar los objetivos e iniciativas necesarias para cumplir con la estrategia.
Premio RIMA – Fundación Biblioteca Central de Medicina 9
autogestión del conocimiento y, por lo tanto, resulta indispensable que sean considerados. Se trata de
criterios normativos para la evaluación.
Otros conceptos, sin embargo, podrían en principio no aparecer como directamente relacionados con los
objetivos de la autogestión del conocimiento. Pero, en la medida en que representan causas de los
conceptos centrales o posibles efectos secundarios asociados al proceso, debemos medirlos y
eventualmente incorporarlos como métricas de evaluación. Este grupo provee criterios descriptivos
para la evaluación.
Ambos tipos de criterios, normativos y descriptivos, sugieren dos tipos diferentes de métricas. A pesar
de que a primera vista parezca que debemos prestar menos atención a las métricas descriptivas que a
las normativas, no debe ser así. Muchas métricas descriptivas, de hecho, son responsables del éxito de
los sistemas de autogestión del conocimiento y son determinantes en las métricas normativas. Por lo
tanto las métricas descriptivas conforman un segundo conjunto de métricas de evaluación de
desempeño cuyo significado se encuentra en el valor de su rol al determinar el curso de la autogestión
del conocimiento, más allá de su significancia normativa directa.
Modelo
Tomando en consideración lo expuesto acerca de la necesidad de contar con un modelo de evaluación
objetivo que permita reconocer a aquellos profesionales que se destacan del resto de sus colegas en la
forma en que autogestionan su conocimiento, hemos definido un modelo complejo y completo basado
en la utilización de un sistema de clasificación estadística que evalúa el uso de RIMA mediante métricas.
Los médicos usuarios de RIMA son agrupados en las denominadas Campus RIMA. El Campus RIMA está
formada por usuarios con una especialidad y lugar de residencia en común. Debido a ello, conforman un
grupo con características básicas comunes, cuyos miembros están dotados de similar potencial para ser
reconocidos por el nivel de su desempeño en el proceso de autogestión de su conocimiento.
Mediante el uso de los recursos que ofrece RIMA y a través de la aplicación de métricas, los usuarios del
Campus obtienen un puntaje determinado según las actividades que realizan durante el proceso de
autogestión del conocimiento.
Estas actividades son clasificadas en categorías según su naturaleza. La naturaleza de estas
características es la que permite ponderar las diferentes actividades dentro de RIMA.
Acceso a información
Valoración de información
Interacción con sus colegas
Conocimiento de actualidad de su disciplina
Premio RIMA – Fundación Biblioteca Central de Medicina 10
ACCESO A LA INFORMACIÓN
PRODUCTO INDICADORES
RIMA Tiempo de conexión a RIMA
RIMA Cantidad de días diferentes de conexión
CORE JOURNALS Apertura de Índices de ejemplares de las revistas de Core
CORE JOURNALS Lectura de Abstracts
CORE JOURNALS Lectura de Fulltext
REPORTE PARA INVESTIGDORES Consulta de diferentes estrategias
CENTRAL DE INTELIGENCIA MÉDICA Búsquedas diferentes consultadas
CENTRAL DE INTELIGENCIA MÉDICA Bases de datos diferentes consultadas
CENTRAL DE INTELIGENCIA MÉDICA Lectura de Abstracts
CENTRAL DE INTELIGENCIA MÉDICA Lectura de fulltext
MEDLINE PEARLS Cantidad de sinopsis analíticas consultadas
MEDLINE PEARLS Apertura de fulltext original
MEDICAL MOBILE Lectura de descripción de Softwares
SEGURIDAD DEL PACIENTE Lectura de Abstracts
SEGURIDAD DEL PACIENTE Lectura de fulltext
GUIAS DE PRÁCTICA CLÍNICA Lectura de fulltext de Guías de Práctica Clínica
MI BIBLIOTECA Lectura de Fulltext
VALORACIÓN DE LA INFORMACIÓN
PRODUCTO INDICADORES
CORE JOURNALS Armado de selección de revistas dentro de Mi Core
CORE JOURNALS Puntuación de Fulltext
REPORTE PARA INVESTIGADORES Clasifica abstracts en diferentes carpetas
CENTRAL DE INTELIGENCIA MÉDICA Opiniones emitidas
MEDLINE PEARLS Consultar nivel de evidencia científica de un artículo
MI BIBLIOTECA Clasifica abstracts en diferentes carpetas
INTERACCIÓN CON SUS COLEGAS
PRODUCTO INDICADORES
MIRIADA Aporte de Eventos que son subidos a la Web
REPORTE Envío de Abstract a un Colega
CENTRAL DE INTELIGENCIA MÉDICA Envío de Abstract a un Colega
MEDLINE PEARLS Participación en Foro
GUIAS DE PRÁCTICA CLÍNICA Lectura del Comentario de una Guía de Práctica Clínica
CONOCIMIENTO DE LA ACTUALIDAD DE SU DISCIPLINA
PRODUCTO INDICADORES
CORE JOURNALS Visualizar artículos más leídos por los colegas
MIRIADA Cantidad de Eventos consultados
MIRIADA Cantidad de Eventos a los que accedió a la Web del mismo
Premio RIMA – Fundación Biblioteca Central de Medicina 11
Especificación del Sistema de Evaluación
El sistema de evaluación consiste en el registro de todas las actividades realizadas por los usuarios
durante el uso de RIMA. Diariamente se procede a analizar los registros de cada uno de los usuarios, a
puntuarlo de acuerdo a lo establecido en las métricas y a adicionarlos a los puntos obtenidos
anteriormente. Una vez realizado el cálculo de los puntos actuales del usuario se lo clasifica en relación
con los colegas pertenecientes al mismo Campus RIMA. Recordemos que los miembros de cada Campus
RIMA tienen características comunes, lo que permite suponer que tienen posibilidades similares respecto
a alcanzar la máxima clasificación dentro de su grupo.
PROCESO DE EVALUACIÓN DE LOS DESEMPEÑOS DE CADA USUARIO DE RIMA
Registro de Actividades: Toda actividad realizada en cualquier sección de RIMA es registrada por el
sistema.
Cálculo de puntuación según métricas definidas: Diariamente el sistema analiza las actividades
registrada y asigna puntos de acuerdo a lo establecido por las métricas.
Clasificación / Reconocimiento: Luego de calcular los puntos correspondientes a todos los usuarios del
Campus, el sistema clasifica a los usuarios según su desempeño. Dicha clasificación será utilizada al
finalizar el período de evaluación definido para reconocer a los usuarios con el Premio RIMA a la
Excelencia en Actualización Científica Internacional.
El modelo, que se presenta como un test estandarizado4 , toma como sujetos a profesionales a médicos
que han utilizado el servicio durante los últimos tres meses y cuyas acciones se encuentren enmarcadas
dentro de lo esperable. Esto significa que, a criterio del Comité Internacional de Auditores de Calidad del
Sistema de Evaluación del Premio RIMA conformado para tal fin, pueden ser separados de la población
4 Es una prueba que ha sido normalizada o normatizada; es decir que ésta ha sido probada en una población con distribución normal para la
característica a estudiar.
Premio RIMA – Fundación Biblioteca Central de Medicina 12
estadística aquellos usuarios que realicen actividades en el sitio que sean incompatibles con la
naturaleza del Premio RIMA5.
Es importante destacar que la clasificación de un usuario en particular se realiza en todos los casos
comparándolo exclusivamente con colegas pertenecientes a su mismo Campus RIMA. Por lo tanto los
valores resultantes de la aplicación de los métodos estadísticos son propios de cada Campus RIMA y no
poseen la influencia de factor externo alguno.
La función de densidad de la probabilidad de obtener determinada cantidad de puntos para un médico
evaluado viene expresada por (ver teoría de distribución normal6):
con su media, mediana o esperanza matemática expresada por:
y cuya desviación estándar se calcula como:
siendo
Analizando la representación gráfica de la curva correspondiente a la función de probabilidad e
incluyendo los valores medios y los correspondientes a +/- n desvíos estándar podemos observar que se
identifica claramente cómo se distribuye la densidad de probabilidad en cada una de las zonas que
particionan7 el área bajo dicha curva.
5 “Premiar el mérito de aquellos profesionales que tienen un elevado nivel de actividad y uso de RIMA como herramienta para su formación
médica continua.” 6 http://es.wikipedia.org/wiki/Distribuci%C3%B3n_normal
7 En matemática, diremos que la familia de subconjuntos {Ai: i ∈ I} de un conjunto A es una partición (sobre A) si se cumple que:
1. para todo
2.
3.
µ = media
Premio RIMA – Fundación Biblioteca Central de Medicina 13
Basándonos en los puntos en común de las clasificaciones realizadas en los estudios de coeficiente
intelectual realizados por Terman para el test Stanford-Binet y por Wechsler8 determinamos 4 grupos
dentro de cada población:
Clasificación de desempeño
Clasificación de Desempeño Condiciones
Subestándar Aquellos cuya puntuación sea menor a la media menos un desvío estándar
Estándar Aquellos cuya puntuación se encuentre entre la media +/- un desvío estándar
Destacado Aquellos cuya puntuación supere a la media en 1 desvío estándar
Extraordinario Aquellos cuya puntuación supere a la media en 2 o más desvíos estándar
El Premio RIMA distingue a los médicos que alcancen rendimientos extraordinarios y destacados con la
Medalla de ORO y Medalla de Plata respectivamente.
Es importante destacar que el Premio RIMA no se concibe como un sistema que favorece la competencia,
en tanto y en cuanto no clasifica a los usuarios, sino que los categoriza. En consecuencia, por rigor
pedagógico, el sistema no se enfoca en premiar la competitividad sino el desarrollo de la competencia, el
afán de ser más competente.
Proceso de Validación
Como parte del proceso de validación del modelo de evaluación se analizaron, entre otros, las
actividades de más de 1000 profesionales médicos de la ciudad de Alicante, España.
8 Wechsler, D., 2003, “Wechsler Intelligence Scale for Children (4th ed.)”, San Antonia (TX): The Psychological Corporation.
Premio RIMA – Fundación Biblioteca Central de Medicina 14
El resultado de la aplicación del coeficiente de asimetría (y1) y de curtosis (y2) de Fisher9, que viene dado
por:
determinó que la forma resultante de distribución de puntos es levemente asimétrica hacia la izquierda y
platicúrtica (más aplanada que una normal).
Tutoría RIMA: Autómata Inteligente de Orientación e Incentivo
Complementariamente al método de evaluación, se incorpora al modelo un autómata que de manera
inteligente orienta a aquellos usuarios cuyo desempeño se ubica por debajo de la media más un desvío
estándar (o sea, su desempeño fue Estándar o Subestándar). El sistema realiza este tipo de tutoría
automáticamente, es personalizada para cada usuario y responde a características específicas del
conjunto de usuarios correspondientes a cada Campus RIMA. Esto significa que orienta al usuario de
acuerdo al resultado del análisis de los comportamientos del grupo de pares que presentan el mejor
desempeño.
El presente puede ser categorizado dentro de los llamados sistemas complejos debido a su carácter
multifactorial; en este caso analiza: el desempeño particular del usuario, el comportamiento de todos los
médicos de ese mismo Campus y las características particulares de cada métrica para, periódicamente,
sugerir al usuario que presentó un desempeño no destacado, cuales son los puntos clave en los que debe
trabajar para mejorar su posición dentro del grupo.
De simulaciones realizadas al momento de definir las métricas a utilizar surge que el aporte al
desempeño profesional del médico, que es reconocido por su utilización de RIMA en un Campus
promedio equivale, al menos, a 180 horas cátedra.
9 Wuensch, K., “Skewness, Kurtosis, and the Normal Curve”
Premio RIMA – Fundación Biblioteca Central de Medicina 15
Consideramos que al momento de calcular el equivalente, medido en horas cátedra, del aporte a la
práctica profesional que realiza RIMA comparado con los sistemas tradicionales de enseñanza (cursos,
seminarios, etc.) deben tomarse en cuenta diferentes elementos.
El primer elemento que aparece en escena es el más sencillo de medir: el tiempo de uso, o sea, el tiempo
total de conexión del usuario al sitio web. Este punto no merece mayor explicación, ya que está
directamente relacionado con el tiempo en que el alumno asiste a clases.
Como segundo elemento encontramos el tiempo dedicado a la lectura del material. Por ejemplo en el
caso de la lectura de un artículo científico, el médico deberá realizar un análisis minucioso de los
objetivos, la revisión de los participantes y de los métodos empleados, la interpretación de los
resultados alcanzados y consideración de las conclusiones del trabajo.
El tercer elemento está conformado por el análisis reflexivo que el médico realiza una vez finalizada la
lectura del artículo científico, este es el momento en el que debe utilizar su su capacidad crítica, y
considerar la validez de la información que ha leído.
En último lugar, debemos tener en cuenta cual es el impacto educativo que esta información que el
médico ha leído críticamente, evaluado y sobre la cual ha reflexionado, tiene sobre su práctica
profesional.
La siguiente fórmula expresa un modelo de equivalencia entre las actividades desarrolladas en RIMA y
las horas cátedra de los cursos tradicionales:
HCT = (tU + tL + tAR) * IE
Siendo:
- (HCT) Horas Cátedra Tradicionales
- (tU) Tiempo de Uso
- (tL) Tiempo de Lectura
- (tAR) Tiempo de Análisis Reflexivo
- (IE) Impacto Educativo
Premio RIMA – Fundación Biblioteca Central de Medicina 16
Especificación de las Métricas utilizadas
CODIGO APCOREIND
NOMBRE Apertura de índices de las revistas de Core Journals
OBJETIVO/MOTIVACION Contabiliza los índices a los que el usuario accede a través de las revistas de Core Journals. Es un indicador, entre otros, del interés del médico por acceder a la última información publicada. Es la primer acción que el lector debe realizar con la intención de apreciar si el mismo sugiere que el contenido será interesante o útil para su propia práctica
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada índice de las revistas de Core Journals que accede el usuario.
TIPO DE ENTIDAD RIMA/CORE JOURNALS
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de índices de las revistas de Core Journals visitados
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de índices visitados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de índices visitados)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Core Journals
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO CIMABST
NOMBRE Lectura de abstract de artículo publicado en Central de Inteligencia Médica
OBJETIVO/MOTIVACION Contabiliza los abstract leídos en las búsquedas publicadas de Central de Inteligencia Médica. A través del abstract el médico se informará de los objetivos y contenido trabajo científico.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada abstract que el usuario accede
TIPO DE ENTIDAD RIMA/CENTRAL DE INTELIGENCIA MEDICA
SUPERCARACTERISTICA CATEGORIA1
FORMULA N° de abstracts visitados
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de abstracts visitados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de abstracts accedidos)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Central de inteligencia médica
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 17
CODIGO CIMABSTCOL
NOMBRE Envío de Abstract a un colega
OBJETIVO/MOTIVACION Contabiliza los abstract que son enviados a un colega utilizando la herramienta disponible en el producto Central de Inteligencia Médica. El usuario habiendo valorado un artículo como importante decide interactuar con un colega para compartir esta información científica.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada abstract que el usuario le envía a un colega
TIPO DE ENTIDAD RIMA/CENTRAL DE INTELIGENCIA MEDICA
SUPERCARACTERISTICA CATEGORIA 3
FORMULA N° de abstracts enviados a un colega
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de abstracts enviados a un colega tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de abstracts enviados)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Central de inteligencia médica
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO CIMART
NOMBRE Apertura de pdf de artículo completo publicado en Central de Inteligencia Médica
OBJETIVO/MOTIVACION Contabiliza los Artículos completos a los que el usuario accede y que están disponibles en Central de Inteligencia Médica El usuario decide abrir y/o descargar un artículo de su interés que ha seleccionado.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada artículo completo que visualiza o descarga el usuario
TIPO DE ENTIDAD RIMA/CENTRAL DE INTELIGENCIA MÉDICA
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de artículos completos visualizados o descargados a través de Central de Inteligencia Médica
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de artículos completos visualizados o descargados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de artículos completos)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Central de Inteligencia Médica
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 18
CODIGO CIMBASE
NOMBRE Cantidad de bases de datos diferentes a las que accede el usuario dentro de una búsqueda publicada
OBJETIVO/MOTIVACION Contabiliza la cantidad de bases de datos accedidas dentro de una búsqueda publicada en cualquiera de las secciones de Central de Inteligencia Médica. El usuario dentro de una revisión temática específica accede a diferentes fuentes de información que aportan diferentes enfoques sobre un tema
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada base de datos a la que el usuario accede dentro de una búsqueda
TIPO DE ENTIDAD RIMA/CENTRAL DE INTELIGENCIA MEDICA
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de bases de datos visitadas dentro de una búsqueda
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de bases de datos visitadas tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de bases de datos consultadas)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Central de inteligencia médica
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO CIMBUSQ
NOMBRE Búsquedas publicadas en Central de Inteligencia Médica que son visitadas por el usuario
OBJETIVO/MOTIVACION Contabiliza la cantidad de búsquedas de todas las secciones de Central de Inteligencia Médica a las cuales el usuario ingresa. El usuario accede a una compilación de la mejor información científica disponible sobre un tema de su interés.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada búsqueda que el usuario accede
TIPO DE ENTIDAD RIMA/CENTRAL DE INTELIGENCIA MEDICA
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de búsquedas visitadas
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de búsquedas visitadas tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de búsquedas visitadas)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Central de inteligencia médica
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 19
CODIGO CIMOP
NOMBRE Cantidad opiniones emitidas por el usuario sobre una búsqueda publicada
OBJETIVO/MOTIVACION Contabiliza la cantidad opiniones que emite el usuario sobre una búsqueda publicada en cualquiera de las secciones de Central de Inteligencia Médica. Muestra la valoración y punto de vista que el usuario realiza de una información publicada.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada opinión que el usuario emite en Central de Inteligencia Médica
TIPO DE ENTIDAD RIMA/CENTRAL DE INTELIGENCIA MEDICA
SUPERCARACTERISTICA CATEGORIA 2
FORMULA N° de opiniones emitidas por el usuario dentro de Central de Inteligencia Médica
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de opiniones emitidas tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de opiniones)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Central de inteligencia médica
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO COREABST
NOMBRE Apertura de abstract de los artículos de Core Journals
OBJETIVO/MOTIVACION Contabiliza los abstracts a los que el usuario accede a través de los índices de las revistas de Core Journals. A través del abstract el médico se informará de los objetivos y contenido trabajo científico.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada abstract al que ingresa el usuario
TIPO DE ENTIDAD RIMA/CORE JOURNALS
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de abstracts de los artículos de las revistas de Core Journals visitados
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de abstracts visitados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de abstracts visitados)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Core Journals
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 20
CODIGO COREART
NOMBRE Apertura de pdf de artículo completo solicitado a través de Core Journals
OBJETIVO/MOTIVACION Contabiliza los Artículos completos a los que el usuario accede solicitados a través de Core Journals. El usuario decide abrir y/o descargar un artículo de su interés que ha seleccionado.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada artículo completo que visualiza o descarga el usuario
TIPO DE ENTIDAD RIMA/CORE JOURNALS
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de artículos completos visualizados o descargados a través de Core Journals
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de artículos completos visualizados o descargados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de artículos completos)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Core Journals
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO COREMIC
NOMBRE Creación de carpetas en Mi Core
OBJETIVO/MOTIVACION Contabilizar la cantidad de carpetas de Mí Core creadas por el usuario. El usuario crea un medio para clasificar la información brindada por RIMA y recibir actualizaciones periódicas sobre el tema.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada carpeta de Mi Core que el usuario crea
TIPO DE ENTIDAD RIMA/CORE JOURNALS
SUPERCARACTERISTICA CATEGORIA 2
FORMULA N° de carpetas de Mi Core generadas por el usuario
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de carpetas de Mi Core generadas por el usuario tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de carpetas de Mi Core)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Core Journals
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 21
CODIGO COREPUNT
NOMBRE Puntuación de artículo visitados por el usuario dentro de Core Journals
OBJETIVO/MOTIVACION Contabilizar la cantidad de veces que el usuario emite una evaluación subjetiva de un artículo publicado en Core Journals. Habiendo accedido al abstract de un artículo el usuario valora y clasifica al mismo, según el grado de importancia que él considera que tiene.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada vez que el usuario puntúa un artículo de Core Journals
TIPO DE ENTIDAD RIMA/CORE JOURNALS
SUPERCARACTERISTICA CATEGORIA 2
FORMULA Cantidad de veces que el usuario puntúa un artículo de Core Journals
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de veces que el usuario interactúa con el sistema para emitir una puntuación sobre un artículo tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de puntuaciones emitidas sobre artículo de Core Journals)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Core Journals
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO
Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO CORERANK
NOMBRE Acceso a la sección "Lo más leído" de Core Journals
OBJETIVO/MOTIVACION Contabilizar la cantidad de veces que el usuario ingresa a la sección LO MÁS LEIDO dentro de Core Journals. Este, entre otros, es un indicador muy sensible de cuanto, el médico, se interesa por la actualidad y los avances dentro de su disciplina.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada vez que el usuario ingresa a la sección LO MAS LEIDO dentro de Core Journals
TIPO DE ENTIDAD RIMA/CORE JOURNALS
SUPERCARACTERISTICA CATEGORIA 4
FORMULA Cantidad de veces que el usuario accede a la sección LO MAS LEIDO
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de veces que el usuario ingresa a la sección LO MAS LEIDO para visualizar cuales son los artículos más leídos por sus colegas tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de accesos a LO MAS LEIDO dentro de Core Journals)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Core Journals
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 22
CODIGO DICON
NOMBRE Cantidad de días diferentes que el usuario ingresa a RIMA
OBJETIVO/MOTIVACION Contabilizar la cantidad de días diferentes en los que el usuario hace uso de RIMA. Estimula la periodicidad y la constancia en la autogestión del conocimiento.
DESCRIPCION Se otorgarán "x" cantidad de puntos por día diferente que el usuario ingresa a RIMA
TIPO DE ENTIDAD RIMA
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° días diferentes que el usuario ingresa a RIMA
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará los días diferentes que el usuario se conecta al portal
INTERPRETACION DEL VALOR MEDIDO La cantidad de días diferentes que el usuario se conecta a la web tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA cantidad (de días diferentes de conexión)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES En esta categoría no podrás sumarse puntos más de una vez al día
CODIGO GUIDEART
NOMBRE Apertura de pdf de artículo completo publicado en Guías de práctica clínica
OBJETIVO/MOTIVACION Contabiliza los Artículos completos a los que el usuario accede y que están disponibles en Guías de práctica clínica. El usuario decide abrir y/o descargar un artículo de su interés que ha seleccionado.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada artículo completo que visualiza o descarga el usuario
TIPO DE ENTIDAD RIMA/GUIAS DE PRACTICA CLINICA
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de artículos completos visualizados o descargados a través de Guías de práctica clínica
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de artículos completos visualizados o descargados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de artículos completos)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Guías de práctica clínica
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 23
CODIGO GUIDECOM
NOMBRE Lectura de los comentarios publicados en las Guías de práctica clínica
OBJETIVO/MOTIVACION Contabiliza los comentarios que el usuario lee dentro de cada una de las Guías de práctica clínica. Este indicador marca la apreciación que hacen los médicos de la valoración que hace un colega, especialista en el tema, de un trabajo científico
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada comentario que el usuario visualiza
TIPO DE ENTIDAD RIMA/GUIAS DE PRACTICA CLINICA
SUPERCARACTERISTICA CATEGORIA 3
FORMULA N° de comentarios visualizados dentro de las Guías de práctica clínica
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de comentarios visualizados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de artículos completos)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Guías de práctica clínica
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO MEDAP
NOMBRE Apertura de sinopsis analíticas de medline pearls
OBJETIVO/MOTIVACION Contabiliza las sinopsis analíticas a las que el usuario accede a través de Medline Pearls. Marca la capacidad del médico de acceder información procesada bajo la sistemática de la medicina basada en evidencias.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada sinopsis de Medline Pearls a la que accede el usuario
TIPO DE ENTIDAD RIMA/MEDLINE PEARLS
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de sinopsis de las visitados
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la cantidad de sinopsis analíticas visitadas por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de sinopsis visitadas tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de sinopsis visitadas)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Medline Pearls
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 24
CODIGO MEDART
NOMBRE Apertura de pdf de artículo completo publicado en Medline Pearls
OBJETIVO/MOTIVACION Contabiliza los Artículos completos a los que el usuario accede y que están publicados en Medline Pearls. El usuario decide abrir y/o descargar un artículo de alto nivel de evidencia científica.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada artículo completo que visualiza o descarga el usuario
TIPO DE ENTIDAD RIMA/MEDLINE PEARLS
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de artículos completos visualizados o descargados a través de Medline Pearls
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de artículos completos visualizados o descargados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de artículos completos)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Medline Pearls
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO MEDEV
NOMBRE Consulta de los niveles de evidencia de un artículo publicado en Medline Pearls
OBJETIVO/MOTIVACION Contabiliza cuando el usuario consulta los niveles de evidencia dentro de Medline Pearls. El usuario se interesa por la calificación de la evidencia del artículo.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada vez que el usuario consulta los niveles de evidencia dentro de Medline Pearls
TIPO DE ENTIDAD RIMA/MEDLINE PEARLS
SUPERCARACTERISTICA CATEGORIA 2
FORMULA N° de consultas a los niveles de evidencia dentro de Medline Pearls
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la cantidad veces que el usuario consulta los niveles de evidencia
INTERPRETACION DEL VALOR MEDIDO La cantidad veces que el usuario consulta los niveles de evidencia tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (consulta de los niveles de evidencia)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Medline Pearls
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 25
CODIGO MEDFOR
NOMBRE Opiniones emitidas en el foro de Medline Pearls
OBJETIVO/MOTIVACION Contabiliza los comentarios que realiza el usuario en el foro de Medline Pearls. Este es un indicador que marca la interacción del usuario con sus colegas y la valoración que el mismo realiza sobre determinada información.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada comentario que el usuario realiza en el foro
TIPO DE ENTIDAD RIMA/MEDLINE PEARLS
SUPERCARACTERISTICA CATEGORIA 3
FORMULA N° de opiniones emitidas en el foro
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la cantidad de opiniones emitidas por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de opiniones emitidas tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de opiniones en el foro)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Medline Pearls
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO MIBART
NOMBRE Apertura de pdf de artículo completo guardado en Mi biblioteca
OBJETIVO/MOTIVACION Contabiliza los Artículos completos a los que el usuario accede y que están disponibles en Mi Biblioteca. El usuario decide abrir y/o descargar un artículo de su interés que ha seleccionado.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada artículo completo que visualiza o descarga el usuario
TIPO DE ENTIDAD RIMA/MI BIBLIOTECA
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de artículos completos visualizados o descargados a través de Mi Biblioteca
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de artículos completos visualizados o descargados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de artículos completos)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Mi biblioteca
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 26
CODIGO MIBCARP
NOMBRE Pasaje de artículo a una carpeta dentro de Mi biblioteca
OBJETIVO/MOTIVACION Contabiliza los artículos que el usuario clasifica y guarda en las diferentes carpetas que el crea en Mi Biblioteca. El usuario crea un medio para clasificar la información brindada por RIMA y almacenarla.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada artículo que el usuario clasifica en carpetas
TIPO DE ENTIDAD RIMA/MI BIBLIOTECA
SUPERCARACTERISTICA CATEGORIA 2
FORMULA N° de artículos completos clasificados en carpetas dentro de Mi Biblioteca
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de artículos clasificados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de artículos clasificados)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Mi biblioteca
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO MINPROD
NOMBRE Minuto por producto
OBJETIVO/MOTIVACION Contar el número de minutos que el usuario permanece en cada producto es un indicador de cuánto tiempo dedica a la autogestión del conocimiento.
DESCRIPCION Se otorgarán "x" cantidad de puntos por una cantidad "y " de tiempo.
TIPO DE ENTIDAD RIMA
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de minutos por producto
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario, sin considerar la actividad de refresh del banner. El sistema procederá a desloguear al usuario a los 15 minutos cuando no registra actividad
INTERPRETACION DEL VALOR MEDIDO La cantidad de minutos por producto tienen relación directa con los puntos obtenidos
UNIDAD DE MEDIDA minutos ( de actividad en cada producto)
TIPO DE ESCALA tiempo
ENTRADAS AL PROCESO Sitio web RIMA
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 27
CODIGO MIRACC
NOMBRE Acceso a la web de los eventos publicados en Miríada
OBJETIVO/MOTIVACION Contabilizar la cantidad veces que el usuario accede al a web de los eventos diferentes publicados en Miríada. Es un sensible marcador del interés del usuario por la actualidad en su materia.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada vez que el usuario ingresa a la web de un evento
TIPO DE ENTIDAD RIMA/MIRIADA
SUPERCARACTERISTICA CATEGORIA 4
FORMULA Número de web diferentes de los eventos publicados en Miríada a los que accede el usuario
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad accesos a los websites de eventos publicados en Miríada tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de accesos a los diferentes web sites de los eventos publicados)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Miríada
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO MIRAP
NOMBRE Apertura de eventos publicados en Miríada
OBJETIVO/MOTIVACION Contabilizar la cantidad de eventos a los que el usuario accede dentro de Miríada. Indica el interés del usuario por la educación médica continua y por mantenerse actualizado en su materia.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada vez que el usuario ingresa a un evento diferente
TIPO DE ENTIDAD RIMA/MIRIADA
SUPERCARACTERISTICA Calidad de uso del producto Miriada
FORMULA Número de eventos publicados en Miríada a los que accede el usuario
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de eventos visitados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de accesos a os diferentes eventos publicados)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Miríada
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 28
CODIGO MIRAPORTEV
NOMBRE Eventos aportados por el usuario que son publicados en Miríada
OBJETIVO/MOTIVACION Contabilizar los eventos que son sugeridos por el usuario y que tras ser valorados y aprobados por el equipo de Contenidos Médicos de RIMA son subidos a la web y publicados en la sección Miriada. Marca cual es el grado de atención que el usuario dispensa a las actividades de educación médica continua que se desarrollan a su alrededor o que el mismo coordina o participa.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada vez que el usuario ingrese un evento que sea publicado en Miriada
TIPO DE ENTIDAD RIMA/MIRIADA
SUPERCARACTERISTICA CATEGORIA 3
FORMULA Número de eventos sugeridos por el usuario que son publicados
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de eventos sugeridos por el usuario y que son publicados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de eventos sugeridos por el usuario publicados)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Miríada
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO REPABSTCOL
NOMBRE Envío de Abstract a un colega
OBJETIVO/MOTIVACION Contabiliza los abstract que son enviados a un colega utilizando la herramienta disponible en el producto Reporte para investigadores. El usuario habiendo valorado un artículo como importante decide interactuar con un colega para compartir esta información científica.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada abstract que el usuario le envía a un colega
TIPO DE ENTIDAD RIMA/REPORTE PARA INVESTIGADORES
SUPERCARACTERISTICA CATEGORIA 3
FORMULA N° de abstracts enviados a un colega
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de abstracts enviados a un colega tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de abstracts enviados)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Reporte para investigadores
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 29
CODIGO REPCARP
NOMBRE Clasificar abstracts en diferentes carpetas
OBJETIVO/MOTIVACION Contabiliza cada vez que el usuario clasifica un abstract en una carpeta personalizada en el producto Reporte para investigadores. El usuario crea un medio para clasificar la información brindada por RIMA y almacenarla.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada abstract que el usuario clasifica en carpetas
TIPO DE ENTIDAD RIMA/REPORTE PARA INVESTIGADORES
SUPERCARACTERISTICA CATEGORIA 2
FORMULA N° de abstracts clasificados en carpetas
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de abstract que el usuario clasifica en carpetas tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de estrategias consultadas)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Reporte para investigadores
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO REPCONSULT
NOMBRE Consulta de las diferentes estrategias solicitadas por el usuario
OBJETIVO/MOTIVACION Contabiliza las diferentes estrategias que el usuario consulta dentro del el producto Reporte para investigadores. Este indicador responde específicamente a objetivar el tiempo que utiliza en mantenerse actualizado en los temas que son de su interés.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada estrategia diferente que el usuario consulta
TIPO DE ENTIDAD RIMA/REPORTE PARA INVESTIGADORES
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de abstracts estratégicas consultadas
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de estrategias diferentes que el usuario consulta tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de estrategias consultadas)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Reporte para investigadores
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 30
CODIGO SEGABST
NOMBRE Apertura de resúmenes de artículos de SEGURIDAD DEL PACIENTE
OBJETIVO/MOTIVACION Contabiliza los resúmenes de artículos a los que el usuario accede a través de la página de Seguridad del Paciente. A través del resumen de artículo el médico se informará de los objetivos y contenido.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada resumen de artículo al que ingresa el usuario
TIPO DE ENTIDAD RIMA/SEGURIDAD DEL PACIENTE
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de resúmenes de artículos de Seguridad del Paciente visitados
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de resúmenes de artículos visitados tiene relación directa con los puntos obtenidos.
UNIDAD DE MEDIDA Cantidad (de resúmenes de artículos visitados)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Seguridad del Paciente
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
CODIGO SEGART
NOMBRE Apertura de pdf de artículo completo solicitado a través de Seguridad del Paciente
OBJETIVO/MOTIVACION Contabiliza los Artículos completos a los que el usuario accede solicitados a través de Seguridad del Paciente. El usuario decide abrir y/o descargar un artículo de su interés que ha seleccionado.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada artículo completo que visualiza o descarga el usuario.
TIPO DE ENTIDAD RIMA/SEGURIDAD DEL PACIENTE
SUPERCARACTERISTICA CATEGORIA 1
FORMULA N° de artículos completos visualizados o descargados a través de Seguridad del Paciente.
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de artículos completos visualizados o descargados tiene relación directa con los puntos obtenidos
UNIDAD DE MEDIDA Cantidad (de artículos completos)
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/ Seguridad del Paciente
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Premio RIMA – Fundación Biblioteca Central de Medicina 31
CODIGO MMOBLINK
NOMBRE Links publicados en MEDICAL MOBILE a los que accede el usuario
OBJETIVO/MOTIVACION Contabilizar los links publicados en MEDICAL MOBILE a los que accede el usuario. Valora el interés del usuario sobre la información que se publica en los diferentes sitios web.
DESCRIPCION Se otorgarán "x" cantidad de puntos por cada link publicado en MEDICAL MOBILE al que accede el usuario.
TIPO DE ENTIDAD RIMA/ MEDICAL MOBILE
SUPERCARACTERISTICA CATEGORIA 4
FORMULA Número de links publicados a los que accede el usuario.
PROCEDIMIENTO DE LA APLICACIÓN El sistema registrará la actividad realizada por el usuario.
INTERPRETACION DEL VALOR MEDIDO La cantidad de links visitados por el usuario tiene relación directa con los puntos obtenidos.
UNIDAD DE MEDIDA Cantidad (de links a los que accede el usuario).
TIPO DE ESCALA numérica
ENTRADAS AL PROCESO Sitio web RIMA/Medical Mobile
TIPO DE RECOLECCIÓN DE DATOS Y CALCULO Automático
HERRAMIENTA DE MEDICION Registro de evento generado por el usuario
BENEFICIARIO DE LA METRICA Usuario
OBSERVACIONES
Consideraciones Finales
El desafío que enfrentamos quienes tenemos la responsabilidad de apoyar el desarrollo profesional
continuo es muy grande. Inclusive antes de haber leído lo que se ha expuesto acerca del tema, es muy
difícil que quienes día a día trabajamos en mejorar la calidad profesional no estemos de acuerdo en la
importancia del tema y en las grandes limitaciones que poseen las herramientas de evaluación
tradicionales para adaptarse a las nuevas formas de adquisición de conocimientos.
En ese sentido, consideramos que el modelo de evaluación que desarrollamos es un aporte sumamente
valioso. Incorpora conceptos novedosos e innovadores que son inmediatamente aplicados en la práctica
en un sistema líder, sumamente complejo y de extraordinario valor como herramienta en la autogestión
del conocimiento como es RIMA.
Como se ha mencionado, y como es lógico en sistemas innovadores como éste, surgen continuamente
nuevas aplicaciones y sistemas complementarios que potencian y extienden los límites de lo que hemos
alcanzado. Esto no sólo aumenta continuamente el aporte que se realiza a la solución del problema de la
evaluación de las nuevas formas de adquisición del conocimiento, sino que permite mejorar
significativamente los sistemas que dan soporte a la autogestión del conocimiento.
Estamos convencidos de que hay mucho potencial detrás de este modelo y esperamos seguir
sorprendiéndonos con los resultados obtenidos.
Premio RIMA – Fundación Biblioteca Central de Medicina 32
Referencias
Tillman, H.; 2000, Evaluating Quality on the Net. Babson College, Massachusets. (white paper on-line
http://www.hopetillman.com/findqual.html)
Comisión de las Comunidades Europeas; 2000. Memorándum sobre el aprendizaje permanente (White
paper on-line http://www.oei.es/eduytrabajo2/Memoaprenpermanente.pdf)
Nielsen, J. Designing Web Usability : The Practice of Simplicity”, New Riders Publishing. 2000
Vazquez, M. Desarrollo de competencias en la sociedad del conocimiento, Revista Electrónica Teoría
de la Educación. 2007
ED’s Oasis, versión 2001 Evaluation Center, http://www.classroom.com/edoasis/evaluation.html
UMICH, Calidad Educativa http://dieumsnh.qfb.umich.mx/aprendizaje/calidad_educativa.htm
ISO/IEC 9126/1-3, 1998, Draft International Standard. Information technology – Software Product
Quality.
ISO/IEC 9126, 1991, International Standard. Information technology – Software product evaluation –
Quality characteristics and guidelines for their use.
Fenton, N.E., Pfleeger, S.L. Software Metrics: a Rigorous and Practical Approach, 2nd Ed., PWS
PublishingCompany. 1997
Firestone, J. Knowledge Management Metrics Development: a technical approach. System Sciences,
2002. HICSS. Proceedings of the 35th Annual Hawaii International Conference on.
Wechsler, D. Wechsler Intelligence Scale for Children. 4th edition, San Antonia (TX): The Psychological
Corporation. 2003
Campbell C, Parboosingh J, Gondozc T, Babitskaya G, Pham B. Study of the factors influencing the stimulus to learning recording by phycisians keeping a learning portfolio. J Cont Educ Health Prof 1999; 19:16 -24
