Evaluacion competencias y portfolio residentes farmacia andorra 2011

JORNADA SOBRE
DOCENCIA EN FARMACIA
HOSPITALARIA
ANDORRA 4 JUNIO 2011

MÉTODOS DE EVALUACIÓN DE RESIDENTES
JOSE ANTONIO PRADOS CASTILLEJO
MÉDICO DE FAMILIA. C.S. LUCANO. CÓRDOBA

domingo 5 de junio de 2011

CONTENIDO

GENERALIDADES EVALUACIÓN. ALGUNAS TÉCNICAS

PORTFOLIO. QUÉ ES? VENTAJAS/DESVENTAJAS

QUÉ INCLUYE?

QUÉ PIENSAN DEL PORTFOLIO?. ÚTIL PARA
RESIDENTES? POR QUÉ?

NO CAER ERRORES DE OTROS: COMPLEJIDAD

COMO SE HACE


COMPETENCIA PROFESIONAL

! GRADO EN QUE UN SUJETO PUEDE UTILIZAR SUS
CONOCIMIENTOS, APTITUDES, ACTITUDES Y BUEN JUICIO
ASOCIADOS A SU PROFESIÓN, PARA PODER DESEMPEÑARLA DE
MANERA EFICAZ EN TODAS LAS SITUACIONES QUE
CORRESPONDEN AL CAMPO DE SU PRÁCTICA. ! ! !

! ! ! ! ! ! (KANE, 1992)


COMPETENCIA PROFESIONAL

USO HABITUAL Y JUICIOSO DE LA COMUNICACIÓN, EL
CONOCIMIENTO, LAS HABILIDADES TÉCNICAS, LA TOMA DE
DECISIONES BASADAS EN LA EVIDENCIA, LAS EMOCIONES, LOS
VALORES Y LA REFLEXIÓN EN LA PRÁCTICA DIARIA PARA
BENEFICIO INDIVIDUAL Y DE LA SOCIEDAD.


¿NOS FORMAMOS PARA PASAR LAS
EVALUACIONES O NOS EVALUAMOS PARA
FORMARNOS?


CAMBIO CULTURAL:
ENSEÑANZA: FORMAR PARA EVALUAR
APRENDIZAJE: EVALUAR PARA FORMAR


PARA QUE EVALUARNOS...

SI QUEREMOS MEJORAR.......NECESIDAD DE
HERRAMIENTAS QUE HAGAN EXPLÍCITAS
NUESTRAS:
COMPETENCIAS CONSCIENTES
COMPETENCIAS INCONSCIENTES
INCOMPETENCIAS CONSCIENTES
INCOMPETENCIAS INCONSCIENTES


EVALUACIÓN: PIRÁMIDE DE MILLER

PRÁCTICA
LO REAL
HACE

MUESTRA SIMULACIÓN
CÓMO HACER

SABE CÓMO EXPLICA LA ACCIÓN
HACER

CONOCE
SABE QUÉ HACER TEORÍA


FORMACION: PIRÁMIDE DE KIRKPATRICK


CÓMO TIENEN QUE SER LAS
HERRAMIENTAS?
CON OBJETIVOS DE MEDICIÓN CLAROS (QUE MIDE?)

ORIENTADAS AL APRENDIZAJE. IMPACTO EDUCATIVO.
VINCULADAS A LA FORMACIÓN

VÁLIDAS, FIABLES, FACTIBLES, ACEPTABLES Y A BAJO
COSTE

ACEPTADO POR COMUNIDAD CIENTÍFICA. DISEÑADAS/
SUPERVISADAS POR LOS PROPIOS PROFESIONALES

BASADO EN LA MEDIDA DE LO POSIBLE EN EL CUARTO
ESCALÓN DE MILLER

SENCILLA Y BARATA


PARA TENER IMPACTO EDUCATIVO...

ESTAR CENTRADO EN EL QUE APRENDE

ESTAR BASADO EN LA AUTORREFLEXIÓN

ESTAR BASADA EN LA PROPIA RESPONSABILIDAD


UTILIDAD: INSTRUMENTO IDEAL

100%
PESO

0

U = (F X V X IE X A) / C
U = UTILIDAD !! F = FIABILIDAD ! V = VALIDEZ

IE = IMPACTO EDUCATIVO ! A = ACEPTABILIDAD! C = COSTE
MODIFICADO DE BRAILOVSKI


NO EXISTE EL
INSTRUMENTO PERFECTO!!!


UTILIDAD COMO INSTRUMENTO
INDIVIDUAL

100%

PESO

0

F V IE A C
! F = FIABILIDAD ! ! V = VALIDEZ ! IE = IMPACTO EDUCATIVO

! A = ACEPTABILIDAD!! C = COSTE


UTILIDAD PARA UN PROGRAMA DE
FORMACIÓN

100%

PESO

0

F V IE A C



UTILIDAD PARA LA SELECCIÓN

100%

PESO

0

F V IE A C



UTILIDAD PARA LA FORMACIÓN DE
RESIDENTES

100%
PESO

0

F V IE A C



Técnicas de Evaluación de
Competencias

▶ Preguntas elección múltiple...... ▶ Eficiente. Fiable. Muchos evaluados. Solo
conocimientos
▶ Examen oral............................ ▶ Integración conoc. y toma decisiones. Fiable
si estructurado. No factible
▶ Preguntas abiertas................... ▶ Similar a PEM. Mayor sensibilidad en toma
de decisiones y resolución problemas
▶ Complemento simulaciones clínicas. Fiable
▶ Imágenes clínicas.................... ▶ Evaluar anamnesis, exploración, habilidades
▶ Pacientes estandarizados.......... técnicas y comunicación. Complementado
permite simulaciones completas de la
práctica. Fiable
▶ Solo habilidades técnicas. Fiable
▶ Maniquíes...............................

Tomado de Martínez-Carretero y


Técnicas de Evaluación de
Competencias
▶ Simulaciones informáticas.......... ▶ Manejo clínico y eficiencia de la práctica
▶ Audits...................................... ▶ Visión parcial de la práctica. Baja fiabilidad y
validez
▶ Observaciones práctica real....... ▶ Alta validez. Baja fiabilidad. Problemas
factibilidad y muestreo de situaciones
▶ Alta fiabilidad. Permite evaluaciones globales
▶ Peer-review.............................. sin pormenorizar perfil competencial
▶ Similar a observación de la práctica

▶ Indicadores práct. Enc. satisf..... ▶ Circuito que permite combinación
▶ Circuito que permite combinación
▶ OSCE o ECOE…........................ ▶ Circuito que permite combinación
▶ Assesment……………………....
▶ Portfolio…………………………..



Otras técnicas de Evaluación de
competencias

▶ Script
▶ Audio-videograbaciones
▶ Bandeja de entrada
▶ Entrevista de Incidentes
críticos, focalizada
▶ Análisis Curricular
▶ Informes de autoreflexión
▶ Dinámicas de Grupo
▶ Autoauditorías, auditorías


Instrumentos para evaluación de componentes
competenciales

▶ Anamnesis........................ PE, OBS*
▶ Exploración física............ PE, OBS*
▶ Habilidades
comunicacionales............ PE, OBS*
▶ Relaciones
interprofesionales............ PE, OBS
▶ Ética................................ PE, PEM, EO, PA
▶ Aspectos legales............. PE, PEM, EO, PA
▶ Conocimientos
biomédicos....................... PEM, PA
▶ Interpretación datos
clínicos.............................
* Componentes primaria



Instrumentos para evaluación de componentes
competenciales

▶ Manejo diagnóstico......... PEM, EO, PA*
▶ Manejo terapéutico.......... PEM, EO, PA*
▶ Documentación
clínica.............................. PE
▶ Práctica comunitaria....... INF, PEM, EO, PA
▶ Práctica preventiva......... PE, PEM, EO, PA*
▶ Habilidades técnicas....... PE, MA*
▶ Investigación.................... PEM, EO, PA
▶ Docencia..........................
* Componentes primaria



CIRCUITOS DE EVALUACION

SON AQUELLOS INSTRUMENTOS DE EVALUACIÓN DE
COMPETENCIAS QUE PERMITEN COMBINAR DIFERENTES
TÉCNICAS DE EVALUACIÓN DE TAL MANERA QUE SE PUEDA
REALIZAR UNA VALORACIÓN MAS GLOBAL DE UN PROFESIONAL
DETERMINADO

LOS MAS CONOCIDOS:

ECOE, ASSESSMENT, PORTFOLIO


ECOE

= OSCE O EXAMEN MULTIESTACIÓN

ES UN CONJUNTO DE ESTACIONES POR LAS QUE EL PROFESIONAL
VA PASANDO PROGRESIVAMENTE SIENDO SOMETIDO A DIFERENTES
PRUEBAS (EJEMPLO: EST 1ª EXAMEN TIPO TEST, EST 2º
PROFESIONAL SIMULADO CON UNA CONSULTA, EST 3ª
FORMULACIÓN MAGISTRAL, EST 4ª INTERACCIÓN FARMACOLÓGICA,
EST 5ª REVISIÓN BIBLIOGRÁFICA, …

DEBE TENER MAS DE 10-15 EST PARA BUENA FIABILIDAD (NORMAL
25)

MUY UTILIZADO PARA HOMOLOGACIÓN, CERTIFICACIÓN, RE-
CERTIFICACIÓN Y SELECCIÓN (MIR EN CANADÁ)


ECOE

VENTAJAS: ACEPTABLE POR EL PROFESIONAL, FIABLE, VALIDEZ
DE CONSTRUCTO, MEDICIÓN GLOBAL, 3ER ESCALÓN MILLER
(BASADO PRINCIPALMENTE EN PACIENTES SIMULADOS),
PERMITE COMBINACIÓN DE MÚLTIPLES TÉCNICAS, PUEDE
REALIZARSE EN VARIOS SITIOS SIMULTÁNEAMENTE

DESVENTAJAS: COMPLEJO LOGÍSTICAMENTE Y DE DISEÑO, CARO?
BARATO? (350 € CON 10 ESTACIONES), NO MIDE PRÁCTICA REAL

TENDENCIA A SACAR LAS ESTACIONES DE SILLA (TEST,
PICTORIALES, PREGUNTAS ABIERTAS DE RESPUESTA CORTA…)
PARA ABARATAR PROCESO


ASSESSMENT

CIRCUITO DE EVALUACIÓN PROVENIENTE DEL MUNDO
EMPRESARIAL QUE VALORA COMPETENCIAS POTENCIALES
PRINCIPALMENTE (EL POTENCIAL DEL INDIVIDUO) Y GENÉRICAS
(LIDERAZGO, HABILIDADES RELACIONALES, CAPACIDAD DE
ANÁLISIS…)

COMBINA TÉCNICAS DE ENTREVISTA CON PSICÓLOGOS
(ENTREVISTAS ESTRUCTURADAS FOCALIZADAS),
OBSERVACIÓN DE DINÁMICA DE GRUPO, BANDEJA DE ENTRADA (O
BANDEJA IN TRAY), CUESTIONARIOS Y SIMULACIONES

UTILIZADO HABITUALMENTE EN SELECCIÓN DE PERSONAL

UTILIZACIÓN ESCASA EN PROFESIONES SANITARIOS (FALTAN
DATOS PSICOMÉTRICOS POR TANTO)


ASSESSMENT

VENTAJAS: UTILIZA TÉCNICAS PARA EVALUAR COMPETENCIAS
NO VALORADAS HABITUALMENTE EN OTROS CIRCUITOS, ES LA
MEJOR TÉCNICA EN SELECCIÓN PARA DEFINIR ENTRE VARIOS
PROFESIONALES QUE YA HAN DEMOSTRADO SUS
COMPETENCIAS

DESVENTAJAS: COMPLEJO LOGÍSTICAMENTE Y EL DISEÑO, CARO
(HASTA 500-600 € POR PROFESIONAL), POCOS DATOS O
NEGATIVOS SOBRE FIABILIDAD Y VALIDEZ PREDICTIVA, NO
EXPERIENCIA EN PROFESIONES SANITARIAS, POCA
ACEPTABILIDAD PROFESIONAL PROBABLE EN COLECTIVO
SANITARIO


PERO...

SOMOS ADULTOS...

NO SOMOS ADMINISTRACIÓN...

LO QUE NOS IMPORTA DE VERDAD ES QUE NUESTROS
RESIDENTES APRENDAN...

TENEMOS LOS RECURSOS QUE TENEMOS...

Y EN ESTA LÍNEA...


¿ES MEJOR QUE NOS DEN FEED-BACK
SOBRE LO QUE SOMOS CAPACES DE
HACER O SOBRE LO QUE HACEMOS?

¿ES MEJOR QUE DAR FEED-BACK SOBRE LO
QUE SON CAPACES DE HACER O SOBRE LO
QUE HACEN?


¿PODEMOS ENCONTRAR PRUEBAS EN
NUESTRA/SU PRÁCTICA CLÍNICA DIARIA DE
LO QUE HACEMOS BIEN Y DE LO QUE ES
MEJORABLE?


¿QUÉ ES UN PORTFOLIO?

ES UNA COLECCIÓN DE EVIDENCIAS
QUE DEMUESTRAN QUE EL
APRENDIZAJE PERSONAL
NECESARIO HA SIDO
COMPLETADO (RCGP, 1993)


¿QUÉ ES UN PORTFOLIO?

UN PORTFOLIO ES UNA HERRAMIENTA SIEMPRE
FORMATIVA (Y A VECES EVALUATIVA), EN LA QUE
UN PROFESIONAL RECOGE DE FORMA INTELIGENTE
DOCUMENTOS O REGISTROS, “PRODUCTO” DE SU
TRABAJO SOBRE LOS QUE INICIA, EL PROPIO
PROFESIONAL (O A VECES TAMBIÉN UN
OBSERVADOR EXTERNO), UN PROCESO REFLEXIVO
(AUTOEVALUACIÓN) QUE LE AYUDE A IDENTIFICAR
QUE COMPETENCIAS TIENE Y CUALES NECESITA
MEJORAR, GENERANDO POR SI MISMO APRENDIZAJE

(PORTFOLIO SEMFYC, 2007)


TIPOS PORTFOLIO

SEGÚN SU OBJETIVO
PORTFOLIO FORMATIVO (EVALUACIÓN
FORMATIVA).
PORTFOLIO EVALUATIVO (EVALUACIÓN
SUMATIVA).
SEGÚN SU ESTRUCTURA
PORTFOLIO LIBRE.
PORTFOLIO ESTRUCTURADO (O
ESTANDARIZADO).
PORTFOLIO SEMIESTRUCTURADO.


QUE NO ES UN PORTFOLIO

LO QUE PRIMA LA EVALUACIÓN FRENTE
A LA FORMACIÓN (AUSENCIA PROCESO
REFLEXIVO)
EL CURRÍCULO O EL LIBRO CLÁSICO DEL
RESIDENTE


VENTAJAS

ENFOCADO AL AUTOAPRENDIZAJE (GENERA
FUNDAMENTALMENTE AUTORREFLEXIÓN)

IMPORTANTE IMPACTO EDUCATIVO
ÚNICO CIRCUITO ORIENTADO AL 4º ESCALÓN DE MILLER
MAS BARATO SEGÚN Nº EVALUADOS Y ESTRUCTURA
ACEPTABILIDAD PROFESIONAL (AUTORRESPONSABILIDAD,
GESTIONA EL RITMO, ENFOQUE A SU REALIDAD, EN SITIO
DE TRABAJO CON GRAN DISPERSIÓN, NO SENSACIÓN DE
“EXAMEN”…)
CENTRADO EN EL QUE APRENDE


VENTAJAS

ESTIMULA LA FLEXIBILIDAD Y CREATIVIDAD
PERMITE COMBINACIÓN DE MUCHAS TÉCNICAS
CONCORDANCIA INTEROBSERVADOR >90 % CD DEFINE UN
UMBRAL DE CALIDAD
POTENCIA LA COLABORACIÓN ENTRE COLEGAS (TUTOR
DEL PORTFOLIO)
PUEDE EVALUARSE A MUCHOS PROFESIONALES
SIMULTÁNEAMENTE
NO ES “FOTO” SINO “VÍDEO”
TIEMPO DE EVALUACIÓN 1.5 HORAS EN P. EVALUATIVO


DESVENTAJAS PORTFOLIO

COMPLEJO DISEÑO
NO ES ÚTIL PARA VALORACIÓN DE
ASPECTOS CONCRETOS SINO PARA LA
GLOBALIDAD
DIFICULTAD PARA EVALUACIÓN DE
HABILIDADES POCA PREVALENCIA


DESVENTAJAS PORTFOLIO

MENOR FIABILIDAD (ALTA
CONCORDANCIA SIMPLE)
AUMENTA EL ESFUERZO DEL TUTOR O
PROFESORES
PROBLEMAS DE LOGÍSTICA EN
PORTFOLIO EVALUATIVO (MUCHO PAPEL,
MUCHA DOCUMENTACIÓN,
ORGANIZACIÓN…).


EJEMPLOS DE DOCUMENTOS APORTADOS

REGISTROS CLÍNICOS AUDIO Y VÍDEO
(HISTORIA, INFORMES DE GRABACIONES
DERIVACIÓN…)
DATOS CURRICULARES
TUTORÍAS Y PLANES
DOCENTES INCIDENTES CRÍTICOS
PLAN DE APRENDIZAJE DIARIO DE REFLEXIÓN
(EVIDENCIAS DE (EMOCIONES Y
APRENDIZAJE EN PROCESO SENTIMIENTOS
O FINALIZADO) GENERADOS POR EL
APRENDIZAJE)
AUDITORÍA,
AUTOAUDITORÍAS


EJEMPLOS DE DOCUMENTOS
APORTADOS

INDICADORES DE LA PUBLICACIONES
PRÁCTICA (PERFIL (ARTÍCULOS, LIBROS,…)
FARMACOLÓGICO,
RESULTADOS PROYECTOS DE
CLÍNICOS…) INVESTIGACIÓN
EVALUACIONES PROYECTOS
EXTERNAS (PACIENTES, COMUNITARIOS
COLEGAS…)
PREMIOS Y LOGROS
RESULTADOS PERSONALES O
EXÁMENES PROFESIONALES
CASOS CLÍNICOS CREATIVIDAD,
IMAGINACIÓN…


AUTORREFLEXIÓN “RETROSPECTIVA”
VS
“PROSPECTIVA”


REGISTRO CLÍNICO

HISTORIA, INFORMES DE INTERCONSULTA O DERIVACIÓN,
INFORMES CLÍNICOS, ESTUDIO DE CASOS…
FRECUENTE. ÚTIL PARA:
CONOCIMIENTOS BIOMÉDICOS O PSICOSOCIALES
OBTENCIÓN DE DATOS PERTINENTES (ANAMNESIS O
EXPLORACIÓN)
DIAGNÓSTICO DIFERENCIAL Y MANEJO DIAGNÓSTICO
MANEJO TERAPÉUTICO
DIFICULTADES
EN “RETROSPECTIVA” POR MALA CALIDAD DE LOS REGISTROS
SISTEMA INFORMÁTICO


INFORME DE AUTORREFLEXIÓN
EL PROFESIONAL REFLEXIONA SOBRE DETERMINADOS
ASPECTOS DE SU PRÁCTICA RELACIONADOS CON UNA
DETERMINADA COMPETENCIA O GRUPO DE COMPETENCIAS.

ESTANDARIZAR. ESFUERZO DE SÍNTESIS.

UN INFORME EN EL QUE EL PROPIO PROFESIONAL DEFINA SU
PLAN DE APRENDIZAJE PUEDE APORTAR EVIDENCIAS SOBRE LA
CAPACIDAD DE AUTOAPRENDIZAJE, SI ÉSTE ESTÁ AJUSTADO A
LAS NECESIDADES DE MEJORA…

COMBINARLO POSTERIORMENTE (NO EN EL MISMO PORTFOLIO
NECESARIAMENTE) CON OTRA TAREA CLÍNICA EN LA QUE SE
ENCUENTREN EVIDENCIAS DE QUE EL PLAN HA SIDO REALIZADO
Y SU RESULTADO.

TODO PORTFOLIO DEBERÍA ACABAR CON UN INFORME DE
REFLEXIÓN SOBRE EL PROPIO PORTFOLIO Y UN PLAN DE
APRENDIZAJE


AUDIO-VIDEOGRABACIONES

LA GRABACIÓN DE SITUACIONES REALES ES LA TÉCNICA MAS
ACEPTADA A NIVEL INTERNACIONAL PARA EVALUAR EN LA
PRÁCTICA DIARIA ELEMENTOS COMO LA COMUNICACIÓN MÉDICO-
PACIENTE, HABILIDADES MANUALES (CIRUGÍA!),
PROCEDIMIENTOS DIAGNÓSTICO-TERAPÉUTICOS,...
CUIDADO SONIDO Y CALIDAD GRABACIÓN
INCONVENIENTE: REQUIERE MATERIAL DE GRABACIÓN ESPECIAL
ES NECESARIO TAMBIÉN APORTAR PERMISO DEL PACIENTE
(PUEDE SER UNA BUENA OPCIÓN PEDIRLO EN LA MISMA
GRABACIÓN)
CUIDADO CON EL MATERIAL. CONFIDENCIALIDAD.
SUELE FORMAR PARTE DE LA MAYORÍA DE LOS PORTFOLIOS
CONSULTADOS A NIVEL INTERNACIONAL.


INCIDENTES CRÍTICOS

ES UNA DE LAS MEJORES TÉCNICAS DE EVALUACIÓN POR LO QUE
APORTA DE FLEXIBILIDAD, CREATIVIDAD Y AUTORREFLEXIÓN, Y
PROBABLEMENTE DEBA ESTAR INCLUIDA EN CUALQUIER
PORTFOLIO.
SE TRATA DE REFLEXIONAR SOBRE ALGÚN ELEMENTO QUE EN
LA PRÁCTICA DIARIA NOS HA APORTADO ALGÚN CONOCIMIENTO
(O SU FALTA).
PARTES:
SE DESCRIBE LA SITUACIÓN
SE REFLEXIONA SOBRE LAS DIFICULTADES O ERRORES Y SUS
REPERCUSIONES
ASPECTOS POSITIVOS O ÉXITOS
OBJETIVOS DE MEJORA
PLAN DE APRENDIZAJE PARA CONSEGUIRLOS.


INDICADORES DE LA PRÁCTICA

PERFIL FARMACOLÓGICO, RESULTADOS CLÍNICOS…

ESTOS INDICADORES APORTAN EVIDENCIAS DE RESULTADOS.
ANALIZAN GLOBALMENTE DETERMINADAS CAPACIDADES. NO
APORTA DATOS PROCESO.

SE SUELEN UTILIZAR LOS ESTABLECIDOS POR LA
ADMINISTRACIÓN PÚBLICA O SON FÁCILMENTE APORTADOS POR
LA APLICACIÓN INFORMÁTICA QUE SE UTILICE.

NO DISCRIMINA LA ACTUACIÓN DE OTROS PROFESIONALES.

CAUTO EN LAS EVIDENCIAS QUE SE PRETENDEN DEMOSTRAR.


EVALUACIONES EXTERNAS

PACIENTES, COLEGAS…

LOS INFORMES DE COMPAÑEROS, PACIENTES, JEFES… SON MUY
UTILIZADOS EN EL MUNDO ANGLOSAJÓN Y PROBABLEMENTE
DEBERÍAMOS EMPEZAR A CONFIAR MAS EN LA OPINIÓN DE LOS
DEMÁS COMO FUENTE DE FEED-BACK “BIENINTENCIONADO”

PUEDE SER ÚTIL, INCLUSO EL MEJOR MEDIO, PARA VALORAR
DETERMINADAS COMPETENCIAS (P.E. TRABAJO EN EQUIPO).

EN NUESTRO ENTORNO CULTURAL DEBERÍA UTILIZARSE EN
EVALUACIÓN FORMATIVA PARA FAVORECER SU ACEPTABILIDAD.


UTILIDAD

100%

PESO

0

U = (F X V X IE X A) / C
U = UTILIDAD F = FIABILIDAD V = VALIDEZ
IE = IMPACTO EDUCATIVO A = ACEPTABILIDAD

C = COSTE


PORTFOLIOS

PORTFOLIO INICIAL CAMFIC - 4 TAREAS 2002
PORTFOLIO DPI INTEGRAL DEL MF
PORTFOLIO DEL RESIDENTE CNE MF
PORTFOLIO SEMI
PORTFOLIO DPI DOCENTE
ACSA - JUNIO 2011: 15535 ACABADOS: 4241
HEFOR / HEFOT


HEFOR

COMPETENCIA 1: ACTITUD DE APRENDIZAJE Y MEJORA
CONTINUA
COMPETENCIA 2: CALIDAD DE PROMOVER Y ADAPTARSE AL
CAMBIO, FLEXIBILIDAD / ADAPTACIÓN.
COMPETENCIA 3: TRABAJO EN EQUIPO
COMPETENCIA 4: ORIENTACIÓN AL CIUDADANO. RESPETO
POR SUS DERECHOS
COMPETENCIA 5: CAPACIDAD PARA LA TOMA DE
DECISIONES CLÍNICAS, DIAGNÓSTICAS Y TERAPÉUTICAS.
COMPETENCIA 6: GESTIÓN DEL TIEMPO
COMPETENCIA 7: COMUNICACIÓN Y/O HABILIDADES
RELACIONALES (ENTREVISTA CLÍNICA)


PORTFOLIO DOCENTE DEL GCYS

16 COMPETENCIAS: 3 DE CONOCIMIENTO, 7 DE
HABILIDAD Y 6 DE ACTITUD

48 INDICADORES GLOBALES

9 TAREAS DOCENTES

12 INDICADORES OPERATIVOS DE MEDIA POR
TAREA


TAREAS PORTFOLIO DOCENTE GCYS

T01.- EVALUACIÓN DE LOS DISCENTES AL PROFESOR DE
ENTREVISTA CLÍNICA!

T02.- OBSERVACIÓN EXTERNA POR EXPERTOS!

T03.- PEER-REVIEW. REVISIÓN POR PARES!

T04.- INCIDENTES CRÍTICOS EN DOCENCIA DE COMUNICACIÓN
ASISTENCIAL!

T05.- VIDEOGRABACIÓN DE LA ACTIVIDAD DOCENTE!


TAREAS PORTFOLIO DOCENTE GCYS

T06.- PARTICIPACIÓN EN ACTIVIDADES DOCENTES Y DE
INVESTIGACIÓN, FOROS DE EXPERTOS… PUBLICACIONES!

T07.- VIDEOGRABACIÓN ENTREVISTAS CLÍNICAS CON PACIENTES
REALES!

T08.- DISEÑO DE UNA GUÍA DOCENTE!

T09.- INFORME DE AUTORREFLEXIÓN SOBRE TAREAS
ANTERIORES. PLAN DE APRENDIZAJE!


QUE PIENSAN DEL PORTFOLIO?


PORTFOLIO RESIDENTES CNE MF

QUE APORTA:
BASADO EN COMPETENCIAS Y EN EL PNE
EVALUACIÓN FORMATIVA
BUENA METODOLOGÍA
MUY BASADO EN RELACIÓN RESIDENTE-TUTOR
LIMITACIONES:
NÚMERO DE TAREAS EXCESIVAS. DOCUMENTO EXTENSO Y
COMPLEJO
4 AÑOS DE DESARROLLO
COMPLEJIDAD DE ALGUNA TAREA
IMPLANTACIÓN IRREGULAR SIN CULTURA
TUTORES NO PREPARADOS


CONCLUSIONES PORTFOLIO SEMFYC

PORTFOLIO INTEGRAL: 80 (2 EDIC) TERMINAN: 33 (41.25 %)

PORTFOLIO DOCENTE: 41 (2 EDIC) TERMINAN: 19 (46.34 %)
UN NÚMERO IMPORTANTE DE TAREAS

FEED-BACK.- ÁREAS DE MEJORA

IMPORTANCIA DE LA TUTORIZACIÓN

NIVEL DE IMPLICACIÓN

LES GUSTA Y APRENDEN. (70-88 % QUERÍAN ACABARLO)
NECESIDAD DE BENEFICIOS INSTITUCIONALES


QUE NOS DICEN

“ABRUMAN LAS TAREAS”

ESTIMULA Y CREA AUTORREFLEXIÓN CON
MÉTODO

SE OBJETIVA ESCRIBIENDO. SE HACE CONSCIENTE

ESTIMULA EL APRENDIZAJE

CREA RUTINAS DE BUENA PRAXIS

LO RECOMENDARÍAN A COMPAÑEROS


OPINIONES COMO...

TIEMPO***

CARGA ASISTENCIAL

CUESTA TRABAJO REFLEXIONAR (FALTA DE
CULTURA?)

COMPLEJIDAD

MALA APLICACIÓN. INTERACC INFORMÁTICA
DIFÍCIL

¿QUÉ GANO YO?


ACSA


IMPORTANTE!!!!
SENCILLEZ!!!!!
LAS TAREAS EVALUACIÓN FORMATIVA

CLARIFICAR BENEFICIOS


TRABAJAR CON LA REALIDAD
UNA BUENA OPCIÓN:
“NO PEDIRLES A LOS RESIDENTES LO QUE
NO HARIAMOS NOSOTROS”


QUE PODEMOS APORTAR AL RESIDENTE CON
EL PORTFOLIO?

SISTEMATIZACIÓN

AUTOMONITORIZACIÓN

IDENTIFICAR SU PERFIL COMPETENCIAL:

DISTINGUIR SUS HABILIDADES MÁS ÚTILES

IDENTIFICAR SUS ÁREAS DE MEJORA

MEJORARLO DURANTE EL PROPIO PROCESO

CAMBIO CULTURAL
ENSEÑAMOS A APRENDER


GRACIAS

HTTP://WWW.SLIDESHARE.NET/JAPRADOS
JAPRADOS@SEMFYC.ES


COMO SE HACE EL PORTFOLIO?


PASOS

DISEÑO BASES ESTRATÉGICAS
DISEÑO MAPA DE COMPETENCIAS
DEFINICIÓN INDICADORES E INDICADORES
OPERATIVOS
DISEÑO DE TAREAS: IMPORTANTE MENOR NUMERO
DE TAREAS
PLANIFICAR PUESTA EN MARCHA
EVALUACIÓN DEL PORTFOLIO


HEFOR

COMPETENCIA 1: ACTITUD DE APRENDIZAJE Y MEJORA CONTINUA
COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: JUICIO CRÍTICO,
INCORPORA EVIDENCIAS CIENTÍFICAS, MEJORA CONTINUA
TAREAS: 2. UNA OBLIGATORIA (PRESENTACIÓN SESIÓN) Y OTRA
OPTATIVA
INDICADORES OPERATIVOS/EVIDENCIA: 3
COMPETENCIA 2: CALIDAD DE PROMOVER Y ADAPTARSE AL CAMBIO,
FLEXIBILIDAD / ADAPTACIÓN.
COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: ACTITUD
POSITIVA ANTE CAMBIOS, BUSCA ALTERNATIVAS PARA UNA
TAREA, AJUSTA A RECURSOS, REFLEXIONA SOBRE ACTUACIÓN
TAREAS: 3. INFORME AUTORREFLEXIÓN, INCIDENTE CRÍTICO,
ESQUEMA SOLUCIÓN PROBLEMAS
INDICADORES OPERATIVOS/EVIDENCIAS: 4


HEFOR

COMPETENCIA 3: TRABAJO EN EQUIPO
COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICA: 6 (IDENTIFICA
SU TAREA EN EL EQUIPO, ACTITUD COLABORADORA, RESPETA Y
VALORAR TRABAJO DEL RESTO, PRIORIZA INTERESES DEL
EQUIPO, CONOCE FUNDAMENTOS TEÓRICOS TRABAJO EQUIPO,
CONOCE NEGOCIACIÓN
TAREAS: 2, UNA OBLIGATORIA (ANÁLISIS SITUACIÓN DEL EQUIPO)
Y OTRA OPTATIVA
INDICADORES OPERATIVOS/EVIDENCIA: 4
COMPETENCIA 4: ORIENTACIÓN AL CIUDADANO. RESPETO POR SUS
DERECHOS
COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: 3 (DA
INFORMACIÓN PARA TOMA DECISIONES, PROTEGE
CONFIDENCIALIDAD, MEJORA LA ACCESIBILIDAD)
TAREAS: 1 INFORME DE REFLEXIÓN
INDICADORES OPERATIVOS/EVIDENCIAS: 4ISIONES CLÍNICAS,
DIAGNÓSTICAS Y TERAPÉUTICAS.


HEFOR

COMPETENCIA 5: CAPACIDAD PARA LA TOMA DE DECISIONES
CLÍNICAS, DIAGNÓSTICAS Y TERAPÉUTICAS.
COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: 2
(RAZONAMIENTO CLÍNICO, PLAN DE ACTUACIÓN ANTE
PROBLEMAS DEL PACIENTE)
TAREAS: 2 (ANÁLISIS 3 PACIENTES, INCIDENTE CRÍTICO)
COMPETENCIA 6: GESTIÓN DEL TIEMPO
COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: 3
(AFRONTAMIENTO POSITIVO EMOCIONAL, PLANIFICA ADAPTADO A
REALIDAD, CREA SU MÉTODO)
TAREAS: 1 INFORME DE AUTORREFLEXIÓN


HEFOR

COMPETENCIA 7: COMUNICACIÓN Y/O HABILIDADES RELACIONALES
(ENTREVISTA CLÍNICA)
COMPETENCIAS ESPECÍFICAS/BUENAS PRÁCTICAS: 4 (OBTENER Y
DAR INFORMACIÓN, ACTITUDES COMUNICACIONALES BÁSICAS,
NEGOCIAR, CCP)
PRUEBAS/ TAREAS: 4 (AUDIO-VÍDEOGRABACION, EVALUACIÓN
EXTERNA, INFORME DE AUTORREFLEXIÓN, INCIDENTE CRÍTICO)
SI NO CONTACTO DIRECTO CON PACIENTE: COMUNICACIÓN
INTERPROFESIONAL


TUTORES QUE PIENSAN EN PORTFOLIO SEMFYC...

CONTESTAN 9/11

8 PORTFOLIO POSIBLE EN 9 MESES

DIFICULTADES PERCIBIDAS: AL INICIO MOVERSE EN
PLATAFORMA (4), FALTA COSTUMBRE NUEVAS
TECNOLOGÍAS (3), TIEMPO (1), FALTA DE CONSTANCIA
(1), NO CONOCER LA METODOLOGÍA (1)

NECESARIO: ALGÚN CONTACTO PRESENCIAL. 4, HACER
PREVIAMENTE EL PORTFOLIO 1, PLAZOS PARA ENVÍO DE
TAREAS 1, TIEMPO 3, HERRAMIENTAS DE CONEXIÓN
MÁS AGILES CON LINKS Y HERRAMIENTAS DE
CONEXIÓN 1



BASES ESTRATÉGICAS:

• QUE PRIORICE EL IMPACTO EDUCATIVO (EVALUACIÓN
FORMATIVA)

• PORTFOLIO SEMIESTRUCTURADO

• QUE PRESENTE UNAS TAREAS RAZONABLES PARA SU
DESARROLLO EN UN PERIODO DE TIEMPO NO SUPERIOR A NUEVE
MESES.

• DISEÑADA PARA AUTOEVALUACIÓN CON FEED-BACK
AUTOMÁTICO



MAS DE 60 PROFESORES DEL GCYS
3 AÑOS
PASOS: DEFINICIÓN DE BASES ESTRATÉGICAS,
DEFINICIÓN COMPETENCIAS BÁSICAS E
INDICADORES GLOBALES, DEFINICIÓN DE
TAREAS E INDICADORES OPERATIVOS



QUE APORTA:

BASADO EN COMPETENCIAS Y EN PERFIL COMPETENCIAL DE UN
DOCENTE

NUMERO DE TAREAS EXCELENTE (9). TIEMPO RAZONABLE

EVALUACIÓN FORMATIVA

BASADO EN FEED-BACK AUTOMÁTICO. APLICACIÓN
MULTIPORTFOLIO

LIMITACIONES:

MUY BASADO EN TUTOR EXPERTO



16 COMPETENCIAS: 3 DE CONOCIMIENTO, 7
DE HABILIDAD Y 6 DE ACTITUD
48 INDICADORES GLOBALES
9 TAREAS DOCENTES
12 INDICADORES OPERATIVOS DE MEDIA
POR TAREA


TAREAS PORTFOLIO DOCENTE

• T01.- EVALUACIÓN DE LOS DISCENTES AL PROFESOR DE
ENTREVISTA CLÍNICA

• T02.- OBSERVACIÓN EXTERNA POR EXPERTOS

• T03.- PEER-REVIEW. REVISIÓN POR PARES

• T04.- INCIDENTES CRÍTICOS EN DOCENCIA DE COMUNICACIÓN
ASISTENCIAL

• T05.- VIDEOGRABACIÓN DE LA ACTIVIDAD DOCENTE


TAREAS PORTFOLIO DOCENTE

• T06.- PARTICIPACIÓN EN ACTIVIDADES DOCENTES Y DE
INVESTIGACIÓN, FOROS DE EXPERTOS… PUBLICACIONES

• T07.- VIDEOGRABACIÓN ENTREVISTAS CLÍNICAS CON
PACIENTES REALES

• T08.- DISEÑO DE UNA GUÍA DOCENTE

• T09.- INFORME DE AUTORREFLEXIÓN SOBRE TAREAS
ANTERIORES. PLAN DE APRENDIZAJE


MEJORAS REALIZADAS

DOCUMENTOS DE AYUDA

ENLACES DE AYUDA

MAYOR PAPEL OPCIONAL DEL TUTOR

SISTEMA DE FEED-BACK. MI CARPETA

MENSAJES AUTOMATIZADOS

SIMPLIFICACIÓN DE TAREAS

ACTIVIDADES FORMATIVAS LIGADAS A COMPETENCIAS

CUADRO DE TUTORES. PERFIL


QUE ES GESTIÓN POR COMPETENCIAS
SELECCION

PROMOCION PERFIL FORMACION
COMPETENCIAL
PUESTO

PRODUCTIVIDAD EVALUACIO PLANES FORMACION

PERFIL
COMPETENCIAL
REMUNERACION TRABAJADOR DESARROLLO PROF

RECONOCIMIENTO


ECOE


Definiciones

▶ Paciente Simulado (signos reproducibles)
▶ Paciente Estandarizado (Ventajas y Desventajas
frente al Real)
▶ Pacientes reales estandarizados
▶ Paciente Monitor


Justificación Estadística

▶ Precisión del PS hasta de un 93.4 %
▶ No son identificables entre los pacientes
normales
▶ Reproducible
▶ No influencia del sexo, número de orden, ...
▶ Aceptabilidad


Justificación Estadística

▶ Correlación adecuada con observadores ext.
▶ Fiabilidad interobservador adecuada
▶ Consistencia interna (alfa > 0.80). Primeras
ECOEs Catalanas 0.83 y 0.65 *
▶ Coef. De correlación intraclase > 0.90
▶ Fiables en valoración de anamnesis, exploración,
técnicas comunicacionales y habilidades técnicas

*Ruiz y cols,


Pasos del proceso evaluador
▶ Fijando objetivos:
¿A quien? ¿Con que finalidad? ¿Nivel de exigencia? ¿Hay
un mapa competencial de referencia?
▶ Diseño Tabla Especificaciones
Determinar componentes
Peso de cada componente
Muestras situaciones clínicas
Elección de instrumentos idóneos
Diseño estructura evaluadora

Martinez-Carretero y Blay,


Pasos del proceso evaluador
▶ Desarrollo del proyecto
Diseño de los casos
Plan logístico
Plan psicométrico
Plan informático
Plan de provisión de resultados
Establecimiento del punto de corte
Plan de validación de la prueba

Martinez-Carretero y Blay,


Posibles Aplicaciones

▶ Certificación-recertificación
▶ Homologación del Título
▶ Título de Excelencia en el MIR
▶ Acreditación docente
▶ Carrera Profesional
▶ Selección de personal


Comité de prueba

▶ Núcleodel diseño de un proyecto.
▶ Formado por 8 a 12 profesionales
6-9 Sociedad-Institución evaluadora
2-3 Técnicos en evaluación de
competencias

Martínez-Carretero y Blay,
2000


Características de Selección
▶ Miembros de la Sociedad-Institución evaluadora
Vinculadas directamente al ámbito que se evalúa y
preferentemente que ejerzan en el mismo (asistencial)
Representativos de las diferentes realidades evaluadas
Reconocido prestigio y experiencia
Sin implicación moral o ética con los evaluados
Tiempo y dedicación al proyecto
Confidencialidad

2000


Características de Selección

▶ Miembros de la institución asesora
Experiencia en evaluación con o sin implicación en el ámbito
profesional evaluado
Capacidad de planificación
Capacidad de liderazgo y de relación con la Sociedad-
Institución evaluadora
Roles: Coordinador del proyecto y asistente

Modificado de
2000


Normas de funcionamiento

▶ Diferentes estructuras de funcionamiento
consensuadas al inicio
▶ Igualdad entre los miembros. Decisiones por
consenso
▶ Planificación de reuniones según objetivos,
desarrollo y tiempo
▶ Equilibrio entre reuniones y trabajo individual
(correo electrónico)

2000


Normas de funcionamiento

▶ Roles: Coordinador, Secretario (actas...),
representante exterior
▶ Importante asistencia e implicación
▶ Si proyecto repetido: renovación parcial y
progresiva

2000


Tareas del Comité de Prueba

▶ Asumir la responsabilidad de la prueba
▶ Definir bases estratégicas del proyecto
▶ Construir tabla de especificaciones
▶ Desarrollo de casos y estaciones
▶ Coordinación logística
▶ Difusión y representatividad de la prueba

2000


Bases estratégicas
▶ Buscar que sea justa y útil, válida, fiable,
factible, aceptable y con impacto educativo
▶ ¿A quien?
▶ ¿Con que finalidad?
▶ ¿Nivel de exigencia?
▶ ¿Hay un mapa competencial de referencia?
SIEMPRE VOLVER A ESTAS BASES

2000


Tabla de especificaciones

▶ Tabla tridimensional que resume
intencionalidad evaluativa del comité de
prueba en relación a que evaluar y como
evaluarlo.
▶ 3 componentes: situaciones clínicas, mapa
de contextos y componentes
competenciales


Pacientes Simulados


Generalidades
▶ Historia
▶ Definición
▶ Utilidad (Formación y evaluación):
Comunicación
Exploración
Toma de decisiones
Habilidades técnicas concretas no
cruentas
Ética


Pacientes simulados vs reales
PACIENTE ESTANDARIZADO PACIENTE REAL
Puede ser útil en cualquier Es necesario su abordaje en centros
momento o lugar hospitalarios o de A.P. y en el
momento de la consulta o ingreso

Puede presentar el mismo problema Un número limitado de
para todos los estudiantes o profesionales o estudiantes pueden
profesionales valorarlo
Evitas errores diagnósticos o La corrección debe hacerse a
terapéuticos cuando se utilizan con tiempo real para evitar iatrogenia o
fines docentes mala orientación
Representa una aclimatación para el Puede ser muy brusco un contacto
estudiante antes de pasar al directo con el mismo
paciente real


Permite al estudiante trabajar con Este tipo de situaciones en
situaciones de emergencia, pacientes reales tienen un difícil
problemáticas o de alto riesgo abordaje formativo

Permite simular pacientes de muy Es difícil encontrarlos en la realidad
baja prevalencia real

Pueden ser manipulados o alterados Sus condiciones no son alterables
con motivos docentes

Pueden presentar la misma historia Sus variaciones dependen del curso
pese al paso del tiempo evolutivo espontáneo o tras
tratamiento de su proceso


Puedes presentar complicaciones o Su presencia dependerá del azar
efectos secundarios en cualquier
momento

Puedes presentar pacientes en Los distintos estadios evolutivos no
diferentes estadios evolutivos siempre están disponibles

Permite repetir interacciones para No lo permite
mejorar pautas o conductas


Tipos de Pacientes Simulados

▶ Paciente simulado
▶ Paciente real
▶ Paciente estandarizado
▶ Paciente con observador imprescindible
o recomendable
▶ Paciente Monitor


Desventajas PS
▶ Diseño laborioso (niveles de complejidad diferentes)
▶ Metodología de selección y entrenamiento rigurosa (punto
fuerte también) 4-5 sesiones de 1.5-2 horas. Rentabilidad alta
▶ Coste alto (mas barato a mas profesionales)
▶ Imposibilidad de realizar algunas exploraciones cruentas
(aunque algunos actores "mejor pagados" son entrenados
puntualmente para exploraciones rectales o ginecológicas) o
técnicas de cirugía
▶ Reticencias a lo nuevo o diferente


Hallazgos clínicos reproducibles
▶ Abdomen agudo (en tabla) ▶ Enrojecimiento articular
▶ Afasia ▶ EPOC
▶ Asterixis ▶ Espasmos musculares
▶ Blumberg
▶ Espasticidad
▶ Estenosis arteria renal
▶ Calor articular ▶ Fotosensibilidad
▶ Coma ▶ Hematemesis
▶ Confusión ▶ Hemiparesia
▶ Corea ▶ Hiperreflexia
▶ Coxartrosis ▶ Hipertensión/hipotensión
▶ Debilidad muscular ▶ Hipoacusia
▶ Disartria
▶ Hipomanía
▶ Incoordinación
▶ Disminución o abolición del murmullo
vesicular ▶ Limitaciones articulares
▶ Distensión abdominal


Hallazgos clínicos reproducibles
▶ Mareos, vértigo ▶ Rigidez de nuca
▶ Midriasis ▶ Shock anafiláctico
▶ Neumotórax ▶ Sibilancias
▶ Obstrucción vía aérea
▶ Signo "ojos de muñeca“
▶ Signo de Babinski
▶ Parálisis facial ▶ Signo de Beevor
▶ Parkinsonismos ▶ Signo de Brudzinski
▶ Pérdida sensibilidad ▶ Signo de Kernig
▶ Perdida visual central o periférica ▶ Signos de descerebración
▶ Perspiración ▶ Taquicardia
▶ Ptosis palpebral ▶ Tremor
▶ Respirac. Cheyne-Stokes
▶ Ataxia
▶ Vómitos
▶ Respiración de Kussmaul
▶ Rigidez


Metodología

▶ Casting
▶ Selección(Programa)
▶ Diseño de casos
▶ Entrenamiento
▶ Camuflaje


Evaluacion competencias y portfolio residentes farmacia andorra 2011

Empfohlen

Empfohlen

Weitere ähnliche Inhalte

Ähnlich wie Evaluacion competencias y portfolio residentes farmacia andorra 2011

Ähnlich wie Evaluacion competencias y portfolio residentes farmacia andorra 2011 (6)

Mehr von Jose Antonio Prados

Mehr von Jose Antonio Prados (20)

Kürzlich hochgeladen

Kürzlich hochgeladen (20)

Evaluacion competencias y portfolio residentes farmacia andorra 2011