Anàlisi de la concordança entre avaluadors en unes estacions simulades d'ACOE's de comunicació metge-pacient

Abstract

Introducció: La concordança entre avaluadors, en una avaluació de competències objectiva i estructurada (ACOE), és fonamental per establir la validesa i fiabilitat de la mateixa. El fet que en aquest estudi hi participin varis avaluadors, tots ells amb rols ben definits i diferenciats, pot influir en la variació de les valoracions En aquest estudi volem valorar si l’avaluació d’una simulació per avaluadors de diferents perfils i rols pertinents en els casos simulats representats, pot mostrar discordances. Metodologia: Disseny d’estudi quasi experimental amb mesures pre i post, amb grup control, prospectiu i aleatoritzat, realitzat amb residents de primer any de l’Hospital Altahia de Manresa. Per les ACOE’s es van dissenyar tres escenaris clínics amb dues rondes simultànies diferenciant tres patologies diferents. El rendiment dels participants es va fer mitjançant rubrica dissenyada per tal finalitat, utilitzant una escala tipus Likert de 1 a 10; que complimentaven: un pacient real de la malaltia de l’estació, un metge o infermer expert, un expert en formació en comunicació i el pacient simulat. D’aquesta manera per cada estació ACOE un participant era avaluat amb el mateix instrument per 4 avaluadors. Els avaluadors van rebre informació detallada de la rúbrica i forma d’avaluació. Resultats: Dels 30 residents convocats, 25 van realitzar la formació (83%). La mitja d’edat va ser 30.4 anys amb un rang entre 26 a 41 anys. En relació a la valoració de la concordança entre avaluadors i l’escenari, els que han mostrat més concordança entre avaluadors son el referents a les estacions de Diabetis Mellitus i Insuficiència cardíaca amb hipotensió arterial. El coeficient de correlació intraclasse (ICC) en les estacions de tabaquisme i patologia vascular ha estat molt inferior a 0.70 que indica un acord mínimament acceptable, coincidint amb les valoracions diferenciades per grup ICC molt inferior a 0.5 Conclusions: la variabilitat de les valoracions poden esser esdevingudes, per la manca d’una instrucció prèvia dels avaluadors i una rúbrica que podria donar peu a la subjectivitat de l’avaluador.