L'avaluació del currículum i del professorat és fonamental per a totes les institucions d'educació superior, incloses les escoles de medicina.Les avaluacions de l'ensenyament dels estudiants (SET) solen prendre la forma de qüestionaris anònims i, tot i que originàriament es van desenvolupar per avaluar cursos i programes, amb el temps també s'han utilitzat per mesurar l'eficàcia de l'ensenyament i, posteriorment, prendre decisions importants relacionades amb l'ensenyament.Desenvolupament professional del professorat.Tanmateix, certs factors i biaixos poden afectar les puntuacions SET i l'eficàcia de l'ensenyament no es pot mesurar objectivament.Tot i que la literatura sobre l'avaluació de cursos i professors a l'educació superior general està ben establerta, hi ha preocupacions sobre l'ús de les mateixes eines per avaluar cursos i professors en programes mèdics.En particular, el SET a l'educació superior general no es pot aplicar directament al disseny i implementació del currículum a les escoles de medicina.Aquesta revisió ofereix una visió general de com es pot millorar el SET a nivell d'instrument, gestió i interpretació.A més, aquest article assenyala que mitjançant l'ús de diversos mètodes com ara la revisió per iguals, els grups focals i l'autoavaluació per recollir i triangular dades de diverses fonts, inclosos estudiants, companys, gestors de programes i autoconeixement, un sistema d'avaluació complet pot ser construït.Mesurar eficaçment l'eficàcia de l'ensenyament, donar suport al desenvolupament professional dels educadors mèdics i millorar la qualitat de l'ensenyament en l'educació mèdica.
L'avaluació de cursos i programes és un procés intern de control de qualitat a totes les institucions d'educació superior, incloses les facultats de medicina.L'avaluació de l'ensenyament de l'alumnat (SET) sol prendre la forma d'un qüestionari en paper o en línia anònim que utilitza una escala de valoració com una escala Likert (generalment cinc, set o superior) que permet a les persones indicar el seu acord o grau d'acord.No estic d'acord amb afirmacions específiques) [1,2,3].Tot i que els SET es van desenvolupar originalment per avaluar cursos i programes, amb el temps també s'han utilitzat per mesurar l'eficàcia de l'ensenyament [4, 5, 6].L'eficàcia de l'ensenyament es considera important perquè s'assumeix que hi ha una relació positiva entre l'eficàcia de l'ensenyament i l'aprenentatge dels estudiants [7].Tot i que la literatura no defineix clarament l'eficàcia de la formació, normalment s'especifica mitjançant característiques específiques de la formació, com ara "interacció grupal", "preparació i organització", "feedback als estudiants" [8].
La informació obtinguda de SET pot proporcionar informació útil, com ara si cal ajustar els materials didàctics o els mètodes docents utilitzats en un curs determinat.SET també s'utilitza per prendre decisions importants relacionades amb el desenvolupament professional del professor [4,5,6].Tanmateix, l'adequació d'aquest enfocament és qüestionable quan les institucions d'educació superior prenen decisions sobre el professorat, com ara la promoció a rangs acadèmics superiors (sovint associada amb augments d'antiguitat i salari) i llocs administratius clau dins de la institució [4, 9].A més, les institucions sovint requereixen que el professorat nou inclogui SET d'institucions anteriors a les seves sol·licituds de noves posicions, la qual cosa influeix no només en les promocions del professorat dins de la institució, sinó també en possibles nous ocupadors [10].
Tot i que la literatura sobre currículum i avaluació del professorat està ben establerta en l'àmbit de l'educació superior general, aquest no és el cas en l'àmbit de la medicina i l'assistència sanitària [11].El currículum i les necessitats dels educadors mèdics difereixen de les de l'educació superior general.Per exemple, l'aprenentatge en equip s'utilitza sovint en els cursos integrats d'educació mèdica.Això vol dir que el pla d'estudis de la facultat de medicina consta d'una sèrie de cursos impartits per un nombre de professors que tenen formació i experiència en diverses disciplines mèdiques.Tot i que els estudiants es beneficien del coneixement profund d'experts en la matèria sota aquesta estructura, sovint s'enfronten al repte d'adaptar-se als diferents estils d'ensenyament de cada professor [1, 12, 13, 14].
Tot i que hi ha diferències entre l'educació superior general i l'educació mèdica, el SET utilitzat en el primer també s'utilitza de vegades en els cursos de medicina i assistència sanitària.Tanmateix, la implementació de SET a l'educació superior general planteja molts reptes pel que fa al currículum i l'avaluació del professorat en els programes de professionals sanitaris [11].En particular, a causa de les diferències en els mètodes d'ensenyament i les qualificacions dels professors, els resultats de l'avaluació dels cursos poden no incloure les opinions dels estudiants de tots els professors o classes.La investigació d'Uytenhaage i O'Neill (2015) [5] suggereix que demanar als estudiants que puntuin tots els professors individualment al final d'un curs pot ser inadequat perquè és gairebé impossible que els estudiants recordin i comentin les valoracions de múltiples professors.categories.A més, molts professors d'educació mèdica també són metges per als quals l'ensenyament és només una petita part de les seves responsabilitats [15, 16].Com que es dediquen principalment a l'atenció al pacient i, en molts casos, a la recerca, sovint tenen poc temps per desenvolupar les seves habilitats docents.Tanmateix, els metges com a professors haurien de rebre temps, suport i comentaris constructius de les seves organitzacions [16].
Els estudiants de medicina solen ser persones molt motivades i treballadores que aconsegueixen l'admissió a la facultat de medicina (a través d'un procés competitiu i exigent a nivell internacional).A més, durant l'escola de medicina, s'espera que els estudiants de medicina adquireixin una gran quantitat de coneixements i desenvolupin un gran nombre d'habilitats en un curt període de temps, així com tinguin èxit en avaluacions nacionals internes i completes complexes [17,18,19] ,20].Així, a causa dels alts estàndards que s'esperen dels estudiants de medicina, els estudiants de medicina poden ser més crítics i tenir expectatives més altes per a un ensenyament d'alta qualitat que els estudiants d'altres disciplines.Així, els estudiants de medicina poden tenir valoracions més baixes dels seus professors en comparació amb els estudiants d'altres disciplines pels motius esmentats anteriorment.Curiosament, estudis anteriors han demostrat una relació positiva entre la motivació dels estudiants i les avaluacions individuals dels professors [21].A més, durant els últims 20 anys, la majoria dels plans d'estudis de les escoles de medicina d'arreu del món s'han integrat verticalment [22], de manera que els estudiants estan exposats a la pràctica clínica des dels primers anys del seu programa.Així, durant els darrers anys, els metges s'han implicat cada cop més en l'educació dels estudiants de medicina, avalant, fins i tot al principi dels seus programes, la importància de desenvolupar SET adaptats a poblacions específiques de professors [22].
A causa de la naturalesa específica de l'educació mèdica esmentada anteriorment, els SET utilitzats per avaluar els cursos d'educació superior general impartits per un sol professor s'han d'adaptar per avaluar el currículum integrat i la facultat clínica dels programes mèdics [14].Per tant, cal desenvolupar models SET més efectius i sistemes d'avaluació integrals per a una aplicació més eficaç en l'educació mèdica.
La revisió actual descriu els avenços recents en l'ús de SET a l'educació superior (general) i les seves limitacions, i després exposa les diferents necessitats de SET per als cursos d'educació mèdica i el professorat.Aquesta revisió proporciona una actualització de com es pot millorar l'SET a nivell instrumental, administratiu i interpretatiu, i se centra en els objectius de desenvolupar models d'SET efectius i sistemes d'avaluació integral que mesuraran eficaçment l'eficàcia de l'ensenyament, donaran suport al desenvolupament d'educadors professionals de la salut i milloraran. la qualitat de l'ensenyament en l'educació mèdica.
Aquest estudi segueix l'estudi de Green et al.(2006) [23] per consells i Baumeister (2013) [24] per consells per escriure ressenyes narratives.Vam decidir escriure una ressenya narrativa sobre aquest tema perquè aquest tipus de ressenya ajuda a presentar una perspectiva àmplia sobre el tema.A més, com que les revisions narratives es basen en estudis metodològicament diversos, ajuden a respondre preguntes més àmplies.A més, els comentaris narratius poden ajudar a estimular el pensament i la discussió sobre un tema.
Com s'utilitza el SET a l'educació mèdica i quins són els reptes en comparació amb el SET utilitzat a l'educació superior general?
Les bases de dades de Pubmed i ERIC es van cercar utilitzant una combinació dels termes de cerca "avaluació de l'ensenyament dels estudiants", "eficàcia de l'ensenyament", "educació mèdica", "educació superior", "avaluació del currículum i del professorat" i per a Peer Review 2000, operadors lògics. .articles publicats entre 2021 i 2021. Criteris d'inclusió: els estudis inclosos eren estudis originals o articles de revisió, i els estudis eren rellevants per a les àrees de les tres preguntes principals de recerca.Criteris d'exclusió: es van excloure del document de revisió actual els estudis que no eren llengua anglesa o els estudis en què no es podien trobar articles de text complet o no eren rellevants per a les tres preguntes principals de recerca.Després de seleccionar les publicacions, es van organitzar en els següents temes i subtemes associats: (a) L'ús de SET a l'educació superior general i les seves limitacions, (b) L'ús de SET a l'educació mèdica i la seva rellevància per abordar qüestions relacionades amb la comparació de SET (c ) Millorar SET a nivell instrumental, gerencial i interpretatiu per desenvolupar models SET efectius.
La figura 1 proporciona un diagrama de flux dels articles seleccionats inclosos i comentats a la part actual de la revisió.
SET s'ha utilitzat tradicionalment a l'educació superior i el tema ha estat ben estudiat a la literatura [10, 21].Tanmateix, un gran nombre d'estudis han examinat les seves múltiples limitacions i esforços per abordar aquestes limitacions.
La investigació mostra que hi ha moltes variables que influeixen en les puntuacions SET [10, 21, 25, 26].Per tant, és important que els administradors i els professors entenguin aquestes variables a l'hora d'interpretar i utilitzar dades.La següent secció ofereix una breu visió general d'aquestes variables.La figura 2 mostra alguns dels factors que influeixen en les puntuacions SET, que es detallen a les seccions següents.
En els darrers anys, l'ús de kits en línia ha augmentat en comparació amb els kits de paper.Tanmateix, l'evidència a la literatura suggereix que el SET en línia es pot completar sense que els estudiants dediquin l'atenció necessària al procés de finalització.En un interessant estudi d'Uitdehaage i O'Neill [5], es van afegir professors inexistents al SET i molts estudiants van proporcionar comentaris [5].A més, l'evidència a la literatura suggereix que els estudiants sovint creuen que la finalització del SET no condueix a un millor assoliment educatiu, que, quan es combina amb l'agenda ocupada dels estudiants de medicina, pot donar lloc a taxes de resposta més baixes [27].Tot i que les investigacions mostren que les opinions dels estudiants que fan la prova no són diferents de les de tot el grup, les baixes taxes de resposta encara poden portar els professors a prendre els resultats menys seriosament [28].
La majoria de SETs en línia es completen de manera anònima.La idea és permetre als alumnes expressar les seves opinions lliurement sense suposar que la seva expressió tindrà cap impacte en les seves futures relacions amb els professors.En l'estudi d'Alfonso et al. [29], els investigadors van utilitzar classificacions i qualificacions anònimes en les quals els qualificadors havien de donar els seus noms (valoracions públiques) per avaluar l'efectivitat docent del professorat de les facultats de medicina per part dels residents i estudiants de medicina.Els resultats van mostrar que els professors generalment obtenien una puntuació més baixa a les avaluacions anònimes.Els autors argumenten que els estudiants són més honestos en les avaluacions anònimes a causa de certes barreres en les avaluacions obertes, com ara les relacions laborals danyades amb els professors participants [29].Tanmateix, també cal tenir en compte que l'anonimat sovint associat amb SET en línia pot portar alguns estudiants a ser irrespectuosos i represaliats amb l'instructor si les puntuacions de l'avaluació no compleixen les expectatives dels estudiants [30].Tanmateix, la investigació mostra que els estudiants rarament proporcionen comentaris irrespectuosos, i aquest últim es pot limitar encara més ensenyant als estudiants a proporcionar retroalimentació constructiva [30].
Diversos estudis han demostrat que hi ha una correlació entre les puntuacions SET dels estudiants, les seves expectatives de rendiment de la prova i la satisfacció de la prova [10, 21].Per exemple, Strobe (2020) [9] va informar que els estudiants recompensen els cursos fàcils i els professors recompensen les notes febles, la qual cosa pot fomentar un ensenyament deficient i provocar una inflació de notes [9].En un estudi recent, Looi et al.(2020) [31] Els investigadors han informat que els SET més favorables estan relacionats i són més fàcils d'avaluar.A més, hi ha evidències inquietants que el SET està inversament relacionat amb el rendiment dels estudiants en cursos posteriors: com més alta és la qualificació, pitjor rendiment dels estudiants en cursos posteriors.Cornell et al.(2016)[32] van realitzar un estudi per examinar si els estudiants universitaris van aprendre relativament més dels professors el SET dels quals van valorar altament.Els resultats mostren que quan s'avalua l'aprenentatge al final d'un curs, els professors amb les puntuacions més altes també contribueixen a l'aprenentatge de la majoria d'alumnes.Tanmateix, quan l'aprenentatge es mesura pel rendiment en cursos rellevants posteriors, els professors amb una puntuació relativament baixa són els més efectius.Els investigadors van plantejar la hipòtesi que fer que un curs sigui més difícil d'una manera productiva podria reduir les qualificacions però millorar l'aprenentatge.Així, les avaluacions dels estudiants no han de ser l'única base per avaluar la docència, sinó que han de ser reconegudes.
Diversos estudis mostren que el rendiment del SET està influenciat pel propi curs i la seva organització.Ming i Baozhi [33] van trobar en el seu estudi que hi havia diferències significatives en les puntuacions SET entre estudiants de diferents assignatures.Per exemple, les ciències clíniques tenen puntuacions SET més altes que les ciències bàsiques.Els autors van explicar que això es deu al fet que els estudiants de medicina estan interessats a convertir-se en metges i, per tant, tenen un interès personal i una motivació més alta per participar més en cursos de ciències clíniques en comparació amb els cursos de ciències bàsiques [33].Com en el cas de les optatives, la motivació dels estudiants per l'assignatura també té un efecte positiu en les puntuacions [21].Diversos altres estudis també donen suport que el tipus de curs pot influir en les puntuacions SET [10, 21].
A més, altres estudis han demostrat que com més petita és la mida de la classe, més alt és el nivell de SET assolit pels professors [10, 33].Una possible explicació és que les classes més petites augmenten les oportunitats d'interacció professor-alumne.A més, les condicions en què es realitza l'avaluació poden influir en els resultats.Per exemple, les puntuacions del SET semblen estar influenciades per l'hora i el dia que s'imparteix el curs, així com el dia de la setmana en què es completa el SET (p. ex., les avaluacions realitzades els caps de setmana tendeixen a tenir puntuacions més positives) que les avaluacions realitzades. a principis de setmana.[10].
Un estudi interessant de Hessler et al també qüestiona l'eficàcia del SET.[34].En aquest estudi, es va dur a terme un assaig controlat aleatoritzat en un curs de medicina d'emergència.Els estudiants de medicina de tercer any es van assignar aleatòriament a un grup de control o a un grup que va rebre galetes de xocolata gratuïtes (grup de galetes).Tots els grups eren impartits pels mateixos professors, i els continguts formatius i els materials del curs eren idèntics per a tots dos grups.Després del curs, es va demanar a tots els alumnes que completessin un conjunt.Els resultats van mostrar que el grup de galetes va valorar els professors significativament millor que el grup de control, posant en dubte l'eficàcia de SET [34].
L'evidència de la literatura també avala que el gènere pot influir en les puntuacions SET [35,36,37,38,39,40,41,42,43,44,45,46].Per exemple, alguns estudis han demostrat una relació entre el gènere dels estudiants i els resultats de l'avaluació: les dones van obtenir puntuacions més altes que els homes [27].La majoria de l'evidència confirma que els estudiants valoren més les dones professores que els homes [37, 38, 39, 40].Per exemple, Boring et al.[38] va demostrar que tant els estudiants com les dones creien que els homes tenien més coneixements i capacitats de lideratge més fortes que les dones.El fet que el gènere i els estereotips influeixin en SET també es recolza en l'estudi de MacNell et al.[41], que va informar que els estudiants del seu estudi valoraven les dones professores menys que els homes en diversos aspectes de l'ensenyament [41].A més, Morgan et al [42] van proporcionar proves que les dones metgesses van rebre puntuacions d'ensenyament més baixes en quatre rotacions clíniques principals (cirurgia, pediatria, obstetrícia i ginecologia i medicina interna) en comparació amb els metges homes.
A l'estudi de Murray et al. (2020) [43], els investigadors van informar que l'atractiu del professorat i l'interès dels estudiants pel curs estaven associats amb puntuacions SET més altes.Per contra, la dificultat del curs s'associa amb puntuacions SET més baixes.A més, els estudiants van donar puntuacions SET més altes als joves professors d'humanitats masculins blancs i als professors que tenien càtedres completes.No hi va haver correlacions entre les avaluacions docents SET i els resultats de l'enquesta al professorat.Altres estudis també confirmen l'impacte positiu de l'atractiu físic dels professors en els resultats de l'avaluació [44].
Clayson et al.(2017) [45] van informar que, tot i que hi ha un acord general que SET produeix resultats fiables i que les mitjanes de classe i professors són coherents, encara existeixen inconsistències en les respostes individuals dels estudiants.En resum, els resultats d'aquest informe d'avaluació indiquen que els estudiants no estaven d'acord amb el que se'ls va demanar que avaluessin.Les mesures de fiabilitat derivades de les avaluacions dels estudiants de l'ensenyament són insuficients per proporcionar una base per establir la validesa.Per tant, de vegades, SET pot proporcionar informació sobre estudiants més que sobre professors.
El SET d'educació per a la salut difereix del SET tradicional, però els educadors sovint utilitzen SET disponible a l'educació superior general en lloc de SET específics per als programes de professions sanitàries informats a la literatura.Tanmateix, els estudis realitzats al llarg dels anys han identificat diversos problemes.
Jones et al (1994).[46] va realitzar un estudi per determinar la qüestió de com avaluar el professorat de les facultats de medicina des de les perspectives del professorat i els administradors.En conjunt, els temes més esmentats estan relacionats amb l'avaluació docent.Les més freqüents van ser les queixes generals sobre la inadequació dels mètodes actuals d'avaluació del rendiment, i els enquestats també van fer queixes específiques sobre SET i la manca de reconeixement de l'ensenyament en els sistemes de recompensa acadèmica.Altres problemes reportats inclouen procediments d'avaluació i criteris de promoció inconsistents entre els departaments, la manca d'avaluacions regulars i la manca de vinculació dels resultats de l'avaluació amb els salaris.
Royal et al (2018) [11] descriuen algunes de les limitacions de l'ús de SET per avaluar el currículum i el professorat en els programes de professionals de la salut a l'educació superior general.Els investigadors informen que el SET a l'educació superior s'enfronta a diversos reptes perquè no es pot aplicar directament al disseny curricular i a l'ensenyament de cursos a les escoles de medicina.Les preguntes més freqüents, incloses les preguntes sobre el professor i el curs, sovint es combinen en un sol qüestionari, de manera que els estudiants sovint tenen problemes per distingir-les.A més, els cursos de programes mèdics sovint són impartits per diversos professors.Això planteja preguntes de validesa donat el nombre potencialment limitat d'interaccions entre estudiants i professors avaluades per Royal et al.(2018)[11].En un estudi de Hwang et al.(2017) [14], els investigadors van examinar el concepte de com les avaluacions retrospectives dels cursos reflecteixen de manera exhaustiva les percepcions dels estudiants dels cursos dels diferents professors.Els seus resultats suggereixen que l'avaluació individualitzada de classe és necessària per gestionar cursos multidepartamentals dins d'un currículum integrat de la facultat de medicina.
Uitdehaage i O'Neill (2015) [5] van examinar fins a quin punt els estudiants de medicina van prendre deliberadament SET en un curs multidisciplinari.Cadascun dels dos cursos preclínics comptava amb un instructor fictici.Els estudiants han de proporcionar qualificacions anònimes a tots els instructors (inclosos els instructors ficticis) dins de les dues setmanes posteriors a la finalització del curs, però poden rebutjar avaluar l'instructor.L'any següent va tornar a passar, però es va incloure el retrat del conferenciant de ficció.El seixanta-sis per cent dels estudiants van puntuar l'instructor virtual sense semblança, però menys estudiants (49%) van puntuar l'instructor virtual amb semblança present.Aquestes troballes suggereixen que molts estudiants de medicina completen els SET a cegues, fins i tot quan van acompanyats de fotografies, sense tenir en compte amb cura a qui estan avaluant, i molt menys el rendiment de l'instructor.Això dificulta la millora de la qualitat del programa i pot ser perjudicial per al progrés acadèmic dels professors.Els investigadors proposen un marc que ofereix un enfocament radicalment diferent de l'SET que implica activament i activament els estudiants.
Hi ha moltes altres diferències en el currículum educatiu dels programes mèdics en comparació amb altres programes d'educació superior general [11].L'educació mèdica, com l'educació professional per a la salut, està clarament centrada en el desenvolupament de rols professionals clarament definits (pràctica clínica).Com a resultat, els plans d'estudis dels programes mèdics i sanitaris es tornen més estàtics, amb opcions limitades de cursos i professors.Curiosament, els cursos d'educació mèdica sovint s'ofereixen en format de cohort, amb tots els estudiants fent el mateix curs al mateix temps cada semestre.Per tant, matricular un gran nombre d'alumnes (normalment n = 100 o més) pot afectar el format d'ensenyament així com la relació professor-alumne.A més, en moltes escoles de medicina, les propietats psicomètriques de la majoria dels instruments no s'avaluen en el seu ús inicial, i les propietats de la majoria dels instruments poden romandre desconegudes [11].
Diversos estudis dels darrers anys han proporcionat evidència que el SET es pot millorar abordant alguns factors importants que poden influir en l'efectivitat del SET a nivell instrumental, administratiu i interpretatiu.La figura 3 mostra alguns dels passos que es poden utilitzar per crear un model SET eficaç.Les seccions següents proporcionen una descripció més detallada.
Millorar l'SET a nivell instrumental, de gestió i interpretatiu per desenvolupar models d'SET efectius.
Com s'ha esmentat anteriorment, la literatura confirma que el biaix de gènere pot influir en les avaluacions dels professors [35, 36, 37, 38, 39, 40, 41, 42, 43, 44, 45, 46].Peterson et al.(2019) [40] va realitzar un estudi que va examinar si el gènere dels estudiants va influir en les respostes dels estudiants als esforços de mitigació del biaix.En aquest estudi, SET es va administrar a quatre classes (dues impartides per professors homes i dues impartides per professores).Dins de cada curs, els estudiants van ser assignats aleatòriament per rebre una eina d'avaluació estàndard o la mateixa eina, però utilitzant un llenguatge dissenyat per reduir el biaix de gènere.L'estudi va trobar que els estudiants que utilitzaven eines d'avaluació antibiaix donaven a les professores puntuacions SET significativament més altes que els estudiants que utilitzaven eines d'avaluació estàndard.A més, no hi va haver diferències en les valoracions dels professors homes entre els dos grups.Els resultats d'aquest estudi són significatius i demostren com una intervenció lingüística relativament senzilla pot reduir el biaix de gènere en les avaluacions de l'ensenyament dels estudiants.Per tant, és una bona pràctica considerar acuradament tots els SET i utilitzar el llenguatge per reduir el biaix de gènere en el seu desenvolupament [40].
Per obtenir resultats útils de qualsevol SET, és important tenir en compte amb atenció la finalitat de l'avaluació i la redacció de les preguntes per endavant.Tot i que la majoria de les enquestes SET indiquen clarament una secció sobre aspectes organitzatius del curs, és a dir, "Avaluació del curs", i una secció sobre el professorat, és a dir, "Avaluació del professorat", en algunes enquestes la diferència pot no ser òbvia, o pot haver-hi confusió entre els estudiants. sobre com avaluar cadascuna d'aquestes àrees individualment.Per tant, el disseny del qüestionari ha de ser adequat, aclarir les dues parts diferents del qüestionari i conscienciar l'alumnat sobre què s'ha d'avaluar en cada àrea.A més, es recomana fer proves pilot per determinar si els estudiants interpreten les preguntes de la manera prevista [24].En un estudi d'Oermann et al.(2018) [26], els investigadors van cercar i sintetitzar literatura que descrivia l'ús de SET en una àmplia gamma de disciplines en l'educació de grau i postgrau per proporcionar als educadors orientació sobre l'ús de SET en infermeria i altres programes professionals de la salut.Els resultats suggereixen que els instruments SET s'han d'avaluar abans d'utilitzar-los, inclosa la prova pilot dels instruments amb estudiants que poden no ser capaços d'interpretar els ítems o preguntes de l'instrument SET tal com pretén l'instructor.
Diversos estudis han examinat si el model de govern SET influeix en la participació dels estudiants.
Daumier et al.(2004) [47] van comparar les valoracions dels estudiants de la formació d'instructors completada a classe amb les valoracions recollides en línia comparant el nombre de respostes i puntuacions.Les investigacions mostren que les enquestes en línia solen tenir taxes de resposta més baixes que les enquestes a classe.No obstant això, l'estudi va trobar que les avaluacions en línia no produïen notes mitjanes significativament diferents de les avaluacions tradicionals de l'aula.
Es va informar d'una manca de comunicació bidireccional entre estudiants i professors durant la finalització dels SET en línia (però sovint impresos), la qual cosa va provocar una manca d'oportunitats per a l'aclariment.Per tant, el significat de les preguntes SET, els comentaris o les avaluacions dels estudiants poden no ser sempre clars [48].Algunes institucions han abordat aquest problema reunint estudiants durant una hora i assignant un temps específic per completar el SET en línia (de manera anònima) [49].En el seu estudi, Malone et al.(2018) [49] va celebrar diverses reunions per discutir amb els estudiants el propòsit del SET, qui veuria els resultats del SET i com s'utilitzarien els resultats, i qualsevol altra qüestió plantejada pels estudiants.El SET es fa com un grup focal: el grup col·lectiu respon a preguntes obertes mitjançant votacions informals, debats i aclariments.La taxa de resposta va ser superior al 70-80%, proporcionant als professors, administradors i comitès del currículum una àmplia informació [49].
Com s'ha esmentat anteriorment, a l'estudi d'Uitdehaage i O'Neill [5], els investigadors van informar que els estudiants del seu estudi valoraven professors inexistents.Com s'ha esmentat anteriorment, aquest és un problema comú en els cursos de les facultats de medicina, on cada curs pot ser impartit per molts membres del professorat, però és possible que els estudiants no recordin qui va contribuir a cada curs o què va fer cada membre del professorat.Algunes institucions han abordat aquest problema proporcionant una fotografia de cada professor, el seu nom i el tema/data presentat per refrescar la memòria dels estudiants i evitar problemes que comprometin l'eficàcia de SET [49].
Potser el problema més important associat a l'SET és que els professors són incapaços d'interpretar correctament els resultats quantitatius i qualitatius de l'SET.Alguns professors poden voler fer comparacions estadístiques entre anys, alguns poden veure augments/disminucions menors de les puntuacions mitjanes com a canvis significatius, alguns volen creure-se totes les enquestes i altres són francament escèptics de qualsevol enquesta [45, 50, 51].
La manca d'interpretació correcta dels resultats o de processament dels comentaris dels estudiants pot afectar les actituds dels professors cap a l'ensenyament.Els resultats de Lutovac et al.(2017) [52] La formació del professorat de suport és necessària i beneficiosa per proporcionar retroalimentació als estudiants.L'educació mèdica necessita amb urgència formació en la correcta interpretació dels resultats del SET.Per tant, el professorat de la facultat de medicina hauria de rebre formació sobre com avaluar els resultats i les àrees importants en què s'han de centrar [50, 51].
Així, els resultats descrits suggereixen que els SET s'han de dissenyar, administrar i interpretar acuradament per garantir que els resultats de SET tinguin un impacte significatiu en totes les parts interessades rellevants, inclosos els professors, els administradors de les escoles de medicina i els estudiants.
A causa d'algunes de les limitacions de SET, hauríem de continuar esforçant-nos per crear un sistema d'avaluació integral per reduir el biaix en l'eficàcia de l'ensenyament i donar suport al desenvolupament professional dels educadors mèdics.
Es pot obtenir una comprensió més completa de la qualitat de l'ensenyament del professorat clínic recopilant i triangulant dades de múltiples fonts, inclosos estudiants, col·legues, administradors de programes i autoavaluacions del professorat [53, 54, 55, 56, 57].Les seccions següents descriuen altres possibles eines/mètodes que es poden utilitzar a més d'un SET eficaç per ajudar a desenvolupar una comprensió més adequada i completa de l'eficàcia de l'entrenament (Figura 4).
Mètodes que es poden utilitzar per desenvolupar un model integral d'un sistema d'avaluació de l'efectivitat de la docència en una facultat de medicina.
Un grup focal es defineix com “una discussió grupal organitzada per explorar un conjunt específic de qüestions” [58].Durant els últims anys, les escoles de medicina han creat grups focals per obtenir comentaris de qualitat dels estudiants i abordar alguns dels inconvenients del SET en línia.Aquests estudis mostren que els grups focals són eficaços per proporcionar feedback de qualitat i augmentar la satisfacció dels estudiants [59, 60, 61].
En un estudi de Brundle et al.[59] Els investigadors van implementar un procés de grup d'avaluació d'estudiants que va permetre als directors de cursos i als estudiants discutir els cursos en grups focals.Els resultats indiquen que les discussions dels grups focals complementen les avaluacions en línia i augmenten la satisfacció dels estudiants amb el procés global d'avaluació del curs.Els estudiants valoren l'oportunitat de comunicar-se directament amb els directors del curs i creuen que aquest procés pot contribuir a la millora educativa.També van sentir que van poder entendre el punt de vista del director del curs.A més dels estudiants, els directors del curs també van valorar que els grups focals facilitaven una comunicació més eficaç amb els estudiants [59].Així, l'ús de grups focals pot proporcionar a les escoles de medicina una comprensió més completa de la qualitat de cada curs i de l'eficàcia docent de la facultat respectiva.No obstant això, cal tenir en compte que els propis grups focals tenen algunes limitacions, com ara només un nombre reduït d'estudiants que hi participen en comparació amb el programa en línia SET, que està disponible per a tots els estudiants.A més, la realització de grups focals per a diversos cursos pot ser un procés que requereix molt de temps per als assessors i estudiants.Això comporta limitacions importants, especialment per als estudiants de medicina que tenen horaris molt ocupats i poden realitzar pràctiques clíniques en diferents ubicacions geogràfiques.A més, els grups focals requereixen un gran nombre de facilitadors experimentats.Tanmateix, la incorporació de grups focals al procés d'avaluació pot proporcionar informació més detallada i específica sobre l'efectivitat de la formació [48, 59, 60, 61].
Schiekierka-Schwacke et al.(2018) [62] van examinar les percepcions dels estudiants i del professorat d'una nova eina per avaluar el rendiment del professorat i els resultats d'aprenentatge dels estudiants en dues escoles de medicina alemanyes.Es van fer debats en grups focals i entrevistes individuals amb professors i estudiants de medicina.Els professors van apreciar la retroalimentació personal proporcionada per l'eina d'avaluació i els estudiants van informar que s'hauria de crear un bucle de retroalimentació, que inclogués objectius i conseqüències, per fomentar la presentació de dades d'avaluació.Així, els resultats d'aquest estudi donen suport a la importància de tancar el cicle de comunicació amb els estudiants i informar-los dels resultats de l'avaluació.
Els programes de Peer Review of Teaching (PRT) són molt importants i s'han implementat a l'educació superior des de fa molts anys.La PRT implica un procés col·laboratiu d'observació de l'ensenyament i de proporcionar retroalimentació a l'observador per millorar l'eficàcia de l'ensenyament [63].A més, els exercicis d'autoreflexió, les discussions de seguiment estructurades i l'assignació sistemàtica de col·legues formats poden ajudar a millorar l'eficàcia del PRT i la cultura docent del departament [64].S'informa que aquests programes tenen molts beneficis, ja que poden ajudar els professors a rebre comentaris constructius de professors iguals que poden haver-se enfrontat a dificultats similars en el passat i poden oferir un major suport proporcionant suggeriments útils per a la millora [63].A més, quan s'utilitza de manera constructiva, la revisió per iguals pot millorar el contingut del curs i els mètodes d'impartició, i donar suport als educadors mèdics per millorar la qualitat del seu ensenyament [65, 66].
Un estudi recent de Campbell et al.(2019) [67] proporcionen proves que el model de suport entre iguals en el lloc de treball és una estratègia de desenvolupament docent acceptable i eficaç per als educadors de salut clínica.En un altre estudi, Caygill et al.[68] va dur a terme un estudi en què es va enviar un qüestionari especialment dissenyat als educadors sanitaris de la Universitat de Melbourne per permetre'ls compartir les seves experiències d'ús de PRT.Els resultats indiquen que hi ha un interès reprimit per la PRT entre els educadors mèdics i que el format de revisió per iguals voluntari i informatiu es considera una oportunitat important i valuosa per al desenvolupament professional.
Val la pena assenyalar que els programes de PRT s'han de dissenyar acuradament per evitar la creació d'un entorn de judici i "gestió" que sovint condueixi a una major ansietat entre els professors observats [69].Per tant, l'objectiu hauria de ser desenvolupar amb cura plans de PRT que complementin i facilitin la creació d'un entorn segur i proporcionin una retroalimentació constructiva.Per tant, cal una formació especial per formar revisors, i els programes PRT només haurien d'implicar professors realment interessats i experimentats.Això és especialment important si la informació obtinguda del PRT s'utilitza en decisions del professorat, com ara promocions a nivells superiors, augments salarials i ascensos a càrrecs administratius importants.Cal tenir en compte que la PRT requereix temps i, com els grups focals, requereix la participació d'un gran nombre de professors experimentats, cosa que fa que aquest enfocament sigui difícil d'implementar a les escoles de medicina amb pocs recursos.
Newman et al.(2019) [70] descriuen estratègies utilitzades abans, durant i després de l'entrenament, observacions que destaquen les millors pràctiques i identifiquen solucions als problemes d'aprenentatge.Els investigadors van oferir 12 suggeriments als revisors, incloent: (1) triar les vostres paraules amb prudència;(2) permetre a l'observador determinar la direcció de la discussió;(3) mantenir els comentaris confidencials i formatats;(4) mantenir els comentaris confidencials i formatats;La retroalimentació se centra en les habilitats d'ensenyament més que en el professor individual;(5) Coneix els teus companys (6) Tingues consideració amb tu mateix i amb els altres (7) Recorda que els pronoms tenen un paper important a l'hora de proporcionar comentaris, (8) Utilitza preguntes per aclarir la perspectiva de l'ensenyament, (10) Establir la confiança dels processos i la retroalimentació en les observacions dels companys, (11) fer que l'observació de l'aprenentatge sigui de benefici mutu, (12) crear un pla d'acció.Els investigadors també estan explorant l'impacte del biaix en les observacions i com el procés d'aprenentatge, observació i discussió de la retroalimentació pot proporcionar experiències d'aprenentatge valuoses per a ambdues parts, donant lloc a col·laboracions a llarg termini i a una millora de la qualitat educativa.Gomaly et al.(2014) [71] van informar que la qualitat de la retroalimentació eficaç hauria d'incloure (1) l'aclariment de la tasca proporcionant indicacions, (2) una major motivació per fomentar un major esforç i (3) la percepció del destinatari com un procés valuós.proporcionada per una font acreditada.
Tot i que el professorat de les facultats de medicina reben comentaris sobre PRT, és important formar el professorat sobre com interpretar el feedback (semblant a la recomanació de rebre formació en interpretació de SET) i donar-li temps suficient per reflexionar de manera constructiva sobre el feedback rebut.
Hora de publicació: 24-nov-2023