医学教育つれづれ

医学教育に関する論文のPOINTを書き出した備忘録的なブログです。

PBLのチューターの評価:チューターの変動性は客観性と信頼性に影響するか?

Tutor assessment of PBL process: does tutor variability affect objectivity and reliability?

Bidyadhar Sa, Chidum Ezenwaka, Keerti Singh, Sehlule Vuma and Md. Anwarul Azim Majumder
BMC Medical Education201919:76
https://doi.org/10.1186/s12909-019-1508-z

bmcmededuc.biomedcentral.com

背景

客観性を確保し、信頼性を維持することは、あらゆる形の評価が有効であると考えるために必要です。チューターによる問題ベース学習(PBL)チュートリアルでの学生の評価は、多くの課題と制限を引用した批評の注目を集めました。本研究の目的は、トリニダードトバゴの医学部でPBLプロセスを評価する際のチューターの変動の程度を判断することでした。

方法

3年生の医学部の181人の学生全員が、14のPBLグループに無作為に割り当てられた。 18人のチューターのうち、12人は3つのグループを評価する機会がありました。1人は2つのグループ、4人はそれぞれ1つのグループを評価しました。最後に、各グループは異なるチューターによって3回評価されました。チューターは、各PBLグループを評価するために、6段階スケールで12の異なる基準のPBL評価評価スケールを使用しました。述べられた仮説を検定するために、独立t検定、一元配置分散分析、それに続く事後ボンフェローニ検定、クラス内相関、およびピアソン積率相関が行われた。

結果

分析により、最高評価群と最低評価群の間(t比= 12.64; p <0.05)および最も寛容な評価者と最も厳密な評価者(t比= 27.96; p <0.05)の間に有意差があることが明らかになった。最高および最低格付けグループのANOVAおよび事後分析により、寛容度評価者および厳密度評価者は、それぞれのカテゴリーにおけるスコアの希釈に有意に寄与している(p <0.01)ことが明らかになった。異なるグループに対する異なるチューターの評価間のクラス内相関(ICC)は、3つのグループを除くさまざまな評価間で低い一致を示した(r = 0.40)。チューターのPBL経験と彼らの平均評価の間の相関は、中程度に有意であることがわかった(r = 0.52; p> 0.05)。

結論

本研究から明らかなように、評価者の間の寛容性と厳格性の要因は客観性と信頼性に大きな影響を与える。したがって、チューターの評価の原則の分野におけるより厳格な訓練が推奨されます。さらに、その知識を実践して寛容性と厳格性の要因を克服することが不可欠です