医学教育つれづれ

医学教育に関する論文のPOINTを書き出した備忘録的なブログです。

OSCEにおけるビデオ録画、ビデオによる評価方法の適用

Applying a video recording, video-based rating method in OSCEs
Yu Fu, Wenjuan Zhang, Saiyi Zhang, Dong Hua, Di Xu & Hua Huang
Article: 2187949 | Received 02 Oct 2022, Accepted 02 Mar 2023, Published online: 08 Mar 2023
Download citation  https://doi.org/10.1080/10872981.2023.2187949  

https://www.tandfonline.com/doi/full/10.1080/10872981.2023.2187949?af=R

 

はじめに

客観的構造化臨床試験(objective structured clinical examination: OSCE)の結果は、試験官の同質性の低さ、試験結果の非遡及性、試験官-コホート効果によって影響を受ける可能性があります。中国では、多くの学生が医療資格試験に参加しており、この問題は特に重要である。

本研究では、受験者の実技評価プロセスを動画撮影、動画による採点方式で記録し、マルチカメラによる同期撮影を採用して、受験者の実技評価のための動画解答用紙を作成した。試験官は、ネットワーク採点端末(ソフトウェアプラットフォームと呼ぶ)を用いて、評価方法の一貫性、評価結果の差異、ビデオ録画システムが学生の得点に与える影響の3つの側面からビデオ評価を行った。本研究では、(1)ビデオ録画装置は確実に機能するか、(2)ビデオ評価と現場評価で得点に違いはあるか、(3)ビデオ録画装置の有無は学生の得点に影響を与えるか、という疑問を投げかけた。(3)室内にビデオカメラがあることはスコアに影響するか?本研究は、ビデオ録画、ビデオベースの評価方法を開発し、OSCEの有効性と公平性を向上させるための有望な枠組みを提供することを目的とした。

実施方法

本研究の対象は、国家医師免許試験の臨床技能部門に参加する卒業後1年の臨床学生である。

医師国家試験の臨床技能部分は3つの評価要素で構成され、最初のステーションでは臨床思考を評価します。試験問題はコンピュータで配信された。第1ステーションの試験時間は40分でした。第2ステーションは身体診察のスキルを評価するもので、試験時間は15分でした。第3ステーションでは、皮膚の消毒とドレーピング、縫合、膿瘍の切開と排液、心肺蘇生など、基本的な臨床スキルに関する24問が出題されました。試験時間は10分であった。受験者は、第2ステーションと第3ステーションの試験問題を1問ずつ解きました。身体診察は模擬患者の協力が必要で、基本的な臨床技能の操作はシミュレーターや金型で行われた。

参加者は江蘇省の4都市からである。参加者は、評価方法の一貫性を評価するために、現場評価グループとビデオ評価グループにランダムに割り振られた。また、記録装置の信頼性とビデオ撮影の評価可能性を検証した。さらに、2つの評価方法の一貫性と同等性を比較し、ビデオ撮影が得点に与える影響を分析した。

結果

記録機器の信頼性、ビデオ撮影の評価性は高かった。専門家と審査員の間の評価整合性は許容範囲であり、評価結果に差はなかった(P = 0.61)。ビデオによる評価と現場での評価の整合性は良好であったが、2つの評価方法の間に差異が検出された。ビデオによる評価グループの学生のスコアは、全学生のスコアよりも低かった(P < 0.00)。

今後の研究内容

今後の研究では、記述された限界に対処する必要がある。ビデオ録画のプロセスは、録画内容の明確さと評価可能性を確保し、高品質のビデオ情報を試験者に提供するために、さらなる最適化が必要である。研究では、ビデオ録画の使用、ビデオによる評価方法、評価行動への介入の影響に関する試験官と参加者の認識を探る必要がある。また、ビデオ録画のフィードバックが指導レベルや受験者の能力向上に与える影響について、さらに研究を進める必要がある。さらに、ビデオベースの評価方法の客観性と評価可能性についても、より多くの研究を行い、洗練されたものにすることが必要である。

結論

従来の採点モデルは、客観性や効率性が十分とは言えません。本研究により、ビデオ評価モードは、試験官が現場で学生に介入することを排除し、試験の客観性と公平性を向上させることができることが明らかになった。さらに、分類された採点方法は、試験官の作業プレッシャーを軽減し、試験官の効率を向上させ、評価の均質性を高め、学生の臨床技能の客観的かつ効果的な評価を保証することができた。したがって、このモデルを開業医の資格試験に拡張することが必要である。