Understanding and developing procedures for video-based assessment in medical education
Peter Yeates ORCID Icon, Alice Moult ORCID Icon, Janet Lefroy ORCID Icon, Jacqualyn Walsh-House , Lorraine Clews , Robert McKinley ORCID Icon & show all
Published online: 04 Aug 2020
Download citation https://doi.org/10.1080/0142159X.2020.1801997
https://www.tandfonline.com/doi/full/10.1080/0142159X.2020.1801997?af=R
ビデオの新しい利用法は、医療従事者教育における評価の強化を目的としている。これらの利用は、ビデオとライブスコアリングとの間に同等性があることを前提としているが、一部の研究では、十分に理解されていないバリエーションが妥当性に影響を及ぼす可能性があることが示唆されている。
視野の焦点が狭くなったり、対人交流が減少したり、または自発的なコントロールが減少したりすることは、すべて評価者の注意、想起、共感、またはパフォーマンスの特定の特徴の重要性に影響を与える可能性があります。
本研究では、ビデオの最適な利用を促進するための手順を開発しながら、試験官と学生のビデオとの相互作用を理解することを目的とした。
方法
デザインに基づいた研究を用いて、私たちは、模擬OSCEステーションの条件を反復的に適応させながら、評価にビデオを使用するための理論と手順を開発しました。試験官と受験生の認識については、音読、インタビュー、フォーカスグループを用いて調査しました。データは、構成主義的な根拠に基づいた理論的手法を用いて分析されました。
結果
ビデオベースの評価は、試験官の離脱感を生み出し、自発的なコントロールを低下させた。試験官の有効なビデオベースの判断能力は、ステーションのコンテンツと特別に選択された撮影パラメータの相互作用によって媒介されていた。試験官はいくつかの判断傾向を示し、ビデオの限界を管理するのに役立ちましたが、状況によっては判断に偏りが生じることもありました。慎重に配置されたカメラが邪魔になることはほとんどなく、適切に正当化されていれば撮影は許容されると考えていました。
受験者は、ビデオを用いたパフォーマンスをライブとは異なる方法で体験した。判定プロセスはビデオとライブの間で類似していましたが、ステーションの内容や撮影条件の特定の組み合わせによって情報の適切性が制限されたり、試験官の判定プロセスと相互作用して、ライブの判定を完全に代表するものではない可能性があります。学生はカメラが邪魔だと感じることはほとんどなく、カメラの配置を工夫することでパフォーマンスの混乱を避けることができました。ビデオは、試験官に十分な情報を提供すること、侵入を最小限にすること、ビデオ撮影の目的が適切に正当化されることを確認することの間で十分なバランスが取れている場合に、評価を向上させると認識されました
ディスカッション
ビデオベースの評価を成功させるためには、ステーション固有の情報の適切性を確保する必要性、混乱を招く侵入を避けること、およびビデオの教育目的によって提供される正当性の程度のバランスをとる必要があります。このバランスが適切に取れれば、ビデオは評価の妥当性を高め、学生の学習を向上させる可能性を秘めている。
実践への影響
私たちの調査結果に基づいて、私たちは、ビデオはいくつかの方法で評価を向上させる可能性を持っていますが、ビデオ機器の慎重なセットアップ（位置、ズーム、フォーカス）には、各ステーションの臨床的および教育的内容を理解している人が関与しなければならないことを推奨します。学生の行動、予測可能な視線のパターン、試験官の動き、およびクローズアップされた詳細が必要とされる可能性のあるパフォーマンスの特徴をステーションごとに考慮する必要があります。ビデオ撮影では、試験官が重要なパフォーマンスの要素を十分に見ることができ、有害な推論の使用を避けることができるようにしなければなりません。このリスクは内容に依存しているようで、手続き的スキル・ステーションではより大きなリスクをもたらす可能性がある。
ビデオは不服申し立てを解決するための魅力的な手段を提供しているように見えるかもしれないが、不服申し立てを審査することは、機関に相当な時間的要求を課したり、法的な挑戦に対する脆弱性を生み出したりする可能性がある。その結果、教育機関は、ビデオの保存期間や、ビデオの目的、使用、アクセスについて学生にどのように伝えるかについて慎重に考えるべきである。
撮影ソリューション（部屋の中で異なる位置や高さに移動可能な2台のCCTVカメラをベースにしたもの）は、多くの評価状況に適していると予想されますが、各評価状況でのこの機器の使用は、私たちが説明したような競合する緊張関係のバランスをとるように調整されるべきです。
ビデオは、いくつかの斬新な手段によって評価を向上させる可能性を提供していますが、その実施には注意が必要です。教育者は、ビデオ撮影の目的、試験官のための情報の適切性を確保するためのコンテンツ固有の必要性、評価のパフォーマンスを混乱させる撮影の可能性とのバランスを慎重にとり、評価の妥当性を高め、学生の学習を支援する妥協点を生み出すべきである。
ポイント
審査でビデオを使用することは、ライブ判定とビデオベースの判定の間の同等性に依存しています。
試験官は、ビデオベースの判定をライブの判定とは異なる方法で経験します。
試験官が同等の判断をするために十分なビデオベースの情報を持っているかどうかは、タスクに特化したカメラのセットアップを慎重に選択することに依存します。
撮影による学生のパフォーマンスへの悪影響は、カメラの位置を慎重に設定することで軽減することができます。
ビデオの使用は、ビデオ情報の妥当性、学生への影響、教育目的が適切にバランスされていれば、評価の妥当性を高めることができる。
