A toolbox for conducting an online OSCE
Mohamed H. Shehata, Archana P. Kumar, Mona R. Arekat, Mohamed Alsenbesy … See all authors
First published: 16 October 2020 https://doi.org/10.1111/tct.13285
https://onlinelibrary.wiley.com/doi/10.1111/tct.13285?af=R
概要
このツールボックスでは、Zoomを使用してArabian Gulf UniversityのCollege of Medicine and Medical Sciences (CMMS-AGU)でオンラインOSCEを実施した際に得られた教訓と使用したツールを紹介しています。試験官は、この試験が有効であると考え、学生はこの試験が非常に受け入れやすいものであると評価しました。3つのフェーズについて説明します。
計画・準備段階では、状況分析、関係者の調整、リソースの動員、共有ビジョンの作成、試験プロジェクトのオーナーシップが行われます。試験の実施を成功させるためには、マンパワー、時間帯、ステーション数、試験プロセスのステップの詳細な説明など、詳細な計画が必要です。私たちは、オンライン臨床試験に関連する適切な意思決定のための一連の指針となる質問を提供します。
実施段階では、当初の計画に改良を加えたり、参加スタッフの必要な能力開発の概要を把握するために、試験を行うことが非常に有効です。使用されたガイド文書、コミュニケーション手段、ZOOMの機能について詳しく説明しています。
評価段階では、評価指標のリストを含め、プロセスと結果を評価するためのガイドを提供します。
オンライン臨床試験の設計と実施には、3つのフェーズがあります。
・計画と準備
オンラインOSCEの最初のステップは、すべての利害関係者を調整し、同意を得ることです。この取り組みを成功させるためには、マンパワーを含む学校のリソースを動員するためのリーダーシップのサポートも不可欠です。
コンピュータスキルやコミュニケーションスキルなど、多様なスキルを持ったコアチームが、オンライン評価の極めて重要な成功要因となります。
・適切な計画のための指針となる質問
評価者は学生を遠隔地で試験すべきか、キャンパスから試験すべきか?
評価者がキャンパスから参加する場合、試験を実施するのに適した会場はどこですか?
オンライン臨床評価を成功させるために必要なリソースは何ですか 。
どのようなリソースがすでに利用可能であるか、または変更して使用することができますか？
調達が必要なその他のリソース（材料、ハードウェア、ソフトウェア）は何ですか？
受験生がスムーズに試験を受けられるように、どのような技術的サポートやガイダンスを提供できますか？
OSCEに標準模擬患者や模擬患者を使用することは可能ですか？
物理的な距離の取り方を含め、感染症対策に必要な注意事項を教えてください。
オンライン臨床試験を設計する際に問題となる可能性のある既存の法規制にはどのようなものがありますか？
想定される様々な問題や失敗は何か、また、それぞれに対して何ができるか？
公式な承認を必要とする試験の構造や規則の変更とは何か？
試験に関わるさまざまな関係者に対して、どのようなトレーニングや能力開発が必要か？
このユニークな状況の制限を考慮して、どのようなオンライン試験監督が可能か？
試験の設計（ステーションの数、ステーションの種類、タイミングなど）はどのようになっていますか？
試験される目的に応じて、OSCEステーションは何セット必要ですか？
OSCEステーションのセット数を減らすために何ができますか？
オンライン臨床試験では、どのような臨床能力を評価することができますか？
受講生のコホート間で難易度の標準化を図るためにはどうすればよいですか？
計画のもう一つの重要な部分は、カリキュラムの適切な抽出と、遠隔で評価される能力の適切なカバーを保証する試験のブループリントである。人員、時間帯、ステーションの数、プロセスの各ステップの詳細な説明を含む様々な試験の詳細な計画は、オンライン臨床試験の成功を保証する
・実施
本格的に実施する前に、コアチームが実際の試験を最小限の問題で実施できる自信を持てるようになるまで、少なくとも2回の模擬試験を実施することが望ましい。
模擬試験を繰り返すことで得られるもう一つの成果は、試験の様々な関係者間の準備、コミュニケーション、調整の改善です。持続可能で効率的なプロセスを保証するために、いくつかの文書が作成され、管理者によって承認されています。
模擬試験を実施すること
(1)初期の予想を評価する
(2)実施上のギャップを判断する
(3)是正措置をブレーンストーミングする
(4)新しいソリューションをテストする
(5)追加の役割や人員の必要性を判断する
(6)必要なトレーニングやキャパシティビルディングについて合意する
(7)エラーのないプロセスを保証するために必要な文書を作成する
(8)変更について公式な承認を得る
(9)使用するアプリケーションを扱う上でより多くの経験を積む
(10)試験プロセスの調整や時間管理を改善する
・オンライン臨床試験における様々な役割
試験の主催者： 戦略的計画、タスクフォースのトレーニング、評価の実施
アシスタント (Co-host)： 評価者の採点をチェックし、ブレイクアウトルームの管理においてホストを支援する
試験監督（Co-host） ：ブレイクアウトルームを訪問し、試験プロトコルの遵守を確認する
試験後の部屋の監視役（Co-host）： 半構造化インタビューガイドに基づいて学生からフィードバックを引き出す
試験前の部屋の監視役 ：学生の身分証明書（写真付き身分証明書と大学の身分証明書）と部屋の環境を確認する
臨床部門の事務：すべての試験関連文書の入手可能性を確保し、評価者、学生、試験チームの間で連絡を取る
コアチームの事務： 時間を管理し、査定者、IT サポートスタッフ、および試験チームの間のライフラインとしての役割を果たす
評価者： 与えられた評価タスクとツールに基づいて、学生を評価する
臨床部門長： 部門の教員へのオリエンテーションや、試験のブループリントに基づく試験資料の作成
ITサポートスタッフ ：技術的なロジスティックで評価者をサポートする
技術チームコーディネーター ：技術チームの割り当ておよび監督
事務：厳格な管理の下、試験問題を配布する
・評価
評価では、インフラの妥当性、プロセス、成果という3つの重要な分野を扱う必要がある。
重要な指標
・プロセス、手順、受容性や満足度に関する教員や臨床部門の責任者のフィードバック。
・試験ごとの学生の成績と前年度の平均成績の比較。
・各試験における学生の平均スコアと、従来の方法による同じ試験の平均スコアとの比較。
・過去の類似した試験と比較した試験の有効性と信頼性の報告。
