Virtual reality informs clinical observation tool
Francis J. Real, Dominick DeBlasio, Nicholas J. Ollberding, Kimberley Sikora, Rachel Herbst, Monica Whitehead, Brittany L. Rosen, Andrea Meisman, Lori E. Crosby, Melissa D. Klein
First published: 07 April 2023 https://doi.org/10.1111/tct.13575
https://onlinelibrary.wiley.com/doi/10.1111/tct.13575?af=R
背景
心理学的に妥当な評価尺度がないため、職場ベースの評価で研修医のスキルを評価することは困難である。私たちのチームは以前、研修医の行動健康予見指導（behavioral health anticipatory guidance: BHAG）と動機づけ面接（motivational interviewing: MI）の能力を評価する観察ツールを開発したが、その信頼できる使用には専門家（例：小児心理学者）の評価者が必要だった。そこで、臨床医向けに改良したツールの妥当性を検証することを目的とした。
アプローチ
本研究では、小児科研修医を対象としたバーチャルリアリティ（Virtual Reality：VR）ベースの行動健康カリキュラムの先行教育試験のデータを活用した。まず、エキスパート尺度を修正するために臨床医とグループインタビューを実施した。次に、記録されたVRシミュレーション（n = 10）を採点し、臨床医間の相互信頼性を評価した。最後に、研修医のスキルレベルを識別する能力を評価するために、医師がこのツールを使用した（n = 55）。
評価方法
グループインタビューでは、MIに関連する項目を頻度カウントからpresent/absentの2値化へ変更し、委託の項目を追加するなどの修正を行った。相互信頼性テストにおいて、臨床医ツールは、BHAGに関連する項目で、ほぼ完全な一致、またはほぼ完全な一致を示した。MI項目については、一致の幅があった。記録された55のVRシミュレーションを用いた臨床医ツールは、BHAGスキル（p = 0.002）および委託のレベル（p = 0.001）において、訓練済みと未訓練の研修医の間に識別性を示した。MIアドヒアランスにおけるグループ間の差は、エキスパートツールでの差と同様、統計的に有意ではなかった（p = 0.095）。
意味合い
本研究は、ツール開発のための妥当性・信頼性エビデンスの収集にVRシミュレーションを用いることの可能性を示したものである。Messickのフレームワークを用いることで、内容、反応プロセス、内部構造、他の変数との関連性についての妥当性エビデンスを得ることができました。VRシミュレーションは、実際の観察、標準化された患者、ロールプレイなどの従来の方法では困難であった妥当性のエビデンスを迅速に収集することを容易にした。
VRはシミュレーションと学習者評価において有望な役割を果たすことができ、教育者は仮想的な相互作用を通じて特定の観察可能な行動を目標とし、意図的な練習によって能力の加速を促進することができるようにすることができる。VRは、COVID-19パンデミックのような臨床的混乱時に、従来の評価戦略へのアクセスが制限される場合に特に有用であると考えられる。
しかし、本研究には、単一施設での実施であること、一般化可能性に限界があること、定量的なデータしか得られないこと、記録された観察の中で住民が行動を変える可能性があることなどの限界があった。仮想環境での行動が実世界の実践をどのように反映するかを評価するためには、さらなる研究が必要である。
このような制約があるにもかかわらず、VR技術は、有意義な職場ベースの評価（WBA）を支援するツールの開発、改良、テストを通じて、臨床医トレーニングを強化する機会を提供します。今回開発されたツールは、研修生がWBAを実施する際に使用することができ、小児科診療の重要な要素である行動健康評価と指導を行うスキルを向上させることができます。今後、VRの進化に伴い、医学教育や評価における役割が拡大し、臨床医のトレーニングや評価をサポートする革新的な方法が提供されることが期待されています。
