PMC
DISCUSSION
これらの数値は、教員によるOSCE成績アップの偏り13が、UHでは成立しないようであることを示唆している。 相関がないのは、MPP3試験よりもOSCEで良い成績を修めた学生、あるいはOSCEよりもMPP3試験で良い成績を修めた学生のどちらかの結果と考えられる。
相関図（図1）を分析すると、両方の可能なシナリオの事例がある。 傾向線より有意に高い得点の学生は、OSCEよりもMPP3試験の成績が良く、傾向線より低い得点の学生は、MPP3試験よりもOSCEで成績が良かった。 これらの違いは、OSCEとMPP3試験がテストするために設計された異なるスキルセットに起因すると考えられる。
MPP3試験は、複数の選択問題およびエッセイ問題からなる伝統的な筆記試験である。 これは主に、ミラーのピラミッドの最も低いレベルの能力、”知っている “と “どのように知っている “を評価するものである。 OSCEはピラミッドの下位2レベルの評価にも使用できますが16 、評価ツールとしての強みは、実際の臨床能力を理解するために最も重要な上位レベル（「shows how」と、ある程度「does」）を評価できることです。 強い知識ベースが臨床能力を向上させるという前提を支持する証拠があるが16、MPP3試験とレベル3 OSCEの成績の間には、2つの異なる能力を測定するため、相関関係を期待すべきではない
能力評価のためのケンブリッジモデル17は、ミラーのピラミッドの上位2レベルをより詳細に検討することによって、ミラーの能力モデルを拡張する。 このモデルは、個人特有の環境と状況が能力とパフォーマンスに及ぼす影響を考慮したもので、統計分析の結果を合理化する際に有用である。
学生は、複数のステーションからなる評価のストレスに対処できないため、MPP3試験のパフォーマンスと比較してOSCEで低いパフォーマンスを示す可能性がある。 5分間隔で1つのステーションから別のステーションに移動することは、一部の学生には前のステーションでの悪いパフォーマンスから回復するための十分な時間を与えず、結果として全体的なパフォーマンスが低下する可能性があります。 18-20 18人の学生は、OSCEよりもMPP3の筆記試験の方が明らかに成績が良かった（図1）。 この結果は、比較的不慣れなOSCEと比較して、より慣れ親しんだ筆記試験のストレスに対処する能力（つまり、システムに関連する影響）に起因すると思われる。 また、学部の最終学年に進むために必要なMPP3試験の合格が重要であることも要因として考えられる。 これに対して、OSCEの合格は進級に重要ではありません（つまり、学生はこの構成要素の成績が悪くても、他の場所で取得した単位により進級することができます。 OSCEに合格することが進級に重要ではないという知識は、評価に対する学生の姿勢に影響を与え（個人に関わる影響）、MPP3試験のときほどOSCEの準備を徹底しない学生も出てくるかもしれません。 この仮説が少数の学生に当てはまるという逸話的な証拠がある一方で、この態度が成績に与える影響について具体的な結論を出すには、さらなる研究が必要です。
OSCEにおける成績は必ずしも能力の指標ではないことが研究で示されているので、この個別の要素における学生の成功は学位取得への進展に重要ではないと考えています。 これは、能力不足とは対照的に、外的要因に起因する成績不良が、他の有能な学生がプログラムの次の段階に進むことを妨げる可能性があることが主な理由である。 もちろん、この問題は、総括的なOSCEを年度内に複数回実施することで改善される。なぜなら、一連のOSCEの成績によって、スタッフは個々の学生の能力をより正確に評価することができるからである。 しかし、OSCEは資源を大量に消費するため、個々の学生に1年間に何度も受験させることは現実的ではありません。 OSCEにかかる費用と、臨床能力を正確に測定する上での一貫性のなさを考慮すると、評価手段としてOSCEをプログラムから排除するという議論もあり得ます。そうすると、進級の指標として従来の試験（例：MPP3）における学生の成績のみに頼ることになりますが、そのようなことはありません。 しかし、この研究は、従来の試験の成績とOSCEの成績の相関が弱いことを示しており、この評価が異なるスキルを審査していることを示唆しています。 2009年のコホートでこの仮定がどの程度維持されているかを評価するために、我々は学部課程の1年目、3年目、4年目のOSCEにおける個人の相対的な成績を比較しました。 その結果、大半の学生は経験の増加によりOSCEの点数が向上したが、20％の学生は3年目に向上したにもかかわらず、この仮定は当てはまらなかった。 さらに調査したところ、最終学年のOSCEは、最終学年のプロジェクト論文の提出期限と同時に実施されており、システム関連の影響が学生の臨床試験の能力に影響を与える典型的な例であることが判明しました。 このことは、1年目と3年目の比較では、このような競合がなく、100％の学生が1年目の成績より向上していたことからも裏付けられている。 4 年目の成績に影響を与える他の要因としては、個々の学生が経験した個人的な外的プレッシャーや、4 年目の OSCE の複雑化などが 考えられる。 4 年目の OSCE に関連するコースワークの総合成績に対する OSCE の寄与が比較的小さいことも、少数の学生にとっては重要でないように思え、このことがこれらの学生が準備にどれだけの労力を費やしたかに影響した可能性がある。 この仮説を支持する逸話的証拠はあるが、OSCEに対する態度がOSCEの成績に与える影響について明確な結論に達するには、さらなる研究が必要である
。