A-CROTとSA-CROTの実施手順
学習・教育の省察的な循環と学習の文脈
A-CROTとSA-CROTは,図のような省察的な(reflective)循環の中で使用することを推奨する.つまり,
0:臨床実践による経験に基づいて,
1:評定とコメントによる内省(狭義の自己省察)を行い,
2:評価結果の得点化による整理をし,
3:分析によって学習者の強みと課題を特定して,
4:目標設定による計画を行い,
そして,その目標設定について,0:臨床実践による経験の中で活かしていく.
図 学習・教育の省察的な循環
このような臨床経験を基盤にした省察的な循環の中で学習・教育評価を使用することによって,学習者のクリニカルリーズニングに対する経験学習が促進されると考える.
また,この学習の循環は,学習者と学習環境(教育者含む)と学習課題の相互作用の影響を受けた学習の文脈のなかで行われると考える.そのため,この学習の文脈を考慮する必要がある.
学習者-学習環境-学習課題の相互作用
STEP 1:採点とコメント(内省)
<A-CROT・SA-CROT共通>
評価者は,評価日と評価者を記載し(A-CROTの場合は,自己評価なのか他者評価なのかを丸で囲む),教示文をよく読んでここでいうクリニカルリーズニングの状態について評価すること,評定段階とその備考,回答例について理解する.
A-CROTとSA-CROTのSTEP1 の教示文
続いて,項目(A-CROTは40項目,SA-CROTは14項目)を読み,自身の実践を振り返って,いまの自分の状態が5つの評定段階(わからない〜分析できる)のうち,最も近いと思うものひとつを丸で囲む(回答例を参照).そして,評定した理由やそれに関連する具体的場面,評定時の気づきについて,コメント欄に記載する.
A-CROTのSTEP1 の項目と評定段階,コメント欄の一部
STEP 2:評定結果の得点化(整理)
<A-CROT>
A-CROTは,40項目のうち,項目1-10は科学的根拠を活かす思考プロセス,項目11-20は対象者のナラティブを活かす思考プロセス,項目21-30は専門職の倫理を活かす思考プロセス,項目31-40は実践の文脈を活かす思考プロセスに対応している.各思考プロセスの得点(範囲:10-50点),総得点(範囲:40-200点)を得点化する.
<SA-CROT>
SA-CROTの各思考プロセスの得点,総得点を得点化する.SA-CROTの14項目は,項目1-4では科学的根拠を活かす思考プロセス(範囲:4-20点),項目5-8では対象者のナラティブを活かす思考プロセス(範囲:4-20点),項目9-11では専門職の倫理を活かす思考プロセス(範囲:3-15点),項目12-14では実践の文脈を活かす思考プロセス(範囲:3-15点)に対応している.
SA-CROTの総得点(範囲:14-70点)は,OTS群32.2±6.3点(n = 135),OTR群37.3±8.7点(n =138 )である.経験年数別では以下のようである.
OTSとOTRのSA-CROTスコア
備考:本表は丸山ら 2022のデータを元に作成.
SA-CROTの総得点(素点)の換算表
備考:本換算表は臨床実習経験のあるOTSから臨床経験3年程度までのOTR専用のものである.なお,本表は丸山ら 2022のデータを元に作成.
SA-CROTの総得点(範囲:14-70点)は,上の表を利用することで,間隔尺度であるlogit値(および標準誤差)に変換できる.なお,SA-CROTの前後の各スコアをlogit値に変換した後,前後のlogit値の差を各スコアのlogit値の誤差の和と比較することにより,SA-CROT変化の有無(誤差範囲であるかどうか)を確認できる.以下に換算例を示す.
換算の例:
下の表に示すように,初期の総得点が31点であった場合,表5の換算表を使用してlogitに換算すると-3.03 logits,標準誤差(以下,SE)は0.54 logitsとなる.そして,介入後の最終の総得点が40点であれば,logitに換算すると-0.42 logits,SEは0.58 logitsとなる.
そして,(最終のlogits)−(初期のlogits)が(最終のSE)+(初期のSE)を上回っていれば,対象者は有意にCRの自己評価が向上したと判定することができる.
つまり,以下の式のように考えることができる.
CR自己評価が向上 = A(logitsの変化) > B(SEの合計)
A:(最終のlogits)−(初期のlogits) > B:(最終のSE)+(初期のSE)
下の表のOTS-Aであれば,(最終のlogits)−(初期のlogits)は(-0.42)−(-3.03)で2.61となり,(最終のSE)+(初期のSE)は(0.58)+(0.54)で1.12となる.介入前後(初期と最終と)のlogit値の差が介入前後(初期と最終と)のSEの和を上回っているため,OTS-Aは有意にCRの自己評価が向上したと考えられる.
A(logitsの変化):(-0.42)−(-3.03)=2.61
B(SEの合計) :(0.58)+(0.54) =1.12
A>Bが成り立つ =OTS-AのCR自己評価が向上した
備考:先行研究(Schell 2018,Maruyama et al 2021,丸山ら 2022,日本作業療法士協会 2018,Richard et al 2001)に基づいて作成.
<A-CROT>
視点:自己評価と他者評価のギャップに着目する
A-CROTでは,自己評価と他者評価で利用できる特性を活かし,学習者と教育者との評定のギャップがある項目や,その項目に対する互いの評定理由(コメント)について着目する.先行研究では,一般に学生の自己評価と教育者の評価との間には弱〜中程度の相関があると言われている(Brown et al, 2014).また,学生が自己評価の実施方法を訓練されていれば,学生は自分自身を正確に評価できると言われている(Thawabieh 2017).一方で,成績の悪いものは,より不正確な自己評価があることが指摘されている(Srikumaran et al 2019).
つまり,自己評価と他者評価のギャップが大きいほど,不適切な自己評価をしている可能性がある.そのため,そのギャップの背景にある評定理由やその具体的場面を共有することが重要である.また,そのギャップに対し,是正的なフィードバックをすることは,CRの改善に有用である(Beer and Mårtensson 2015).
視点:各思考プロセスの傾向に着目する
A-CROTでは,各思考プロセスで10項目ずつの質問項目が設定されている.これら質問項目は,4つの思考プロセスのなかでどの思考プロセスで特に強みがあるのか,課題があるのか,といった学習者の傾向を検討する上で役立つだろう.
特に各思考プロセスの質問項目は,評定段階のどの段階により多く評定しているのか,といった疑問は思考プロセスごとの学習につながる.しかし,A-CROTの40項目は内容妥当性のみが検討されている.各因子毎による合計得点は,素点としては扱うことができるが,因子分析等による各因子間の関係については未検討である(SA-CROTでは,確認的因子分析を実施している).そのため,A-CROTの各思考プロセスの得点(範囲:10-50点)を直接比較することは避けるべきである.
STEP 4:目標設定(計画)
<A-CROTとSA-CROT共通>
STEP 4はSTEP 3で分析した強みと課題を踏まえ,学習目標の設定をする段階である.ここでは,変えたい項目・変える必要がある項目を特定し,その期待する段階(わからない〜分析できる)を明らかにし,それら目標の達成期間を設定する.
目標設定の際には,次のことに留意する必要がある.目標は達成可能な段階に設定することが望ましい(Ashford & Stokes 2017).そのため,具体的には期待する段階は,現状の段階から大幅にかけ離れておらず,現状より一つ上の段階とするほうが良いだろう.達成時期については,OTSであれば,短期的な臨床実習の前後や,長期的な臨床実習の初期・中間・最終といった3〜4週間の期間で設定することが妥当であると考える.また,著者の考えでは変化の程度は,OTRに比べOTSのほうが大きいことが予想される.そのため,OTRの場合の目標設定の期間は,少なくともOTSよりも時間を設けたほうが望ましいと考え,4週間以上の期間を推奨する.
<A-CROT>
A-CROTでは,学習者と教育者での使用を前提としており,話し合いによって目標とする項目を3〜5つ決めることを推奨する.
<SA-CROT>
SA-CROTでは,自己評価として自ら変えたい項目を3つ設定する.
文献
Ashford S, Stokes LT: Goal attainment scaling in adult neurorehabilitation. In Siegert RJ, Levack WMM (Eds.), Rehabilitation goal setting: Theory, practice and evidence. CRC Press, 2017, pp.123-141.
de Beer M, Mårtensson L. Feedback on students' clinical reasoning skills during fieldwork education. Aust Occup Ther J. 2015;62(4):255-264. doi:10.1111/1440-1630.12208
Hattie J:(山森光陽・監訳) 教育の効果ーメタ分析による学力に影響を与える要因の効果の可視化ー.図書文化社,2018.
Maruyama S, Sasada S, Jimbo Y, Bontje P: A Concept Analysis of Clinical Reasoning in Occupational Therapy. As J Occup Ther (17)1: 17-25, 2021.
Richard EM, Paul RP, Merlin W: The Cognitive Process Dimension. In Anderson LW, Krathwohl DR (eds), A taxonomy for Learning, teaching, and assessing: A revision of Bloom's taxonomy of educational objectives, Addison Wesley Longman, New York, 2001, pp.63-92.
Schell BAB: Professional reasoning in practice. In Schell BAB, Gillen G (eds), Willard and Spackman's Occupational Therapy 13th, Wolters Kluwer, Philadelphia, 2019, pp.482-497.
Srikumaran D, Tian J, Ramulu P, Boland MV, Woreta F, et al: Ability of Ophthalmology Residents to Self-Assess Their Performance Through Established Milestones. Journal of Surgical Education, 76 (4), pp. 1076-1087. 2019.
Thawabieh Ahmad M: A Comparison between Students' Self-Assessment and Teachers' Assessment. Journal of Curriculum and Teaching, v6 n1 p14-20 2017.Unsworth C, Baker A: A systematic review of professional reasoning literature in occupational therapy. Br J Occup Ther 79(1): 5-16, 2016.
一般社団法人日本作業療法士協会:作業療法臨床実習指針(2018).https://www.jaot.or.jp/files/page/wp-content/uploads/2013/12/shishin-tebiki2018-2.pdf(参照 2020-01-08).
丸山祥, 村仲隼一郎, 宮本礼子, ボンジェペイター: 日本の作業療法臨床実習における教育評価の開発と使用に関する課題: スコーピングレビュー. 作業療法教育研究 20(2): 21-29, 2021.
丸山祥, 笹田哲, 神保洋平, 宮本礼子, ボンジェペイター: 作業療法のクリニカルリーズニング評価尺度の開発: 内容妥当性の検討. 作業療法 40(6): 784-792, 2021.
丸山祥,宮本礼子, ボンジェペイター: 新人作業療法士のクリニカルリーズニング学習と教育の経験の理解:作業療法のクリニカルリーズニング評価尺度の有用性. 作業療法 41(2) 188-196, 2022.
丸山祥,宮本礼子, ボンジェペイター: 作業療法のクリニカルリーズニング自己評価尺度(SA-CROT)の妥当性と信頼性の検討. 作業療法 41(2) 197-205, 2022.
コメント
コメントを投稿