言語学習で高く飛ぶ:マリア・トレッドアウェイ博士の研究が英語評価に与える影響
2023年3月24日
マリア・トレダウェイ博士は、今年のジャクリーン・ロスTOEFL® 論文賞を受賞し、論文「初学者パイロットのための診断言語テストの開発と検証」を受賞しました。ジャクリーン・ロス TOEFL博士論文賞は、第二言語または外国語テストおよびテスト、その利用・開発に関する知識に重要かつ独創的な貢献をした博士論文研究を表彰します。このQ&Aでは、トレッドアウェイ博士が航空業界および言語テスト分野における発見の意義、そしてそれが英語学習と評価の分野にどのように貢献しているかについての研究を共有します。
航空における言語テストという重要な分野で研究を行うきっかけについて教えていただけますか?
マリア・トレッドアウェイ博士:5歳の誕生日にリチャード・スキャリーの 『グレート・ビッグ・エア・ブック 』を受け取って以来、私は航空機と航空に魅了されました。最終的に2001年に商業パイロットの免許を取得しましたが、9.11以降はプロとして飛ぶのではなく趣味として飛行を続けることに決めました。代わりに英語教育に専念し、応用言語学の修士号を取得しました。私の副専攻論文は航空と評価への関心を組み合わせ、非日常的な状況における発話速度がパイロットの理解力に与える影響を調査しました。この期間中、ジョン・リード名誉教授と共に働くことができたのは本当に幸運でした。彼の指導は航空と評価の専門知識を兼ね備えていたからです。修士研究の過程で、航空言語テストの研究が本当に必要であることに気づき、ジョンが協力してくれたことで、博士課程で支援を受けられると確信しました。実際、私はジョンの最後の博士課程の学生という非常に恵まれた立場にあり、この賞は私だけでなく彼自身のためのものです。ですから、私の研究では航空への愛情、英語、評価を組み合わせることができました。
航空業界および言語テスト分野におけるあなたの研究成果の意義について詳しく教えていただけますか?
マリア・トレダウェイ博士:私の研究は、英語を話さない背景を持つ初歩士官候補生パイロットの言語的準備度を測定する試験を開発し、英語で実施される実習飛行訓練プログラムに成功裏に参加できるかどうかを測るための応用プロジェクトでした。この試験は海外飛行訓練準備試験(OFTPT)と呼ばれています。念のために言うと、「ab initio」とは「最初から」という意味で、地上学校の理論訓練を終え、実習飛行訓練に移行する準備ができている学生パイロットのことを指しています。そして「cadet」とは、多くの参加者が航空会社にスポンサーを受けていたことを指しています。
このプロジェクトの動機は、航空訓練環境における言語テストの現状に由来しています。現時点では、英語圏の国々で実習飛行訓練に入る非英語圏出身の士官候補生パイロットを、最初から評価するための標準化された言語能力の指標はありません。代わりに、各訓練組織は独自のテストや入学要件を採用しており、これにより言語準備度の評価は場当たり的なものとなっています。これは、他の訓練分野における堅牢で標準化されたスキルや能力の評価とは対照的です。その結果、航空教育分野は、国際民間航空機関(ICAO)の言語習熟度評価尺度(パイロットおよび航空管制官の言語習熟度の国際指標)に準拠した有効で信頼性が高く標準化された測定ツールの必要性を示唆し、学生パイロットが経験する悪影響を最小限に抑えることを目的とした組織間の比較可能な品質基準の確立を支援することを目的としています。 言語的に準備ができていない学生がプログラムに参加できる場合、航空会社や研修機関を支援します。ですから、私の研究の意義という観点から言えば、これは業界が求めている測定ツールかもしれません。なぜなら、それは業界の現実世界のニーズに動機づけられたからです。
目標言語使用(TLU)ドメイン(フェーズ1)および標準設定セッション(フェーズ4)の調査データによると、OFTPTはこの分野の専門家(SME)が試験内容において重視する内容を捉えることに成功していることが示されています。テスト試験(フェーズ3)の項目分析では、コンストラクト(フェーズ2)の運用化が成功し、判別が良好で適切な難易度レベルに達したことが示されました。SMEとの標準設定(フェーズ4)では、非ネイティブ英語話者(NNES)ab initiosから期待される言語パフォーマンスレベルにかなりの均質性があり、これはパフォーマンスレベル記述子やカットスコアに明確に示された閾値のパフォーマンスレベルに信頼を持てることを示唆しており、これらはICAOの言語習熟度評価尺度と推論的に連動しています。まとめると、各フェーズはこのTLUドメイン専用に開発されたテストでSMEが決定した標準を特定するのに寄与しました。これはICAOスケールで測定された、飛行訓練へのエントリーにおける初の研究に基づくベンチマークです。これは始まりであり、多くの人がこの分野での基準向上に取り組んでいることを知っていますし、他の人たちも私の仕事を基盤にしてくれることを願っています。
あなたの研究が英語学習と評価の分野にどのように貢献できると考えていますか?
マリア・トレッドアウェイ医師: 実践的な貢献としては、プロジェクトの主な成果は、実習飛行訓練を始める初歩パイロットのニーズに特化した、オンラインで実施される完全運用テストであり、ICAOの言語能力評価尺度に適合しています。テストスコアは、実習飛行訓練に取り組む準備度(つまり、学生が準備できている、最低限の準備、または未準備のいずれか)として解釈でき、これらの準備度はICAO評価尺度と実証的に関連付けられています。前述の通り、このTLU領域における言語習熟度の閾値レベルが尺度と結びついたのは初めての例です。
また、この環境下での検査の重要な診断機能にも焦点を当てています。スコアレポートでは、受験者が自分の成績に関する詳細なフィードバックを受け取り、それが自分の強みと弱みを特定し、航空言語スキルを向上させる助けとなります。コンパニオンテストのウェブサイトでは、受験者が自由にアクセスできる学習リソースを厳選し、弱点を改善し強みを活かせるようにしました。したがって、学習者が実際の領域で必要な知識、スキル、能力を身につけ、同じ能力をOFTPTでテストするという、言語学習成果にポジティブな逆転が起こる可能性があります。この学習と評価の整合性は、航空言語テストを設計する上で私にとって非常に重要でした。言語テストの課題は、生徒の目標言語使用領域の課題と非常に密接に連携しており、学習と評価が相互に連携しています。これは学習者の動機付けや、目標の言語使用領域、ここでは実践的な飛行訓練で機能するために必要な言語への関与を高める上で非常に重要だと思います。
理論的貢献の面では、本研究は評価における検証に関する確立された二つのアプローチ、すなわちBachmanとPalmerの「Assessment Use Argument」とO'SullivanとWeirの2011年の社会認知的枠組みを初めて融合させた研究です。したがって、私の論文第5章におけるフェーズ2におけるOFTPTの設計と運用の詳細な説明は、ESP/LSPテスト開発者、特に航空試験開発者にとって有用な青写真となり得ます。なぜなら、章には詳細な試験仕様書や各OFTPTモジュールの理論理由も含まれているからです(Listening, 読書と話すこと)。
ジャクリーン・ロスのTOEFL® 論文賞を受賞したことは、あなたのキャリアや研究の軌跡にどのような影響を与えましたか?
マリア・トレッドアウェイ博士:まず第一に、この賞を受賞したことで、私の学部やオークランドの教員、そしてオーストラリアやニュージーランドの言語テストコミュニティ、そして今回のインタビューを通じて、さらに遠くまでも大きな評価を得ることができました!これにより博士課程のプロジェクトでの認知度が高まり、航空訓練機関内でOFTPTの実務的な応用につながることを期待しています。また、この賞は国際的な賞であるため、私の研究の信頼性を高め、航空訓練機関での試験の普及や、さらなる検証や研究のための将来の資金確保に役立つかもしれません。表彰に加え、この賞には経済的支援も伴い、学会やその他の専門能力開発の機会に参加して研究を広めるために活用します。この評価はすでにオーストラリア、ブラジル、アメリカの他の研究者との協力機会の増加につながり、それが新たな研究の道や分野のさらなる発展につながることを願っています。この賞は、自分の作品をより広い聴衆に共有するプラットフォームとして役立ったと思います。
言語テストにおける研究の認識と支援の重要性について話していただけますか?
言語テストにおける研究を認め、支援することは、いくつかの理由で非常に重要です。第一に、言語テストの研究は、言語テストが公平で信頼性が高く有効であることを保証するのに役立ちます。これは特に航空や移民など、言語能力が重要な目的で使用される場合に重要です。言語評価の正確性を向上できれば、個人の教育や職業の機会だけでなく、社会全体にも良い影響を与えることができます。研究がなければ、対象となる構成要素を捉えたり、言語能力を正確に測定したりできず、言語学習者の評価が不正確になり、すべての関係者に予期せぬ悪影響を及ぼす可能性があります。技術の進歩は言語テストの研究を支え、言語能力をより良く捉え、受験者の試験体験を向上させる革新的な評価方法やツールの開発を可能にします。テストをよりアクセスしやすく公平にすることなどです。最後に、言語テストの研究は言語政策や意思決定に役立つことで、より効果的な言語教育プログラムや学習者の成果向上につながります。ですから、リサーチはとても重要です!
博士課程のプロジェクトで直面した最大の課題は何で、どのように乗り越えましたか?
マリア・トレダウェイ博士:私の博士課程の多くはCOVID-19パンデミック中に行われました。そのため、プロセスがより複雑になった独特の課題がありましたが、同時にデジタルや協働ツールを活用して革新的な解決策を探る新たな機会も得られました。具体的な課題は、完了すべき小さなタスクのプロジェクト管理、航空訓練業界内の人脈構築と維持、参加者の募集(特に政府の制限やソーシャルディスタンスの制限下)、そしてバーチャル面接やオンラインデータ収集の一般的な必要性でした。時には図書館から物理的な資料にアクセスできず、時間管理や研究活動の調整が時に難しかったです。COVID以外では、おそらく多くの博士課程の学生と同じように、特に執筆過程でモチベーションを維持するのがとても難しかったです。これを克服した方法は、散歩や家族・友人との訪問、仕事のためにレクリエーションをスケジュールに組み込むことでした。このバランスは、私が必要とする長期的な集中を維持するために必要でした。また、取り組んでいる活動や意図・成果、そして自分の進捗や時間の振り返りも記録しました。この時間と活動の記録は、リモートや孤立して作業しながらも集中力とモチベーション、タスクに集中し続けるのに不可欠でした。
最後に、この分野の研究者志望者に伝えたいメッセージは何ですか?
マリア・トレダウェイ博士:言語テストが航空業界に与える影響は非常に広範囲であり、この分野の言語検査が効果的で最新であり、専門的な基準に基づいて開発され、テストスコアの推論を裏付ける検証証拠がもたらされることを保証するために、さらなる研究の余地が大きいと思います。ですから、調査をしている方やこの課題を感じている方々は、言語テストが航空業界にとって安全性を確保し、コミュニケーションを改善し、結果として状況認識やコックピット内の意思決定を向上させる上で極めて重要であることを忘れないでください。続けて、取り組んでいることが大切だと知ってください!