抄録
Offer Organization: Japan Society for the Promotion of Science, System Name: Grants-in-Aid for Scientific Research Grant-in-Aid for Scientific Research (S), Category: Grant-in-Aid for Scientific Research (S), Fund Type: -, Overall Grant Amount: - (direct: 123900000, indirect: 37170000)
本研究は,近年ニーズが高まっている筆記式試験や実技試験などのパフォーマンステストを含んで,高精度の測定誤差が持続するeテスティングプラットフォームを開発し,実運用によりその有効性を示すことを目指している.令和2年度は,提案プラットフォームを構成する以下の基礎技術について,令和元年度に引き続き研究を進めた.1)最大クリーク・アルゴリズムと整数計画法を用いて,テスト生成数をより向上させるアルゴリズムの開発,2)項目露出を一様とする等質テスト自動構成アルゴリズムの開発,3)項目露出を制御する等質適応型テストの開発,4)異質評価者の同定と継続的なトレーニング手法の開発,5)自然言語処理を用いた筆記試験における自動採点手法の開発.1)と2)については実装と評価実験が完了し,研究成果は電子情報通信学会に掲載された.3)についても順調に開発が進行しており,その成果は複数の国内学会で発表を行ない,Advances in Artificial Intelligenceに論文が掲載された.4)については,異質評価者の特性を表現できる新たな項目反応モデルを開発し,関連する成果が国際論文誌のBehaviormetrikaとBehavior Research Methods,および電子情報通信学会論文誌に掲載された.5)については,深層学習モデルと項目反応理論を組み込んだ新たな方法論を提案し,教育分野における人工知能活用に関する主要国際会議であるArtificial Intelligence in Educationに2件,自然言語処理分野の主要国際会議の一つであるInternational Conference on Computational Linguisticsに1件の論文が採択された.
また,本研究テーマの主要課題の一つである「パフォーマンステストの継続運用を想定した運用デザインの設計とその実施支援システムの開発」に関しては,東京医科歯科大学での実証実験を想定して令和元年度に構築したシステムについて予備実験を進めた.