多数の欠測値を含む相互評価データにおける評価者の評価特性補正方法(<特集>学習オブジェクト・学習データの活用と集約)

学習者間の相互評価で公平なフィードバックを行うために,評価者が実際につけた評価値を,個々の評価者の評価特性を考慮して補正する方法を提案する.相互評価では,通常,全ての学習者が他の全ての学習者と相互に評価し合うことは困難であり,非常に欠測値の多いデータを扱うことになる.提案する方法では,項目応答理論のメタファを用いた評価モデルにより各評価者の評価特性を推定し,平均的な評価特性の評価者による評価値との差を用いて,評価値の補正を行う.提案した方法を実データに適用して,補正を行うことにより妥当な評価値に近づくことを確認した.さらに,実際の授業において,5回にわたって相互評価を実施し,評価結果を評価者に...

Full description

Saved in:
Bibliographic Details
Published in日本教育工学会論文誌 Vol. 31; no. 3; pp. 373 - 381
Main Authors 加藤, 浩, 藤原, 康宏, 大西, 仁
Format Journal Article
LanguageJapanese
Published 日本教育工学会 20.12.2007
Subjects
教育データ
教育評価
相互評価
補正
評価特性
Online AccessGet full text
ISSN1349-8290
2189-6453
DOI10.15077/jjet.KJ00004964301

Cover

Abstract 学習者間の相互評価で公平なフィードバックを行うために,評価者が実際につけた評価値を,個々の評価者の評価特性を考慮して補正する方法を提案する.相互評価では,通常,全ての学習者が他の全ての学習者と相互に評価し合うことは困難であり,非常に欠測値の多いデータを扱うことになる.提案する方法では,項目応答理論のメタファを用いた評価モデルにより各評価者の評価特性を推定し,平均的な評価特性の評価者による評価値との差を用いて,評価値の補正を行う.提案した方法を実データに適用して,補正を行うことにより妥当な評価値に近づくことを確認した.さらに,実際の授業において,5回にわたって相互評価を実施し,評価結果を評価者にフィードバックしたところ,補正値をフィードバックされた評価者は評価能力が向上したが,補正前の評価値のみをフィードバックされた評価者は評価能力が向上しなかった.これらの結果から,提案した補正方法は,公平な評価,学習者の評価能力の向上に有効であることが示された.
AbstractList 学習者間の相互評価で公平なフィードバックを行うために,評価者が実際につけた評価値を,個々の評価者の評価特性を考慮して補正する方法を提案する.相互評価では,通常,全ての学習者が他の全ての学習者と相互に評価し合うことは困難であり,非常に欠測値の多いデータを扱うことになる.提案する方法では,項目応答理論のメタファを用いた評価モデルにより各評価者の評価特性を推定し,平均的な評価特性の評価者による評価値との差を用いて,評価値の補正を行う.提案した方法を実データに適用して,補正を行うことにより妥当な評価値に近づくことを確認した.さらに,実際の授業において,5回にわたって相互評価を実施し,評価結果を評価者にフィードバックしたところ,補正値をフィードバックされた評価者は評価能力が向上したが,補正前の評価値のみをフィードバックされた評価者は評価能力が向上しなかった.これらの結果から,提案した補正方法は,公平な評価,学習者の評価能力の向上に有効であることが示された.
Author 藤原, 康宏
加藤, 浩
大西, 仁
Author_xml – sequence: 1
  fullname: 加藤, 浩
  organization: メディア教育開発センター:総合研究大学院大学文化科学研究科
– sequence: 1
  fullname: 藤原, 康宏
  organization: 岩手県立大学ソフトウェア情報学部:総合研究大学院大学文化科学研究科
– sequence: 1
  fullname: 大西, 仁
  organization: メディア教育開発センター:総合研究大学院大学文化科学研究科
BookMark eNpVUMtOwlAQvTGYiMgX-AO6qLadPhNjYoiKSuJG182ltkrjK8DGHW19u1EiLMSFRoMPEE1kAWL0Y0Za_AtrMBpnMTOZc85M5vST0PrGukHIIMeOcCIry6OWZWRH5mbZIARVEoDlekiY5xSVkQQRQiTMgaAyCq-yfSSayaSSAVEFSWWlMCm3r8-8whPaNa964TWq7dw1Ovn2cQWdnF9qfLzkO3eFj7dLdPfQfUXnHe0K2odon6Bz1IU6uZ1A3u39g6aXu-lcnXsPV16x6T0XhsaC2Wdpd7z9UPbf8-jco1tEp4HODTqP6O6j2_qB_k7UvHrLP71F-zZQ-vXt4QHSa9LVjBH9qRGyODW5EIszifnpmdhEgrF4UeYYoKAYSxJleVCXFF0EPmmYIAafmqooUDCTOqsEoEDNJHCgKAABTGVdkUVDMmWIkHh3r5XJ0mVD20yn1mh6S6PpbEpfNbRvqzXgNPhO_yz_pegrNK1ZFL4AhDq2_A
ContentType Journal Article
Copyright 2007 日本教育工学会
Copyright_xml – notice: 2007 日本教育工学会
DOI 10.15077/jjet.KJ00004964301
DatabaseTitleList
DeliveryMethod fulltext_linktorsrc
EISSN 2189-6453
EndPage 381
ExternalDocumentID article_jjet_31_3_31_KJ00004964301_article_char_ja
GroupedDBID ALMA_UNASSIGNED_HOLDINGS
JSF
KQ8
RJT
ID FETCH-LOGICAL-j2571-3a38ed6a0239d8c532bef35906f954a3fbc080234afb3138833f35a7c875e6f73
ISSN 1349-8290
IngestDate Wed Sep 03 06:30:30 EDT 2025
IsDoiOpenAccess true
IsOpenAccess true
IsPeerReviewed false
IsScholarly true
Issue 3
Language Japanese
LinkModel OpenURL
MergedId FETCHMERGED-LOGICAL-j2571-3a38ed6a0239d8c532bef35906f954a3fbc080234afb3138833f35a7c875e6f73
OpenAccessLink https://www.jstage.jst.go.jp/article/jjet/31/3/31_KJ00004964301/_article/-char/ja
PageCount 9
ParticipantIDs jstage_primary_article_jjet_31_3_31_KJ00004964301_article_char_ja
PublicationCentury 2000
PublicationDate 2007-12-20
PublicationDateYYYYMMDD 2007-12-20
PublicationDate_xml – month: 12
  year: 2007
  text: 2007-12-20
  day: 20
PublicationDecade 2000
PublicationTitle 日本教育工学会論文誌
PublicationTitleAlternate 日本教育工学会論文誌
PublicationYear 2007
Publisher 日本教育工学会
Publisher_xml – name: 日本教育工学会
References 5) MARQUARDT D. W. An algorithm for least-aquares estimation of nonlinear parameters. J. Soc. Indust. Appl. Math.. (1963) vol.vol.11, p.431-441. doi:10.1137/0111030
7) 藤原, 康宏. ほか. 相互評価のための課題提出評価支援システムの開発(遠隔教育/一般). 電子情報通信学会技術研究報告. ET, 教育工学. 電子情報通信学会. (2006) vol.105, no.632, p.35-40.
3) SAMEJIMA F. Estimation of latent ability using a response pattern of graded score. Psychometrika Monograph. (1969) vol.17, p.1-100.
10) WATANABE Hiroshi. el al. An Analysis of Essay Examination Data. Bulletin of the Faculty of Education, University of Tokyo. 東京大学教育学部. (1989) vol.28, p.143-164. http://hdl.handle.net/2261/563
9) 植野 真臣. ほか. ピア・アセスメントにおける項目応答理論(先進的なe-Learning技術/一般). 電子情報通信学会技術研究報告. ET, 教育工学. 電子情報通信学会. (2006) vol.106, no.35, p.7-12.
1) 東洋. 現代教育評価事典. 金子書房. (1988
2) PRESS H. W. Numerical recipies in C. Cambridge University Press. (1988
8) 植野 真臣. 先端的e-Learningの理論と実践(展望). 教育心理学年報. 日本教育心理学会. (2005) vol.44, p.126-137.
6) 藤原, 康宏. ほか. 学習コミュニティメンバーによる相互評価のための評価者選択方法(collaborationとagent技術/一般). 電子情報通信学会技術研究報告. ET, 教育工学. 電子情報通信学会. (2005) vol.104, no.703, p.97-100.
4) 芝祐順. 項目反応理論 基礎と応用. 東京大学出版会. (1991
References_xml – reference: 9) 植野 真臣. ほか. ピア・アセスメントにおける項目応答理論(先進的なe-Learning技術/一般). 電子情報通信学会技術研究報告. ET, 教育工学. 電子情報通信学会. (2006) vol.106, no.35, p.7-12.
– reference: 6) 藤原, 康宏. ほか. 学習コミュニティメンバーによる相互評価のための評価者選択方法(collaborationとagent技術/一般). 電子情報通信学会技術研究報告. ET, 教育工学. 電子情報通信学会. (2005) vol.104, no.703, p.97-100.
– reference: 5) MARQUARDT D. W. An algorithm for least-aquares estimation of nonlinear parameters. J. Soc. Indust. Appl. Math.. (1963) vol.vol.11, p.431-441. doi:10.1137/0111030
– reference: 8) 植野 真臣. 先端的e-Learningの理論と実践(展望). 教育心理学年報. 日本教育心理学会. (2005) vol.44, p.126-137.
– reference: 7) 藤原, 康宏. ほか. 相互評価のための課題提出評価支援システムの開発(遠隔教育/一般). 電子情報通信学会技術研究報告. ET, 教育工学. 電子情報通信学会. (2006) vol.105, no.632, p.35-40.
– reference: 1) 東洋. 現代教育評価事典. 金子書房. (1988)
– reference: 2) PRESS H. W. Numerical recipies in C. Cambridge University Press. (1988)
– reference: 10) WATANABE Hiroshi. el al. An Analysis of Essay Examination Data. Bulletin of the Faculty of Education, University of Tokyo. 東京大学教育学部. (1989) vol.28, p.143-164. http://hdl.handle.net/2261/563
– reference: 3) SAMEJIMA F. Estimation of latent ability using a response pattern of graded score. Psychometrika Monograph. (1969) vol.17, p.1-100.
– reference: 4) 芝祐順. 項目反応理論 基礎と応用. 東京大学出版会. (1991)
SSID ssib000936906
ssib044754475
ssj0003306451
ssib036784967
ssib023160644
Score 1.7220299
Snippet ...
SourceID jstage
SourceType Publisher
StartPage 373
SubjectTerms 教育データ
教育評価
相互評価
補正
評価特性
Title 多数の欠測値を含む相互評価データにおける評価者の評価特性補正方法(<特集>学習オブジェクト・学習データの活用と集約)
URI https://www.jstage.jst.go.jp/article/jjet/31/3/31_KJ00004964301/_article/-char/ja
Volume 31
hasFullText 1
inHoldings 1
isFullTextHit
isPrint
ispartofPNX 日本教育工学会論文誌, 2007/12/20, Vol.31(3), pp.373-381
link http://utb.summon.serialssolutions.com/2.0.0/link/0/eLvHCXMwrR1NaxNBdCn14kUUFb_pwQE9pCaZ_ZgBEXbjhlKppxZ6C7vpLphDFUkvHiTZ-O1Fi-3BelBa2mo_FOyhtWJ_g79hmk39F743O5uktIpVIVkeb968eR8z2fcm86FpF3nZ5JB06Rnu6zyjBxzGnA-BXOBzwwvLOgsN3Ds8dNMcGNEHR43Rnt7vXauWJqp-f_nevvtK_sargAO_4i7ZA3i2zRQQAIN_4Qkehucf-Zi4BrF1wm3imoQbxMkSl0JsSGwXMXaB2FkEHIYwELMs0iNNnvA8YjhgHIWBUtci3EF6VyeOLWmgLkfmiHGJnZPE8LEU4BRUdaeYtu4ogNkK4Lm0CWc_hgybZkaX8HtpLMI4cTiqg1pYkoYSXpCaXkcYjWAqGodi9TwjtNBVl6N2zCTUlaaDWiaWguSoqZTQtpVewErpxdIiKwWKqRFYagTnFwx_byjpJkeX1cHyOrFZWsQ60iJDCPn1dNamknof9LWIbUigIF0suwHn0qTQkHSxk9C0xdNREuwzDD2Fakq7scSkNmHtiXPZZWzZiZhsSscRKWUGbrxDlpYivUt4MSEzsAtB69i0S1ixmy0QKx8aaA9JL-2QXK3TnoiycFFPPtv-6fhHpbvewRR-NfD__SREkTgIRHnG1JNzpdMXtwofbnXP68i3ME1ux1EBHU0E3xMrQCaEyxUqlaDaf2MwSZYhPldza7sPYVdDvITEJZorUXzsqlRKSXC3ZKkCKduhvGXJlSND993uCUSz64IFyK5MSArar0QKsSMwbGcEeBwnftvTxhRnDIxkGkmZSZ2lhupc2asMRNYVyDPTNaoybB4-qh1R-W6fnYh9TOupeMe1-ebc63jqk6ivxstv4_XlZm1ORJPNF0siqrVm1re_TO68n9r-9k40HovGVxFtifqSqD8T9Zciep4U7dQeQvUEbj3diGsLO7Nv4pXZeHoj_jx16Srgfsw8utZcmW9tTYrog2hMi2hdRAsi-igaT0RjUxV1mliN1zZbrxZFfRFqttYeXD6hjRTd4cJARl0Yk6lA5JHLUI-yYMz0cMP-GCsbNO8HITXA3iE3dI-GPt6rkKe6F_o0R_GedSj2rDKzjMAMLXpS6x2_PR6c0vrCAKKZkHumT6lu0sD382aY5SwsUwtddFqzE7OW7iSnApUO3kXO_AceZ7XDnbF4Tuut3p0IzkOaVPUvyI73EzHFNi8
linkProvider ISSN International Centre
openUrl ctx_ver=Z39.88-2004&ctx_enc=info%3Aofi%2Fenc%3AUTF-8&rfr_id=info%3Asid%2Fsummon.serialssolutions.com&rft_val_fmt=info%3Aofi%2Ffmt%3Akev%3Amtx%3Ajournal&rft.genre=article&rft.atitle=%E5%A4%9A%E6%95%B0%E3%81%AE%E6%AC%A0%E6%B8%AC%E5%80%A4%E3%82%92%E5%90%AB%E3%82%80%E7%9B%B8%E4%BA%92%E8%A9%95%E4%BE%A1%E3%83%87%E3%83%BC%E3%82%BF%E3%81%AB%E3%81%8A%E3%81%91%E3%82%8B%E8%A9%95%E4%BE%A1%E8%80%85%E3%81%AE%E8%A9%95%E4%BE%A1%E7%89%B9%E6%80%A7%E8%A3%9C%E6%AD%A3%E6%96%B9%E6%B3%95%28%3C%E7%89%B9%E9%9B%86%3E%E5%AD%A6%E7%BF%92%E3%82%AA%E3%83%96%E3%82%B8%E3%82%A7%E3%82%AF%E3%83%88%E3%83%BB%E5%AD%A6%E7%BF%92%E3%83%87%E3%83%BC%E3%82%BF%E3%81%AE%E6%B4%BB%E7%94%A8%E3%81%A8%E9%9B%86%E7%B4%84%29&rft.jtitle=%E6%97%A5%E6%9C%AC%E6%95%99%E8%82%B2%E5%B7%A5%E5%AD%A6%E4%BC%9A%E8%AB%96%E6%96%87%E8%AA%8C&rft.au=%E5%8A%A0%E8%97%A4%2C+%E6%B5%A9&rft.au=%E8%97%A4%E5%8E%9F%2C+%E5%BA%B7%E5%AE%8F&rft.au=%E5%A4%A7%E8%A5%BF%2C+%E4%BB%81&rft.date=2007-12-20&rft.pub=%E6%97%A5%E6%9C%AC%E6%95%99%E8%82%B2%E5%B7%A5%E5%AD%A6%E4%BC%9A&rft.issn=1349-8290&rft.eissn=2189-6453&rft.volume=31&rft.issue=3&rft.spage=373&rft.epage=381&rft_id=info:doi/10.15077%2Fjjet.KJ00004964301&rft.externalDocID=article_jjet_31_3_31_KJ00004964301_article_char_ja
thumbnail_l http://covers-cdn.summon.serialssolutions.com/index.aspx?isbn=/lc.gif&issn=1349-8290&client=summon
thumbnail_m http://covers-cdn.summon.serialssolutions.com/index.aspx?isbn=/mc.gif&issn=1349-8290&client=summon
thumbnail_s http://covers-cdn.summon.serialssolutions.com/index.aspx?isbn=/sc.gif&issn=1349-8290&client=summon