Sử dụng phần mềm ConQuest đánh giá chất lượng đề thi trắc nghiệm khách quan theo mô hình IRT hai tham số

Bài viết trình bày kết quả ứng dụng mô hình IRT hai tham số vào việc phân tích, đánh giá chất lượng câu hỏi trong đề thi trắc nghiệm khách quan thông qua việc sử dụng phần mềm ConQuest. Dữ liệu được sử dụng trong bài viết này là kết quả thi học phần Tiếng Anh 1 của 798 sinh viên trong kỳ thi kết thúc học phần tại Trường Đại học Đồng Tháp. Kết quả nghiên cứu giúp giảng viên biên soạn đề thi phát hiện được những câu hỏi có chất lượng tốt để đưa vào ngân hàng câu hỏi thi, đồng thời phát hiện những câu hỏi kém chất lượng để điều chỉnh hoặc loại bỏ.
Nội dung trích xuất từ tài liệu:
Sử dụng phần mềm ConQuest đánh giá chất lượng đề thi trắc nghiệm khách quan theo mô hình IRT hai tham sốSỬDỤNGPHẦNMỀMCONQUESTĐÁNHGIÁCHẤTLƯỢNGĐỀTHITRẮCNGHIỆM KHÁCHQUANTHEOMÔHÌNHIRTHAITHAMSỐ NguyễnVănCảnh PhòngĐảmbảochấtlượng,TrườngĐạihọcĐồngtháp NguyễnQuốcTuấn PhòngĐảmbảochấtlượng,TrườngĐạihọcĐồngTháp Tómtắt: Bàiviếttrìnhbàykếtquả ứngdụngmôhìnhIRThaithamsốvàoviệcphântích,đánhgiáchấtlượng câuhỏitrongđềthitrắcnghiệmkháchquanthôngquaviệcsửdụngphầnmềmConQuest.DữliệuđượcsửdụngtrongbàiviếtnàylàkếtquảthihọcphầnTiếngAnh1của798sinhviêntrongkỳthikếtthúchọcphầntạiTrườngĐạihọcĐồngTháp.Kếtquảnghiêncứugiúpgiảngviênbiênsoạnđềthipháthiệnđượcnhững câuhỏicóchấtlượngtốtđể đưavàongânhàngcâuhỏithi,đồngthờipháthiệnnhữngcâuhỏikémchất lượngđểđiềuchỉnhhoặcloạibỏ. Từkhóa:ConQuestSoftware,đềthi,IRT,haithamsố 1. Mởđầu Đánhgiákếtquả họctậplàmộtkhâuquantrọngkhôngth ể thiếutrongquátrìnhdạyhọc.Việcđánhgiákếtquảhọctậpmộtcáchchínhxác,kháchquansẽcungcấpchogiảngviênnhững thôngtinhữuíchđể đưaranhữngquyếtđịnhkịpthờinhằmnângcaohiệuquả hoạtđộnggiảng dạy[1].Hiệnnay,cùngvớicácphươngphápkiểmtrakhác,trắcnghiệmkháchquanđangđượcsửdụngkháphổbiếntrongcáctrườngđạihọc.Mặcdùcónhiềuưuđiểmtrongđánhgiákếtquảhọc tập,phươngphápnàyvẫncómộtsốhạnchế.Đểhoạtđộngkiểmtrađánhgiábằngphươngpháptrắcnghiệmkháchquanđạthiệuquả cao,cáctrườngcầnphảiquantâmđếnviệcxâydựngcácngânhàngcâuhỏithicóchấtlượngtốt,cókhảnăngđolườngchínhxácnănglựccủangườihọc.Vìvậy,việcđánhgiáchấtlượngđề thisẽ giúpngườibiênsoạnxácđịnhđượcnhữngcâuhỏicóchấtlượngtốtvàđưavàongânhàngcâuhỏithi,đồngthờinhậnrađượcnhữngcâuhỏikémchất lượngcầnphảiđiềuchỉnhhoặcloạibỏ. Việcđánhgiáchấtlượngđềthitrắcnghiệmkháchquanhiệnnaythườngđượcthựchiệndựatrênlýthuyếtứngđápcâuhỏi(ItemResponseTheory–IRT)bởinhững ưuđiểmcủanó,trongđó, nổibậtnhấtlàviệckhắcphụcđượcnhữnghạnchếcủalýthuyếtkhảothícổđiển(ClassicalTestTheory–CTT)trongviệc ướclượngcácthamsốcủacâuhỏivàđánhgiánănglựccủathísinh.ỞViệtNam,việcvậndụngIRTvàođolường,đánhgiáchấtlượngđềthitrắcnghiệmkháchquanđãđượcthựchiệnquamộtsố nghiêncứu,cụ thể như:nghiêncứucủanhómtácgiả NguyễnThịHồngMinhvàNguyễnĐứcThiện(2006)vớiviệcsử dụngphươngphápPROX[2],nghiêncứucủatácgiả LâmQuangThiệpvàcáccộngsự (2007)vớiviệcsử dụngphầnmềmViesta[3] ,cácnghiêncứucủacáctácgiả NguyễnHoàngBảoThanh(2008)[4],NguyễnThị NgọcXuân(2014)[5],BùiNgọcQuang(2017)[6]vớiviệcsửdụngcácphầnmềmQuest/ConQuest,nghiêncứucủaBùiAnhKiệtvàcộngsự(2018)vớiviệcsửdụngphầnmềmIATA [7],nghiêncứucủaĐoànHồngChươngvàcáccộngsự(2016)vớiviệcsửdụnggói“ltm”củaphầnmềmR [8],nghiêncứucủaLêAnhVũvàcáccộngsự (2017)vớiviệcsửdụngphươngpháplấymẫuGIBBS[9].Trongđó,cácnghiêncứuđượcthựchiệnthôngquaviệcsử dụngphầnmềmConQuest củamộtsố tácgiả chỉdừnglạivớiviệc ứngdụngmôhìnhRaschmộtthamsốlàđộkhóđể đánhgiá chấtlượngđề thi.Trongphạmvibàiviếtnày,chúngtôisửdụngphầnmềmConQuestvớimôhìnhIRThaithamsốlàđộkhóvàđộphânbiệtđểđánhgiáchấtlượngđềthitrắcnghiệmkháchquan. 2. Nộidungnghiêncứu 2.1. MôhìnhIRThaithamsố1 Lýthuyết Ứngđápcâuhỏi(IRT) đượcxâydựngdựatrênhaigiả thiết:(1)Sự ứngđápcủa mộtthísinhđốivớimộtcâuhỏicóthể đượctiênđoánbằngnănglựctiềm ẩncủathísinh;(2) Quanhệgiữasự Ngàynhậnbài:........Ngàysửabài:........Ngàynhậnđăng:........ Tácgiảliênhệ:NguyễnVănCảnhĐịachỉemail:nvcanh@dthu.edu.vnứngđápcâuhỏicủathísinhvànănglựctiềmẩnlàmcơsởchosựứngđápđócóthể môtảbằngmộthàmđặctrưngcâuhỏiđồngbiến[10].ĐiểmnổibậtcủaIRTlàcácthamsốđặctrưngcủacâu hỏiđộclậpvớimẫukhảosát[11]. Năm1960,GeorgRaschnhàtoánhọcngườiĐanMạchđãđưaramộtmôhìnhứngđápcâuhỏiđểmôtảmốitươngtácgiữamộtthísinhvớimộtcâuhỏicủađềthitrắcnghiệm.Đểxemxét mốiquanhệ giữathísinhvàcâuhỏitrongsự ứngđápcâuhỏi,đốivớimỗithísinhRaschchọn thamsốnănglực,đồngthờiđốivớimỗicâuhỏiôngchỉchọnmộtthamsốliênquanlàđộkhó.Vìchỉsửdụngmộtthamsốliênquanđếncâuhỏinênmôhìnhnàycònđượcgọilàmôhìnhứngđápcâuhỏimộtthamsố.Môhìnhnàyxuấtpháttừgiả ...