d. Cõu trắc nghiệm điền khuyết (Completion items)
1.5.5. Phần mềm Vitesta
- Vitesta là chương trỡnh phõn tớch đỏnh giỏ cõu trắc nghiệm, soạn đề thi, chấm thi trắc nghiệm… được xõy dựng dựa trờn Lý thuyết đỏp ứng cõu hỏi IRT hiện đại.
- Vitesta ỏp dụng giải thuật tối ưu để ước lượng cỏc tham số cõu hỏi và năng lực của thớ sinh. So với một số phần mềm đó được sử dụng ở Việt Nam như QUEST hay BILOG-MG3, Vitesta cho phộp ước lượng kết quả đạt độ chớnh xỏc tương đương nhưng thực hiện nhanh chúng hơn, dễ sử dụng và cung cấp nhiều tiện ớch hơn.
- Vitesta cung cấp nhiều bỏo cỏo dưới dạng văn bản và đồ thị giỳp cho người sử dụng cú thể hỡnh dung trực quan về cõu hỏi, đề trắc nghiệm, năng lực của thớ sinh và quan hệ giữa cỏc yếu tố đú.
* Cỏc ứng dụng chớnh
- Tớnh cỏc tham số đặc trưng và đỏnh giỏ chất lượng của cõu, đề trắc nghiệm. - Ước lượng năng lực của thớ sinh.
- Xõy dựng ngõn hàng cõu trắc nghiệm. - Thiết kế đề trắc nghiệm.
- Biến điểm trắc nghiệm thụ thành điểm thực theo cỏc thang điểm tựy chọn.
* Cỏc tớnh năng cơ bản của phần mềm
a. Định cỡ đề trắc nghiệm theo cỏc mụ hỡnh IRT với 1, 2 và 3 tham số
Bằng một thuật toỏn ước lượng cú hiệu quả cao, từ số liệu ứng đỏp của một mẫu thớ sinh đối với một đề trắc nghiệm, phần mềm cho phộp ước lượng nhanh chúng cỏc tham số a,b,c của cõu trắc nghiệm và năng lực θ của thớ sinh theo lý thuyết IRT. Người sử dụng cú thể tựy ý lựa chọn mụ hỡnh 1, 2 hoặc 3 tham số, và thu được mau lẹ kết quả tương ứng với từng mụ hỡnh. Ngoài ra phần mềm cũn tớnh toỏn cỏc hàm thụng tin, và cung cấp tường minh cỏc đồ thị của đường cong đặc trưng và hàm thụng tin của từng cõu trắc nghiệm.
Hỡnh 1.2. Đường cong đặc trưng cõu hỏi và hàm thụng tin
b. Cung cấp cỏc số liệu thống kờ theo lý thuyết trắc nghiệm cổ điển
Trong quỏ trỡnh ước lượng tham số cõu hỏi theo IRT, phần mềm cũng tớnh cỏc tham số độ khú, độ phõn biệt theo lý thuyết trắc nghiệm cổ điển, và cung cấp dưới dạng bảng đối với từng cõu hỏi của đề trắc nghiệm để người sử dụng cú thể đỏnh giỏ trực quan đặc điểm và chất lượng của từng cõu hỏi. Phần mềm cũng tự động chỉ ra cỏc cõu cú độ phõn biệt õm, cú độ khú quỏ cao và quỏ thấp. Cỏc thụng tin này là rất cần thiết để lựa chọn cỏc cõu hỏi thớch hợp nhằm thiết kế cỏc đề trắc nghiệm cú chất lượng cao.
c. Cung cấp cỏc tham số tổng hợp của đề trắc nghiệm
Hàm thụng tin của đề trắc nghiệm và đường cong đặc trưng đề trắc nghiệm (đường cong điểm thực) là hai đại lượng tổng hợp quan trọng để đỏnh giỏ một đề trắc nghiệm. Phần mềm tớnh toỏn và cung cấp tường minh cỏc đồ thị biểu diễn cỏc đại lượng đú. Đõy là hỗ trợ rất quan trọng cho việc đỏnh giỏ và thiết kế cỏc đề trắc nghiệm.
Hỡnh 1.5. Đường cong điểm thực của đề trắc nghiệm
d. Cung cấp thụng tin về tương quan giữa đề trắc nghiệm và mẫu thớ sinh
Phần mềm cung cấp biểu đồ so sỏnh phõn bố năng lực của thớ sinh trong mẫu thớ sinh với phõn bố độ khú trong đề trắc nghiệm. Đõy là cụng cụ cung cấp một cảm nhận trực quan về độ khú của đề trắc nghiệm so với mẫu thớ sinh cũng như phõn bố năng lực của cỏc thớ sinh trong mẫu.
Hỡnh 1.6. Tương quan giữa đề trắc nghiệm và mẫu thớ sinh
Để từng thớ sinh biết rừ bản thõn đó làm cỏc cõu hỏi trong đề trắc nghiệm như thế nào phần mềm cung cấp cho từng thớ sinh sơ đố bài làm của thớ sinh. Sơ đồ cho biết thớ sinh đó làm đỳng/sai cỏc cõu trắc nghiệm khú/dễ nào của đề trắc nghiệm.
Hỡnh 1.7. Sơ đồ bài làm của thớ sinh
f. Biến đổi điểm thụ thành điểm thực theo thang điểm tựy chọn
Theo lý thuyết trắc nghiệm, điểm thụ (tớnh theo số cõu đỳng/sai trong đề trắc nghiệm) chưa phải là kết quả đo lường năng lực của thớ sinh vỡ điểm được quy định ban đầu cho từng cõu trắc nghiệm là tương đối tựy tiện. Cỏch biến đổi điểm thụ hợp lớ nhất là dựa phộp chuyển đổi từ giỏ trị năng lực của thớ sinh ước lượng được thành điểm thực tớnh theo một thang điểm tựy chọn (trờn 10, trờn 20, trờn 100 v..v.)
g. So bằng cỏc đề trắc nghiệm
Khi dựng cỏc đề trắc nghiệm khỏc nhau để đo lường năng lực của thớ sinh, muốn biểu diễn cỏc kết quả trờn cựng một thang năng lực phải so bằng (equating) cỏc đề trắc nghiệm. Phần mềm cú tớnh năng giỳp thực hiện việc so bằng đú, chẳng hạn cố định cỏc thuộc tớnh của một số cõu hỏi được "neo" từ hai đề trắc nghiệm trong quỏ trỡnh ước lượng.