Nghiên cứu mô hình thi trắc nghiệm trong đào tạo hành chính

Trang 1

BO NOI VU

HOC VIEN HANH CHINH QUOC GIA VIỆN NGHIÊN CUU HÀNH CHÍNH

é tai nghiên cứu khoa học

Mã số: 2001 — 54 — 049

NGHIÊN CỨU MƠ HÌNH THỊ TRẮC NGHIỆM TRONG BAO TAO HANH CHÍNH

¢

Co quan chủ trì thực hiện đề tài:

Trang 2

LOI CAM ON

Tập thể tác giả xin trân thành cảm ơn:

- Giám đốc Học viện Hành chính Quốc gia;

- Tập thể Ban lãnh đạo Học viện Hành chính Quốc gia;

- Viện Nghiên cứu Hành chính;

- Khoa Phương pháp Sư phạm Hành chính: - Các đơn vị chức năng Hên quan;

đã quan tâm tạo điều kiện để chúng tôi hoàn thành tốt đề tài khoa học này

Tôi xin trân thành cảm ơn các đồng nghiệp về những đóng góp ý kiến ;

Trang 3

Lời cẩm ơn Lời nói đầu MỤC LỤC ¢ -Phần 1 Một số vấn đề chung I1 1.2 Vấn đề đánh giá kết quả học tập và giảng đạy Tình hình nghiên cứu và áp dụng Phân II Tổ chức thi trắc nghiệm và các vấn đẻ liên quan IL1 1.2 13 11.4 ILS Một số khái niệm

Đài toán thi trắc nghiệm

11.2.1 Thi trắc nghiệm tự luận ¢

H.2.2 Thị trắc nghiệm khách quan

11.2.3 So sánh thi trắc nghiệm khách quan và tự luận

Tổ chức thi trắc nghiệm

H.3.! Biên soạn câu hỏi trắc nghiệm

II3.2 Tổ chức thư viện câu hỏi trắc nghiệm

11.3.3 Chuẩn bị thi

11.3.4 Tổ chức thi

II3.S Chấm thi

Những vấn đề về môi trường công nghệ

Trang 4

Phần HI Xây dựng mô hình : ‘

IH.1 Mô hình đơn giản

HI.1.1 Biên soạn câu hỏi

IH.1.2 Xây dựng ngân hàng câu hỏi trắc nghiệm HIL1.3 Chuẩn bị cho thi

11.1.4 Kết luận

III.2 Mô hình tự động

III.2.1 Hệ thống máy tính nối mạng

11.2.2 Phân mềm thi trắc nghiệm IH.2.3 CSDL III2.4 Môi trường hệ điều hành ‘ II.3 Tổ chức thực hiện Kết luận

Phụ lục 1 Một số giao diện của một phần mềm thi trắc nghiệm

Phụ lục 2 Độ tỉn cậy của một câu hỏi trắc nghiệm va dé thi trac nghiệm Phụ lục 3 Một số câu hỏi thỉ trắc nghiệm ngoại ngữ

Trang 5

MOT SO KY HIEU VIKT TAT

CSDL: Cơ sở dữ liệu

TN: Thi trắc nghiệm

Trang 6

LOI M6 DAU

Xu thế đổi mới giáo đục đang được Đảng, Nhà nước và nhân ddan ta thực

sự quan tâm Bên cạnh việc để ra những chủ trương, đường lối và chiến lược

thực thi đài hạn, sự nghiệp đổi mới đòi hỏi phải bắt đầu từ những triển khai cụ thể, trong từng môi Irường đào tạo cụ thể, từng tố chức cụ thể

Môi trường đào tạo và bồi dưỡng công chức, vừa với tư cách là một môi

trường đào tạo như các môi trường đào tạo khác, mặt khác nó có những đặc trưng riêng của nó, có nội dung học tập riêng, có đối tượng học tập riêng Việc

đổi mới công tác đào tảo — bồi dưỡng cũng cân có những bước di riêng, phù hợp

Học viện Hành chính Quốc gia, với tư cách là một cơ quan đầu ngành, đã _

triển khai và triển khai thồnh công được nhiêu việc cụ thể, từ việc đổi mới nội

dụng giáo trình đến việc đẩy mạnh đổi mới phương pháp dạy học

Công tác đánh giá chất lượng dạy và học được thực hiện thường xuyên

qua các hoạt động tổng kết, kiểm tru giám sát đặc biệt là trong công tác tổ

chức thị và kiểm tra Tuy nhiên, tất cả mới chỉ dừng ở muíc thực hiện tốt theo

những cách truyền thống Phổ biến các bài th và kiếm tra vẫn chỉ được thực

hiện dưới dạng thị viết trên giấy, thậm chí còn mang nặng tính hình thức

Trong tổng thể các hoạt động đổi mới, việc tìm ra một mô hình đánh giá

khách quan, chính xác kết quả học tập của học viên và quá trình thực hiện công

tác giảng dạy của giảng viên để sau đó chuẩn hoá và tự động hoá nó là một việc làm cân thiết

Bằng phương pháp nghiên cứu lý thuyết, dê tài dã đề xuất 2 mô hình thi

trắc nghiệm bằng cách mô tả từng phân của chúng Đây là kết quả chính của đề

z +

Trang 7

tài Và điều có ý nghĩa hơn cả là, mô hình đen giản một mặt không quá khó triển

khai trong thục tiên, mặt khác nó như ‘mot bước chuyển hố sang mơ hình tự

động, chuẩn hoá trên máy tính Điều này cũng có nghĩa là cho phép giảm bới yêu tố tâm lý ngại đổi mới khi chuyển sáng tổ chức thí trắc nghiệm trên máy tính cho cả người tổ chức và học viên

Trang 8

PHAN I

Trang 9

r

L1 VẤN ĐỂ ĐÁNH GIÁ KET QUA HOC TAP VA GIẢNG DẠY

Chất lượng giáo dục va đào tạo phản ánh ban chất mọi hoạt động cấu thành được tổ chức, thực thi liên quan Các hoạt động cấu thành có nhiều, từ

khâu tổ chức quản lý ở tầm quốc gia đến các hoạt động cụ thể ở các đơn vị, cơ sở

đào tạo, từ việc xây dựng nội dung chương trình cho một đối tượng học đến việc thực hiện một hoạt động giảng dạy cụ thể Đánh giá kết quả học tập là một trong các hoạt động đó, nó tồn tại trong mọi môi trường giáo dục và đào tạo Đánh giá kết quả học tập và giảng dạy tốt góp phần đánh giá đúng chương trình giảng dạy đối với một cấp học, một đối tượng học đồng thời cho phép đánh giá đúng chất lượng học tập của người học

1 Sự nghiệp giáo dục đào tạo của nước ta đã trải qua nhiều giai đoạn lịch sử khác nhau, cho đến nay đã được tổng kết là có tính ưu việt và đạt nhiều thành tựu quan trọng, phục vụ đặc lực công cuộc xây dựng và bảo vệ đất nước Theo Nghị quyết số 02-NQ/HNTW Hội nghị lần thứ Hai Ban chấp hành Trung ương , Đảng khoá VI, về chất, sự nghiệp giáo dục đào tạo được đánh giá là “ có tiến bộ bước đầu trên một số mặt ” và về lượng, “đã ngăn chặn được sự giảm sút quy mô và có bước tăng trưởng khá.” Những thành tưu đó có được do có sự quan tâm thích đáng của Đảng và Nhà nước, đặc biệt là trong việc định hướng thích hợp sự nghiệp giáo dục đào tạo qua từng thời kỳ xây dựng và bảo vệ tổ quốc Tuy nhiên,

cũng theo đánh giá trong Nghị quyết, sự nghiệp giáo dục đào tạo chưa hoàn toàn

Trang 10

kém, bất cập,” “Cơ chế quản lý của ngành giáo đục - đào tạo chưa hợp lý," “chưa có những quyết định đủ mạnh về chính sách, cơ chế và biện pháp tổ chức

thực hiện, để thể hiện đây đủ quan điểm coi giáo dục - đào tạo là quốc sách hàng

đâu”, “chưa thường xuyên chỉ đạo và kiểm tra sâu sát việc thực hiện những mục tiêu, phương hướng, chủ trương về giáo dục - đào tạo” Theo ý kiến riêng của nhóm tác giả đề tài, các tồn tại được chỉ rõ trong Nghị quyết cân được hiểu một

cách cụ thể, đặc biệt là trong các công việc tổ chức thực hiện như lập kế hoạch, chương trình học tập, tổ chức thi tuyển, thị cử và đánh giá chất lượng học tập

2 Có thể nói, trong giai đoạn đẩy mạnh cơng nghiệp hố, hiện đại hoá đất

nước hiện nay, đổi mới công tác giáo dục đào tạo trong tổng thể sự nghiệp giáo

dục và đào tạo chung được Đảng và Nhà nước ta quan tâm hơn bao giờ hết Hoạt động đổi mới bao gồm các nội dung chính như chỉ ra trong mục tiêu chung của Nghị quyết Trung ương 2 là:

“1 Tăng cường các nguồn lực cho giáo dục - đào tạo;”

“2 Xây dựng đội ngũ giáo viên, tao động lực cho người dạy, người học;” “3 Tiếp tục đổi mới nội dung, phương pháp giáo dục - đào tạo và tăng cường cơ sở vật chất các trường học;”

“4 Đối mới công tác quản lý giáo dục.“ c

' :

Đặc biệt, Nghị quyết còn chỉ rõ: “quy định lại chức năng, nhiệm vụ của các cơ quan quản lý giáo dục - đào tạo theo hướng tập trung làm tốt chức năng quản lý nhà nước, xây dựng hoàn thiện các chính sách, cơ chế về giáo dục - đào tạo, kiểm soát chặt chẽ việc thực hiện chương trình và chất lượng Sớm ban hành Luật Giáo dục và các văn bản dưới luật (điều lệ các loại trường, trách nhiệm, quyền hạn của các cấp quản lý giáo dục - đào tạo, quy định hệ thống chuẩn kiến

thức ) hanh chóng cải tiến các hình thức thì và đánh giá.”

Trang 11

Với vai trò là khâu quan trọng ảnh hưởng tới chất lượng giáo dục và đào tạo, hoạt động đánh giá vừa là hoạt động liên quan đến nội dung chương trình đào tạo vừa là hoạt động liên quan đến guản lý giáo dục Nhìn từ góc độ thứ hai, chúng ta mới thấy hết được mức độ ảnh hưởng và quy mô ảnh hưởng của nó tới _ chất lượng giáo dục đào tạo nói chung và kết quả học tập của người học và của

môn học nói riêng, cho dù chỉ xét trong phạm vi nghiên cứu chính của để tài”

Hoạt động này được tổ chức thức hiện tốt sẽ góp phần đánh giá chính xác, khách

quan hoạt động học tập của học viên, từ đó có được cơ sở để điều chỉnh kịp thời

hoạt động giáo dục ở cả hai mức xây dựng chương trình đào tạo ngắn hạn và dài hạn, nhằm đáp ứng tốt hơn nhu cầu của người học ở giai đoạn tiếp theo

3 Môi trường đào tạo hành chính, một mặt nó vừa là môi trường đào tạo như các môi trường đào tạo khác, mặt khác, nó còn có những đặc điểm riêng

Theo định hướng phát triển Học viện Hành chính Quốc gia tới năm 2010, hệ thống các hệ đào tạo, bồi dưỡng công chức của học viện bao gồm:

- Hệ bồi dưỡng theo chức danh cán bộ, công chức nhà nước tiến hành dong bộ và thường xuyên các khoá bồi dưỡng kiến thức quản lý nhà nước và kỹ năng hoạt động quản lý cho 6 loại đối tượng sau:

© Cán bộ, công chức cao cấp: Bộ, Thứ trưởng, Chánh, Phó Chủ

tịch Hội đồng nhân dân và Uỷ ban nhân dân cấp tỉnh và tương

đương Thời gian bồi dưỡng từ 1 đến 4 tuân, tuỳ theo chương

trình lựa chọn

Trang 12

dân cấp huyện Thời gian bồi dưỡng từ 8 tháng đến 12 tuần, tuỳ

theo chương trình được lựa chọn phù hợp với đối tượng học viên ©_ Chuyên viên, cán sự và nhân viên hành chính các loại, thời gian

từ 2 đến 8 tuần, tuỳ theo chươnỷ trình lựa chọn Cụ thể như sau:

"Học viện Hành chính Quốc gia thực hiện 2 chương trình bồi dưỡng: chuyên viên cao cấp và chuyên viên chính: " Các trường Chính trị địa phương và các trường quản lý của

- các bộ thực hiện 3 chương trình bồi đưỡng: chuyên viên,

cán sự và nhân viên

" Việc bồi dưỡng cán bộ, công chức lãnh đạo Cấp cơ sở (trưởng, phó phòng cấp huyện, quận, chủ tịch, phó chủ

tịch Hội đồng Nhân dan, Uy ban nhân dân cấp xã,

-phường) do các trường Chính trị địa phương đảm nhiệm Việc bồổi dưỡng hành chính chuyên ngành do các trường quản lý các bộ ngành đảm nhiệm

© Tổng Giám đốc, Phó Tổng Giám đốc, Giám đốc, Phó Giám đốc

các doanh nghiệp nhà nước

©_ Đội ngũ giáo viên giảng dạy về hành chính

Ngoài ra, theo nhiệm kỳ Hội đồng Nhân dân được bầu cử, Học viện Hành chính Quốc gia sẽ tổ chức các lớp bồi dưỡng Hội đồng Nhân dân các cấp tỉnh, thành phố; các trường Chỉnh trị địa phương thực hiện bồi dưỡng Hội đồng Nhân dân cấp huyện, xã Học viện còn có một chương

trình tập huấn ngắn ngày để học viên tự chọn nhằm giải quyết một vấn đề

cụ thể điễn ra trong công vụ hoặc rèn luyện kỹ năng quản lý

#

- Hệ dào tạo cấp văn bằng và học vị:

Đến năm 2010, cùng với việc hoàn thiện hệ thống bồi dưỡng theo chức

danh cán bộ, công chức nhà nước, Học viện Hành chính Quốc gia sẽ hoàn chỉnh

Trang 13

9

và tiếp tục tăng cường hệ đào tạo về hành chính để tạo ra một đội ngũ ngày càng đông cán bộ, công chức được đào tạo cơ bản và có kiến thức cao về khoa học hành chính phục vụ cho việc tăng cường nguồn nhân lực của nền hành chính

phát triển, hiện đại

©

+

Hệ đại học: cấp bằng cử nhân hành chính, 2 — 2,5 năm Đối tượng đào tạo là đội ngũ cán bộ công chức trẻ, đang hoạt động trong bộ máy nhà nước đã có một bằng đại học khác hoặc bằng tr ung cấp,

cao đẳng hành chính hệ chính quy >

'

Hệ đại học: cấp bằng cử nhân hành chính, 4 năm Đối tượng đào tạo là học sinh thi tuyển trong kỳ thi tuyển đại học của Quốc gia

Hệ sau đại học, gồm thạc sỹ và Tiến sỹ: gọi chung là Hệ đào tạo sau đại học Đây là bậc đào tạo ra những cán bộ, công chức có trình độ cao về khoa học hành chính để làm nhiệm vụ giảng dạy, nghiên cứu

cho các cơ sở đào tạo và nghiên cứu về Khoa học hành chính

- Về hình thức đào tạo, Học viện sẽ mở rộng từ hình thức đào tạo chính: quy tập trung hiện có sang các hình thức khác, bao gồm:

O

O° © oO

Đào tạo chính quy bán tập chung ! Đào tạo chính quy tập chung

Đào tạo tại chức Đào tạo từ xa

- Về chuyên ngành đào tạo, trên cơ sở chấn chỉnh, củng cố và ổn định việc

Trang 14

o Hanh chinh doanh nghiép va các đơn vị sự nghiệp

©_ Tài chính cơng

o Hanh chinh 46 thi

4

` q

o Hanh chinh tư pháp và các chuyên ngành khác thích hợp

Hệ thống đào tạo, bồi dưỡng cán bộ, công chức nhà nước được tổng hợp

trên sơ đồ sau: Hệ thống đào tạo, bồi dưỡng cán bộ, công chức hành chính nhà nước A X Bồi dưỡng theo chức danh cán bộ, công chức hành chính ` Đào tạo cán bộ, công chức hành chính | Ỳ

Cán Cần bộ, Chuyên Tổng Giảng Đại học Sau đại

bộ, công viên GD, phé vién hanh hoc

cong chức (chính, tổng giảng chính (thạc sĩ,

chức lãnh cao GB, day (theo tién si)

lanh dao cap) ŒĐ, phó hành các

Trang 15

Hệ |_ Đến Z000 2005 2010 Năm Hệ bồi dưỡng theo chức 8000 ; 10000 12000 danh CB-CC hành chính Hệ đào tạo theo cấp học và 2000 3000 4000 văn bằng Trong đó, Sau đại học 300 60D 800

Hoạt động đào tạo, bồi dưỡng công chức nói chung va theo định hướng

phát triển Học viện đến năm 2010 nói riêng cho thấy:

- Quy mô đào tạo rất lớn: Số lượng đối tượng học tập tại một thời điểm

theo yêu cầu thực tiễn nhiều, có thể chia làm hai loại chính: Đào rgo và Bồi

4

dưỡng

- Cho dù là đối tượng nào, chất lượng đào tạo đang là một đòi hỏi cấp bách

từ thực tiễn đổi mới của quốc gia Nguyên nhân chung ở đây là: đối tượng học tập là những người đã, đapg, sẽ phải có những kiến thức “đủ đáp ứng” yêu cầu :

công việc kiểu công vụ, những công việc dù đơn giản hay phức tạp đều có những

ánh hưởng nhất định đến cộng đồng, xã hội

- Trong mỗi loại đối tượng cũng gồm nhiều đối tượng riêng khác nhau:

Đào tạo thiên về cơ bản, Bồi dưỡng thiên về cập nhật và hướng thực tiễn

- Như một hệ quả nội dung chương trình cũng phải được đổi mới và luôn được đổi mới cho phù hợp, theo nghĩa chuẩn hoá và cập nhật

- Đồng thời, phương pháp cũng phải được đổi mới theo bối cảnh chung

của đổi mới giáo dục đào tạo và bối cảnh riêng của Học viện #

Trong bối cảnh như vậy, công tác đánh giá chất lượng đào tạo nói chung và đánh giá kết quả học tập nói riêng hiện nay chưa tương xứng với yêu cầu

đặt ra Cẩn thiết phải có một mô hình đánh giá kết quả học tập sao cho qua

đó có thể đánh giá đúng chất lượng học tập của người học theo một cách nhanh nhất, hiệu quả nhất, khách quan nhất đồng thời qua đó cho phép

+

Trang 16

đánh giá quá trình giảng dạy của giảng viên, bản thân nội dung chương trình

và một số vấn đề liên quán khác Trong số các phương pháp cho phép làm tốt công việc này, thi trắc nghiệm được đề cập đến nhiều hơn cả

1.2 TÌNH HÌNH NGHIÊN CỨU VÀ ÁP DUNG THI TRAC NGHIEM

1 Trên thế giới, phương pháp thị trắc nghiệm đã được dùng từ lâu và trong nhiều môi trường, phạm vi giáo dục đào tạo Khác nhau Nhiều kết quả nghiên cứu lý thuyết liên quan đến phương pháp thi này đã được công bố Một số kết quả giao thoa với các lĩnh vực khác như tâm lý, lý luận dạy học, toán học Một số nghiên cứu chuyên sâu về cách xây dựng các câu hỏi trắc nghiệm và các cơng thức tốn học cho phép đánh giá chất lượng câu hỏi và đề thi trắc nghiệm Cũng có nhiều kết quả liên quan đến việc chuẩn hoá các quy trình thi trắc nghiệm, đặc

biệt là các quy trình thi trên máy tính Các nghiên cứu triển khai phổ biến nhất

chủ yếu liên quan đến việc xây dựng các chương trình thi trắc nghiệm trên máy

tính Đi đầu trong số các nghiên cứu này là kết quả triển khai của các tổ chức chuyên tổ chức thi - kiểm tra cấp bằng ngoại ngữ, tin học và một số các ngành `

hẹp khác Các chương trình thi này hiện đã triển khai tốt trên phạm vi toàn cầu

qua mạng Intcrnet Ngoài ra, góp phần vào sự triển khai chung đó, phải kể đến sự ra đời của nhiều mô hình, chương trình trắc nghiệm trong nhiều lĩnh vực

không phải là lĩnh vực giáơ dục đào tạo như trò chơi, quản lý

Ở Việt Nam, gần đây đã có nhiều tấc giả để cập đến vấn đề thi trắc

nghiệm Một số tài liệu được biên dịch hoặc biên soạn từ các tài liệu của nước ngoài Một số khác đi sâu phân tích vai trò và ưu điểm của thi trắc nghiệm và

được đăng tải trên các báo chuyên ngành và đại chúng Trên thực tiễn, đã có

nhiều tổ chức đào tạo hoặc liên quan đào tạo triển khai ở các mức độ khác nhau

hình thức đánh giá kết quả học tập bằng thi trắc nghiệm Đi đầu là các tổ chức

nước ngoài hoặc liên doanh mở các dịch vụ thi cấp bằng ngoại ngữ như IELTS,

TOEFL, hoặc thi cấp chứng chỉ tin học của hãng phần mềm máy tính Microsoft

Trang 17

trên máy tính nối mạng Internet; kết quả làm bài của thí sinh được truyền và

chấm ở nước ngoài, nơi tổ chức mẹ đóng trụ sở Các mô hình này đảm bảo tính

khách quan của kết quả thi trong từng lĩnh vực chuyên sâu tương ứng Đối với các trường, đặc biệt là các trường đại học, cao đẳng trong nước, đã bắt đầu xuất

hiện nhiều trường áp dụng thi trac nghiệm Đa số mới chỉ ở mức tự phát Phổ

biến là hình thức thi trắc nghiệm trên giấy do các thày tự tổ chức, từ việc ra đề,

cho thi đến việc chấm thi Là thí trắc nghiệm, song các đề trắc nghiệm chưa được

thiết kế với sự đánh giá của hội đồng khoa học, của các cách đánh giá khoa học hiện có, và cũng vì vậy mà chưa cho phép đánh giá đúng kết quả học tập của học

viên Tỷ lệ câu hỏi trong một đề chưa được phân bổ thích hợp theo các mức độ

học tập khác nhau, các đối tượng học tập khác nhau và các phần nội dung học

khác nhau Chưa có nhiều các câu hỏi trắc nghiêm được đánh giá là “tốt”, đặc

biệt là với các môn khoa học xã hội Thi trắc nghiệm tự động mới chỉ có ở một

số không nhiều các trường đại học, trong mỗi trường mô hình cũng chỉ được áp

dung cho một số khoa, môn học nhất định Khoa học chính trị, xã hội được xem

là “khó” tổ chức thi trắc nghiệm

Trong hệ thống các tổ chức đào tạo công chức, bao gồm các học viện lớn như các Học viện Hành chính, Học viện Chính trị và các trường Chính trị tỉnh,

Bộ ngành, hình thức thi trắc nghiệm còn ft được đề cập đến Có chăng mới chỉ áp

dụng trong thi ngoại ngữ, và cũng chỉ là trên giấy Đây là một môi trường đào tạo rất đặc thù (xem I.1) Trước hết, dễ thấy là trong hệ thống đào tạo này, các môn học chủ yếu thuộc khoa học chính trị, xã hội Việc ra đề thi trắc nghiệm và

tổ chức thi trắc nghiệm không dễ Một đặc điểm khác là, đối tượng học tập đa

dạng theo nhiều nghĩa khác nhau: tuổi đời, trình độ nhận thức, trình độ chuyên

môn, kiến thức thực tế Về nội dung học tập, cũng có nhiều chương trình khác

nhau, tuỳ theo thời gian: từ vài tuần, vài tháng đến vài năm

Tại Học viện Hành chính Quốc gia, hình thức đánh giá kết quả học tập chủ yếu vẫn là thi viết trên giấy Miột số môn như ngoại ngữ, tin học trong quản

lý đã bắt đầu áp dụng hình thức thi trắc nghiệm Một số giáo viên cũng chủ động M

Trang 18

tố chức thi trắc nghiệm Cách tổ chức như sau: Giáo viên dạy trực tiếp ra đề,

trình qua các cấp lãnh đạo khoa, lãnh đạo Học viện ký và cho thi Tính khoa học

của để, giáo viên chịu trách nhiệm Việc tổ chức thi trắc nghiệm hoàn toàn phụ thuộc vào chủ quan của giáo viên, học kỳ này có thể thi trắc nghiệm, học kỳ sau

lai thi viet hoặc vấn đáp Cùng một môn, với chuyên viên chính thi thi trắc

nghiệm, với cử nhân hoặc các đối tượng khác lại không Dễ thấy, hình thức này có tính chất cục bộ, không thống nhất và khó đó thể chuẩn hoá khi tiếp cận mô

hình thi trắc nghiệm tự động

Tóm lại, có thể thấy rằng, hình thức thi trắc nghiệm chưa được nghiên cứu

triển khai và áp dụng nhiều trong các môi trường đào tạo, đặc biệt là trong hệ thống đào tạo công chức hành chính

Theo để cương đăng ký và được sự chấp thuận của Bộ Khoa học - công nghệ - môi trường trước đây - nay là Bộ Khoa học công nghệ, Học viện Hành chính Quốc gia, Viện Nghiên cứu Hành chính, đề tài đặt vấn đề nghiên cứu mô

hình thi trắc nghiệm trong môi trường đào tạo hành chính Tuy nhiên, vì nhiều lý

do khác nhau, các khảo sát, nghiên cứu, kết qua liên quan chủ yếu được dé cập theo hướng áp dụng tại Học viện hành chính Quốc gia Mặc dù vậy, với cách tiếp cận ở mức chung nhất và chuẩn hố, về mặt cơng nghệ các kết quả hoàn toàn có

thể triển khai trên phạm vi rộng, bao gồm cả các trường cấp vùng, tỉnh hoặc Ầ

ngành

Trang 19

PHAN I

Trang 20

ILI MỘT SỐ KHÁI NIỆM

Ở mức chung nhất, rắc nghiệm là một bhương pháp quan sát đối tượng với những chương trình đặt trước, với điều kiện không gây biến đổi bất cứ một thông số nào trên đối tượng Phương pháp trắc nghiệm là phương pháp phi thực nghiệm, trong đó người bị quan sát được yêu cầu thực hiện một số công việc mà

người quan sát quan tâm, gồm trắc nghiệm tổng hợp, trắc nghiệm phân tích Trắc

nghiệm là phương pháp đo lường khách quan những biểu hiện tâm' lý hoặt nhận thức của một người hoặc một nhóm người nào đó

Trắc nghiệm được sử dụng trong nhiều lĩnh vực nghiên cứu Trong nghiên cứu về giáo dục học, trắc nghiệm là phương pháp có hiệu quả cao để “đo lường” kết quả học tập của người học Phương pháp nay được đánh giá là phương pháp "đo lường” xác thực nhất việc lĩnh hội tri thức, kỹ năng, kỹ xảo của học viên

Đánh giá kết quả học tập của người học, sau đây được gọi chung là học

viên, như học sinh, sinh viện là một hoạt động bát buộc Hình thức đánh giá có:

thể có nhiều loại khác nhau, mỗi loại đều có ưu, nhược điểm riêng

Khác với một số phương pháp đánh giá kết quả học tập truyền thống như

thi - kiểm tra viết, thi - kiểm tra miệng , phương pháp thi trắc nghiệm là một

trong các phương pháp cho phép đánh giá khách quan kết quả học tập Tính khách quan được thể hiện ngay từ công đoạn đầu là công tác xáy dựng bộ để, qua các công đoạn tiếp theo là đọc để, và tổ chức thi, cho đến công đoạn cuối là

chấm bài Một bài thi trac nghiệm thường gồm nhiều câu, bao quất toàn bộ nội

Trang 21

điểm chấm và hoàn cảnh chấm có thể khác nhau Hay nói cách khác, thi tric

nghiệm cho phép đánh giá chính xác kết quả học tập của học viên

Thi chắc nghiệm ch© phép giảm thiểu, thậm chí nếu làm tốt sẽ cho phép

ngan chan, tinh trạng gian lận trong thi cử Do thời gian làm bài được lượng hoá chặt chẽ và chính xác theo mức độ lượng hoá kiến thức trong bài thi trắc nghiệm, học viên thường chỉ có vừa đủ thời gian làm bài; họ không có thời gian quay cóp hoặc cho học viên khác quay cóp chép bài, ngay cả trong trường hợp bài thi trắc nghiệm của các học viên khác nhau hoàn toàn giống nhau hoặc có nhiều câu giống nhau Hơn thế nữa, sự khác nhau của các bài thi trắc nghiệm hoàn toàn có thể được tạo ra nhờ đễ dàng áp dụng kỹ thuật chọn ngẫu nhiên với ngân hàng câu hỏi trắc nghiệm, đặc biệt là khi tổ chức thi trắc nghiệm theo mô hình tự động

mức cao với sự trợ giúp của máy tính và mạng máy tính

Thi trắc nghiệm giúp ngăn ngừa tình trạng học lệch, học tủ của học viên

Với số lượng lớn câu hỏi trắc nghiệm, một bài thi trắc nghiệm dễ dàng được thiết

kế để bao trùm phần lớn nội dung học tập, nhấn mạnh nội dung quan trọng, và yêu cầu cả ba mức học mô tả, giải thích và vận dụng hoặc một số trong các mức

đó của học viên Đặc biệt, thi trắc nghiệm, nếu, được thiết kế đúng đắn và tương

xứng với hình thức giảng dạy và học tập mới, được xem là phù hợp các học viên

bồi dưỡng, do họ có thể vận dụng được ngay các kiến thức hiểu ngay trên lớp và

các kiến thức thực tiễn của cá nhân họ vào làm bài thi Điều này, cho phép tránh được tình trạng học hình thức hiện nay của các đối tượng học viên bồi dưỡng

Thi trắc nghiệm cho phép chuẩn hố chương trình mơn học và phần nào

cho phép đánh giá ngược lại chất lượng giảng dạy của giảng viên Trên cơ sở chương trình môn học được thiết kế và chuẩn hoá, các để thi trắc nghiệm được soạn sẵn thành ngân hàng và chọn ngẫu nhiên Điều khiến giảng viên không thể

tự do, tuỳ tiện cắt xén nội dung giảng dạy Với cùng một dé, và với kết quả chấm thi là khách quan, có thể căn cứ vào kết quả chung của khoá học để nhận biết

quá trình giảng dạy của một giảng viên

Trang 22

Với tổ chức thi trắc nghiệm, khỡng cần nhiều người coi thi và đặc biệt là không nhất thiết cần người coi thi phải có chuyên môn hoặc là giáo viên

Thi trắc nghiệm có thể áp dụng cho mọi môn học khác nhau, tự nhiên

hoặc xã hội, lý thuyết hoặc thực hành Đặc biệt, khi triển khai với su tro gitip của

cong nghé tin hoc, thi trac nghiém dé dang được triển khai cùng với một chương

trình tự học; với mô hình này, học viên có thể vừa tự học, vừa tự đánh giá kết quả

học tập qua thi trắc nghiệm, và quyết định có chuyển sang nội dung học tiếp theo,

chương trình học tiếp theo hay không dựa trên kết quả đó 7

Cuối cùng, hình thức thi trắc nghiệm đễ dàng triển khai trên các phương tiện hiện đại và trên quy mô rộng lớn Điều này có thể thấy rõ qua kinh nghiệm

tổ chức của các nước phát triển; các kỳ thi ngoại ngữ, tin học chuẩn hố trên

phạm vi tồn thế giới

Các hình thức thi cử thực chất là các “thước đo” khác nhau được dùng để "định lượng” kết quả học tập của học viên và các vấn đề liên quan khác trong một môi trường giáo dục đào tạo Với cùng một kết quả, thước đo chuẩn sẽ giúp :

định lượng tốt kết quả đó Phương pháp thi trắc nghiệm thể hiện rõ ưu điểm vẻ

mặt này ¿

IL2 BAI TOAN THI TRAC NGHIEM

Thi trac nghiém được chia thành hai loại nhỏ khác nhau: /¿ trắc nghiệm khách quan và thị trắc nghiệm tự luận (còn gọi là trắc nghiệm luận đề) Có thé phân biệt chúng qua hình thức của câu hỏi trắc gghiệm và tính khách quan

11.2.1 Thi trac nghiém tự luận

Câu hỏi trắc nghiệm tự luận Trong một đề thi trắc nghiệm, câu hỏi trắc

Trang 23

,

phần đầu là phát biểu yêu cầu và phân thân là một không gian giấy trắng (có thể

có dòng kẻ hoặc không) được dùng để học viên viết

Chẳng hạn, một câu hỏi trắc nghiệm tự luận đơn giản có thể như sau:

¢

Phan dn { Nêu vắn tắt đặc điển cơ bản của hàng hoá Phần thân

Hoặc, một câu phức tạp hơn:

Dich vụ công chứng là một dịch vụ công

Chọn mội tfong hai khả năng dưới đây và giải thích ngắn gọn cho Phần đầu ¬ , lựa chọn đó A Đúng B Sai Phần thân

Để dễ dàng lượng hoá kiến thức của học viên khi chấm (đặc biệt, khi Lá chấm trên máy), có thể có ba cách tiếp cận sau đây đối với việc soạn câu hỏi trắc nghiệm tự luận:

- Cách ï: Cho sẵn một tập các đoạn tự luận, để nghị chọn I đoạn tự luận

mà theo đó học viên cho là “tốt nhất”;

- Cách 2: Cho sẵn một đoạn tự luận, troạg đó đã gạch bỏ một số cụm từ Khi làm bài thi để nghị học viên điển vào các cụm từ thích hợp vào chỗ trống Các cụm từ phải là các ý chính thể hiện nội hàm của đoạn luận đề và thường dài

Trang 24

- Cách 3: Đề nghị học viên viết một đoạn tự luận ngắn, Khi chấm, để được

điểm, đoạn luận phải thể hiện được một số ý chính nhất định theo chủ ý của người ra đề Cách này chỉ khả áp dụng khi thi trắc nghiệm trên giấy

Câu hỏi trắc nghiệm tự luận dễ biên soạr, song nếu không được biên soan tốt sẽ có độ tin cậy thấp và tính khách quan không cao trong việc đánh giá chất lượng học tập Để ý rằng, mặc dù được hạn chế tương ứng với khoảng trống giấy được phép viết, khối lượng kiến thức cần trình bày khá rộng và do đó khó lượng hoá được một cách chính f4c Do đó, nếu chủ đề tự luận quá rộng, đoạn từ luận yêu cầu học viên viết quá dài, chăng hạn trong trường hợp dưới đây, câu hỏi tự

luận sẽ không cho phép đánh giá và chấm bài một cách chính xác

Bàn luận về quyền tự do ngôn luận của một công dân trong thời Phần đầu * kỳ đổi mới Phần thân

Khi làm bài thỉ trắc nghiệm với câu hỏi tự luận, học viên được đề nghị viết

một đoạn diễn đạt quan điểm của mình, sao cho đủ ngắn gọn và súc tích tương ứng với một nội dung học tập cụ thể nào đó Lưu ý rằng, mặc đù học viên có thể viết tự do, nhưng hình thức này hoàn toàn phân biệt với hình thức thi viết cổ điển,

do nội dung được yêu cầu viết hoàn có thể lượng hoá được một cách rõ ràng và

cụ thể

Trang 25

Với các câu hỏi trắc nghiệm tự luận, việÈ chấm bài it nhiều bị ảnh hưởng

bởi quan điểm chủ quan của người chấm Tuy nhiên, nếu câu hỏi trắc nghiệm tự luận được thiết kế tốt, hoàn toàn có thể giảm thiểu được hạn chế này

Với mô hình thi trắc nghiệm trên máy tính, các câu hỏi trắc nghiệm tự luận không hỗ trợ việc chấm bài tự động Nó cần đượe thiết kế lại cho phù hợp, như đã nêu ở phần trên 7ý nhất, có thể thiết kế sẵn một số “đoạn tự luận” để học viên đọc và chọn một đoạn phù hợp quan điểm của cá nhân Thứ hai, thiết kế một đoạn tự luận, sau đó tạo ra một số chỗ trống tương ứng với một số ý thể hiện bởi các cụm từ hoặc câu trọn vẹn được nêu sẵn kèm với đoạn tự luận đó Học viên được yêu cầu chọn một tổ hợp lựa chọn nào đó trong các lựa chọn đi kèm

Hình thức này được áp dụng nhiều trong thi trắc nghiệm ngoại ngữ

Dưới đây là một số gợi ý cần lưu ý khi soạn câu hỏi trắc nghiệm tự luận: 1 Câu hỏi trắc nghiệm tự luận thường được dùng để trắc nghiệm khả năng

vận dụng kiến thức được học hoặc kiến thức thực tiễn trong việc giải quyết các

vấn đề có tính suy luận đồng thời trắc nghiệm khả nãng diễn đạt, khả năng viết

của học viên Nói cách khác, câu hỏi trắc nghiệm tự luận là câu hỏi có tính chất khó, tổng quát, cần được soạn kỹ mới có thể giúp đánh giá chính xác học viên

2 Câu hỏi trắc nghiệm tự luận nên được soạn theo các yêu cẩu cần nắm

được về nội dung của môn học, nhất là các mục Liêu quan trọng

3 Nên tránh dùng các cụm từ “anh (chị) nghĩ gì”, “theo ý kiến của anh

(chi)”, “anh (chi) biét gì về” khi soạn câu hỏi trắc nghiệm tự luận vì các cụm từ

này làm tăng tính bất định “khi đánh giá kết quả học tập; nó thường dẫn đến một tình trạng là học viên thấy lúng túng, thậm chí thấy khó, khi trả lời

4 Mặc dù là cho phép tự luận tự do, câu hỏi được soạn nên hướng tới một

câu trả lời có nội dung rõ ràng, lượng hoá được

5 Mỗi câu hỏi trắc nghiệm tự luận cần được ấn định càng chính xác càng

M

tốt thời gian cho học viên trả lời

Trang 26

¢

6 Chỉ sử dụng một số ít câu hỏi trắc nghiệm tự luận dạng ngắn trong một bài thi trắc nghiệm

7 Với mỗi câu hỏi trắc nghiệm tự luận, cần có một đáp án, trong đó chỉ rõ các ý chính một học viên phải đạt được, để làm cơ sở khách quan cho việc chấm

bài về sau ,

$

8 Cho biết trước số điểm tối đa kèm với mỗi câu hỏi

II.2.2 Thi trắc nghiệm khách quan

Có bốn loại câu hỏi thi trắc nghiệm khách quan: câu hỏi có nhiều khả

năng lựa chọn, câu hoi với hai khả năng trả lời hoặc đúng hoặc sai, câu hỏi điền vào chỗ trống và câu hỏi ghép đôi (làm phù hợp)

HI.2.2.I Câu hỏi trắc nghiệm có nhiều khả năng lựa chọn

Một câu trắc nghiệm có nhiều khả năng lựa chọn gồm hai phần: phần đâu, còn gọi là phản dẫn, thường là một phát biểu, một yêu cầu hoặc một câu hỏi nào đó và phần thân, thường gồm nhiều khả năng chọn lựa được sắp xếp theo một : trật tự nào đó, cho phép học viên chọn để trả lời cho yêu cầu ở phần đầu Số

lượng khả năng chọn lựa tuỳ thuộc từng câu hỏi cụ thể, ít nhất là 3, thông thường là 4 hoặc 5 Số lượng lựa chọn càng lớn, kết quả đánh giá càng tin cậy

Dưới đây là một số ví dụ về câu hỏi trắc nghiệm nhiều khả năng lựa chọn: Phẩn dân | Thao tác cơ bản của Word đối với ký tự là:

onde ta A kiểm tra lỗi chính tả B tốc ky

| C đánh dấu D tô màu

Trang 27

%

Phần dầu { According to the paggage, what can cause a stroke?

A Alot in the heart

B An increased flow of blood

‘

C A blocked artery to the brain

Phan than

D A sudden drop in the blood cholesterol level

Khi làm bài với câu trắc nghiệm loại này, học viên được yêu cầu chọn một khả năng được xem là thích hợp nhất với phần đầu của câu hỏi trong số các khả năng chọn được đưa ra

Một số lưu ý khi soạn câu hỏi trắc nghiệm nhiều khả năng lựa chọn:

1 Số lượng khả năng lựa chọn câu trả lời tỷ lệ nghịch với điểm số học viên

đạt được do đoán mò; nên 66 4 — 5 kha năng lựa chọn cho một câu hỏi

2 Câu hỏi trắc nghiệm nhiều khả năng lựa chọn thuộc loại khó biên soạn

Một câu hỏi tốt thuộc loại này yêu cầu có kinh nghiệm soạn vì phải tạo được một lựa chọn đúng nhất trong số các lựa chọn khác cũng có vẻ hợp lý, ít nhất là về ngoại diện khái niệm Tất nhiên, nội hàm khái niệm không thể là đúng nhất

+

3 Tránh tình trạng một trong các khả năng lựa chọn quá dễ nhận biết phù

hợp với phần đầu của câu hỏi trắc nghiệm Ví dụ trong câu trắc nghiệm sau

Phan đâu { Tỉnh xa nhất đốt với tính có thành phố Cần Thơ là:

A An Giarfg B Hậu Giang

C Đồng Tháp D Thừa Thiên Huế

E Tiền Giang

Phần thân

học viên đễ dàng nhận ra D là tốt nhất Nên thay Thừa Thiên Huế bởi Vĩnh Long

hoặc tên một tỉnh nào đó gần Long An hơn + 4 Phải chắc chắn chỉ có một câu trả lời đúng

5 Phần đầu phải rõ nghĩa, tranh gây tranh cãi Ví dụ, phần đầu sau đây

Trang 28

*

Nhà văn nào sau đây được xem như giỏi nhất trong văn chương Việt Nam?

nên được sửa thành: ‘

Nhà văn viết tiểu thuyết nào ở Việt Nam trong thế kỷ 20 được xem như nổi

tiếng nhất nhờ có nhiều tác phẩm hay?

6 Cần lưu ý sao cho văn phong, cách diễn đạt giữa phần đầu và phần thân của câu hỏi trắc nghiệm phù hợp với nhau Chẳng hạn, các mục lua chon D va E

trong câu trắc nghiệm +

Nếu một đường thẳng tạo thành một góc vuông với một đường

thẳng khác, đường thẳng ấy được gọi là:

A song song B thang hang

C thang géc D bằng

E kê

là không phù hợp về văn phong diễn đạt với phần đầu

7 Cần lưu ý khi sử dụng mục chọn có dạng “tất cả các mục chọn trên đây đều đúng” hoặc “không mục chọn nào trên đây đúng” Khi chưa nghĩ ra đủ các phương án trả lời, người soạn thường đưa vào các mục chọn kiểu nêu trên, chúng thường có đặc điểm là không “khớp” với phần đầu của câu hỏi

1I.2.2.2 Câu hỏi trắc nghiệm với hai lựa chọn «+

Có xem các câu trả lời dạng này là một trường hợp đặc biệt của dạng câu hỏi nêu ở mục trên, do đó cách biên soạn câu hỏi, cách làm bài thi và chấm thì

có nhiều điểm tương đồng Day là dạng câu hỏi đơn giản, dé soạn đối với giáo

viên và dễ đạt điểm đối với học viên vì xác suất đạt điểm là 50%

Các câu hỏi dạng này thường được dùng để đánh giá sức học mức trung

bình của các học viên Chúng thường chiếm khoảng 20% số lượng câu hỏi trong

Trang 29

¢

11.2.2.3 Cau hoi trắc nghiệm điền vào chỗ trống

Có thể chia các câu hỏi dạng này thành hai loại nhỏ:

a) loại thứ nhất có phần đầu và phần thân tách biệt nhau, chẳng hạn

Phan dầu { Bốn đặc điểm nổi bật của Thương mại điện tử là?

Phần thân

b) loại thứ hai có phần đầu và phần thân đan xen vào nhau, chẳng hạn Củ khoai thay cơm

Khoai trong đạ, + thom trong long

Trong câu hỏi trắc nghiệm điền vào chỗ trống thường gồm một số khoảng

trống (có thể để trắng hoặc dùng các dấu chấm mờ) đủ để điền một từ hoặc một cụm từ bởi học viên Các khoảng trống có thể tách biệt như trong dạng a) hoặc

đan xen với phần dau nhu frong dang b)

Khi làm bài, học viên được đề nghị điển vào các chỗ trống đã chỉ ra Số lượng từ hoặc cụm từ bằng số lượng chỗ trống cần điển Các từ hoặc cụm từ do học viên tự do nghĩ ra và cho là đúng

Khi chấm bài, người chấm căn cứ vào đáp án có sẵn để chấm Việc cho điểm hay không các từ hoặc cụm từ sai chính tA, sai ngữ pháp cần được xem xét trong từng trường hợp cụ thể Với các môn ngôn ngữ, đây là các lỗi nghiêm trọng Với các môn khác, cần chú trọng nhiều hơn đến bản chất khái niệm khoa

học

‘

Một số lưu ý khi biên soạn câu hỏi trắc nghiệm điển vào chỗ trống:

Trang 30

1 Phần đầu phải thiết kế rõ ràng, đặc Điệt câu hỏi dang b) can cé légic

diễn dat chặt chẽ, vừa sức với học viên Thông thường, một câu dạng b) nên là

một đoạn chính dẫn nguyên gốc từ tài liệu, giáo trình với một số từ hoặc cụm từ

được xoá đi

2 Chỗ trống cần điển phải được tính toán phù hợp sao cho đủ để học viên

điển vào

3 Các cụm từ dự định được dùng để điển vào không nên quá đài hoặc tối v

nghĩa

4 Nếu trong câu hỏi có nhiều chỗ trống, cần đánh số thứ tự các khoảng trống và tạo ra một danh sách các khoảng trống tương ứng để học viên điền

HI.2.2.4 Câu hỏi trắc nghiệm ghép đôi

Cáu hỏi trắc nghiệm ghép đôi được dùng khá phổ biến trong các bài thi

trắc nghiệm Nó cũng gồnÝ hai phần: phần đầu và phần thân Phần thản gồm hai loại mô tả về đối tượng, các mô tả có thể bằng lời hoặc hình ảnh; chúng có thể được sắp xếp thành hai khu vực riêng biệt hoặc trộn lẫn vào nhau Phần đẩu mô

là một tiêu chuẩn nào đó được dùng làm cơ sở để ghép phù hợp các mô tả trong hai loại mô tả trên Dưới đây là một ví dụ về dạng câu hỏi này

Dưới đây là các từ hoặc cụm từ tiếng Anh mô tả các thao tác trong Phan dau hệ soạn thảo văn bản MicrosofWord Hãy nối các từ mô tả các

Trang 31

Khi thi, học viên đứợc yêu cầu nối các mô tả tương ứng giữa hai lớp đối tượng theo một tiêu chuẩn nào đó được nêu trong phần đầu câu hỏi (xem ví dụ)

Khi làm bài thi trắc nghiệm với câu hỏi dạng này, học viên cần đọc và hiểu kỹ tiêu chuẩn đã nêu, và đọc lướt nhanh một lần các mô tả đã cho để định tốt hơn

cách trả lời

Việc chấm bài thi trắc nghiệm cũng trở đên dễ dàng với một đáp án được chuẩn bị trước

Một số lưu ý khi soạn câu hỏi trắc nghiệm ghép đôi:

1 Phần thân của câu hỏi trắc nghiệm ghép đôi được chia thành hai phần nhỏ, mỗi phần nên có ít nhất 6 mô tả

2 Cần xác định rõ tiêu chuẩn định hướng học viên ghép phù hợp II.2.3 So sánh thi trắc nghiệm khách quan và tự luận Trắc nghiệm khách quan Trac nghiệm tự luận - Đánh gid kha nang nhớ sự kiện, khái niệm khoa học 7

- Đánh giá khả năng phân tích, tổng hợp đữ

liệu dựa trên kết quả học tập và kinh nghiệm bản thân của học viên

- Khuyến khích học viên tích luỹ kiến thức - Khuyến khích học viên sắp đặt, diễn đạt ý tưởng

- Công việc biên soạn đề cần đhiều thời gian

hơn đo cần nhiều câu hỏi cho một dé và câu

hỏi trắc nghiệm khách quan cũng khó biên

soạn hơn

- Công việc biên soạn đề đơn giản, không tốn thời gian do chỉ cần một số ít câu hỏi

- Cần nhiều thời gian chấm thi - Cần ít thời gian chấm thi

- Kết quả chấm bài có tính khách quan cao - Kết quả chấm bài ít nhiều phụ thuộc vào ý kiến chủ quan của người chấm, đặc biệt là các

câu tự luận dài

.1.3 TỔ CHỨC THI TRAC NGHIEM

$

Trang 32

công đoạn chính: biên soạn đề, tổ chức để thành thư viện, chuẩn bị tổ chức thi, tổ

chức thi và chấm thi '

11.3.1 Bién soạn câu hỏi trắc nghiệm

Hoạt động biên soạn đề là công đoạn đầu tiên trong tổ chức thi trắc

nghiệm, nó gồm nhiều hoạt động cụ thể, chỉ tiết va ti mi; nó liên quan đến nhiều

chuyên môn khác nhau và nhiều giáo viên khác nhau trong một tổ chức đào tạo

Nói chung, công đoạn biên soạn để thường diễn ra trong một khoảng thời gian v

dài trước khi đến công đoạn tiếp theo

Trên cơ sở nội dung giảng dạy theo chương trình, các giáo viên có kinh

nghiệm được phân công biên soạn bộ câu hỏi trắc nfhiệm và chuẩn hoá nó (xem phần 3) ở cấp bộ môn và khoa cả về số lượng, hàm lượng khoa học và các yêu tố liên quan khác như các dự định về thời gian thi, kết cấu đề thi cho từng đối tượng

du thi

Trên thực tế, khi áp,dụng, công đoạn này thường bị xem nhẹ Bộ câu hỏi trắc nghiệm va dé thi trắc nghiệm thường chỉ được biên soạn ngay trước khi thi: và thường theo một cách chủ quan của giáo viên giảng đạy Tồn tại lớn nhất ở

đây là các đề thí chưa được chuẩn hoá về mặt khoa học, cho dù chỉ là ở cấp bộ

môn; bộ đề chưa được đem ra sử dụng chung

II.3.2 Tổ chức thư viện câu hỏi trắc nghiệm

Việc tổ chức thư viện câu hỏi trắc nghiệm được bắt đầu bởi hoạt động họp và xem xét của hội đồng khoa học Kết quả của giai đoạn này là bộ câu hỏi trắc nghiệm được thông qua và lưu lại vào thư viện câu hỏi trắc nghiệm Thư viện câu

hỏi trắc nghiệm được quả lý bởi một đơn vị có trách nhiệm và bảo đảm bi mat tuyệt đối Cho dù được lưu dưới dạng thủ công hay trên máy tính thư viện câu

hỏi trắc nghiệm cũng phải được tổ chức một cách khoa học sao cho có thể dễ

dàng và thuận tiện trong việc tạo ra một cách ngẫu nhiên các đề thi

Trang 33

11.3.3 Chuan bi thi

Công tác chuẩn bị thi la một việc làm cần thiết Nếu là thi trắc nghiệm

trên giấy, công tác chuẩn bị thi có thể được thực hiện khi hướng dẫn học viên ôn

tập Thi trắc nghiệm dựa trên máy tính đòi hỏi học viên ít nhiều biết cách sử

dụng máy tính, phần mềm thi trắc nghiệm và cách thi Công tác chuẩn bị cần được chuẩn bị trước, dưới dạng một buổi hướng dẫn thi hoặc một môn học riêng

trong chương trình giảng dạy, tuỳ theo môi trường đào tạo 11.3.4 Tổ chức thi

Trong khoảng thời gian chính thức thị, trên thực tế có rất nhiều hoạt động

chức năng khác nhau được thực hiện, mọi hoạt động này đều trực tiếp ảnh hưởng đến kết quả thi của từng học viên và kết quả chung của môn học Các hoạt động

cụ thể gồm: gọi thí sinh vào phòng thi, nhắc nhở quy chế thi, phát đề, học viên làm bài, giám thị giám sát thi, giám thị thu bài khi hết giờ

Trong thi trắc nghiệm dựa trên máy tính, các hoạt động này được thể hiện bởi các chức năng trong một phần mềm máy tính Một số chức năng do giám thị' thực hiện, một số chức năng do học viên tự thực hiện và một số chức năng khác do phần mềm tự thực hiện như các thao tác giám sát và khống chế thời gian thi,

quy chế thi Phân này sẽ được mô tả chị tiết ở phần cuối của đề tài

11.3.5 Cham thi,

Hình thức chấm thi phân biệt giữa hai cách tổ chức thi trắc nghiệm Với

thi trắc nghiệm dựa trên giấy, chủ yếu công việc chấm thi vẫn do người được phân công thực hiện Gần đây, hình thức này đã được cải tiến và tự động với máy tính dựa trên các kỹ thuật quét, nhận dạng bài thi của học viên Tuy nhiên, để thực hiện theo cách này, bài thi phải được thiết kế theo mẫu chuẩn và quy trình

làm bài thi của học viên cũng phải được chuẩn hoá Với thi trắc nghiệm trên máy

tính, việc chấm bài hoàn toàn do máy thực hiện, với từng câu hỏi trắc nghiệm

ngay sau khi học viên thực hiện

ý

Trang 34

Tổng hợp kết quả chấm thi cũng hoàn toàn khác nhau với các hình thức thi và chấm thi nêu trên

‡

H.4_ NHỮNG VẤN ĐỂ VỀ MÔI TRƯỜNG CÔNG NGHỆ

Tổ chức thi — kiểm tra trắc nghiệm không phải là hình thức chỉ có trong

môi trường công nghệ thông tin phát triển Như ở phần ba sẽ trình bày, đề tài này để xuất cả hai hình thức thi trắc nghiệm rui công dựa trên giấy và tự động dựa trên máy tính và mạng máy tính Hình thức đầu dễ triển khai và chủ yếu liên

quan đến những vấn đề thuộc về “công nghệ” đơn giản như thiết kế mẫu để, in ấn, quá trình chấm, giấy và đặc biệt là quy trình xây dựng bộ đề và các khía

cạnh liên quan “khả áp dụng” cho các giảng viên nói riêng và các tổ chức đào tạo nối chung Hình thức thứ hai đặc biệt liên quan đến các thành tựu của công nghệ, đặc biệt là công nghệ thông tin Hình thức này cũng có thể được áp dụng ở

nhiều mức độ tự động khác nhau, như trình bày ở phần III của đề tài Những vấn

đề thuộc về công nghệ tạo môi trường thuận lợi, và cũng là một trong các yếu tố,

thúc đấy các tổ chức đào tạo thực hiện hình thức thi - kiểm tra trắc nghiệm tự động được trình bày vấn tắt dưới đây

Cho đến nay, công nghệ thông tin tự nó đã vượt lên với những thành tựu rực rỡ và được áp dụng trong mọi lĩnh vực của đời sống xã hội Công nghiệp phần cứng máy tính đã có những bước phát triển nhảy vọt Từ chỗ máy tính bóng đèn điện tứ với kích thước đồ sộ chỉ thích hợp Với việc xây dựng các trung tâm máy tính lớn và xử lý thông tin theo kiểu tập trung cho đến sự ra đời của máy tính cá nhân PC vào đầu thập kỹ 1970, theo đó các mô hình thu thập — xử lý thông tin theo kiểu phản tán bắt đầu hình thành; Máy tính cá nhân PC ngày càng hoàn thiện khả năng lưu trữ của các thiết bị nhớ ngày càng lớn, tốc độ xử lý tin ngày càng nhanh, chất liệu đầu vào cho máy tính ngày một “hướng người” hơn

nhờ kỹ thuật đồ họa và đa phương tiện Ở giai đoạn đầu của quá trình hình thành

Trang 35

mạng quốc gia (Intranet) Và như một hệ quả tất yếu của xu thế kết nối đó, ngày nay, mạng máy tính ÿaternet được xem như một “xa lộ” truyền tải thông tin trên phạm vi toàn cầu

Dựa trên nền tảng phần cứng máy tính phát triển đó, công nghiệp phần mềm máy tính cũng đạt đến tốc độ phát triển chưa từng có Từ chỗ các bài toán được xử lý chủ yếu dựa trên kỹ thuật lập trình thủ công, ngày nay, với các kỹ thuật lập trình tự động, hiệu quả của việc mộ hình hoá các bài toán và viết

chương trình xử lý nó cao gấp nhiều lần [1] Lúc đầu, phần lớn các bài toán được

lập trình và giải trên máy tính đều là các bài toán kỹ thuật, trong đó công việc chủ yếu là các tính toán kỹ thuật; Dần dần, xu hướng mơ hình hố và giải các bài toán quản lý ngày càng tăng lên — khác với bài toán kỹ thuật, đặc điểm nổi bật

của các bài toán quản lý là khối lượng thông tin khổng lồ, đa chiều, cần kỹ thuật

đa phương tién (multimedia) Nhu một kết quả, ngày càng nhiều bộ chương trình

(phần mềm) máy tính tự động hoá các qui trình xử lý thông tin ra đời; Nói riêng,

trong lĩnh vực giáo dục đào tạo, một số phần mềm (có thể chạy trên máy đơn hoặc mạng máy tính) là các phần mềm dùng chung như trong nhiều lĩnh vực khác như các chương trình soạn thảo văn bản hoặc các chương trình quản lý văn

thư, tài vụ Một số khác là các bộ phần mềm chuyên dụng như các phần mềm quản lý sinh viên, phần mềm quản lý các để tài khoa học và dự án Riêng về các phần mềm thi trắc nghiệm, theo thống kê cũng có nhiều loại khác nhau; giao

diện màn hình hoàn toàn có thể được thiết kế thân thiện và dễ sử dụng đối với học viên Các bộ để không chỉ gồm văn bản; ngược lại chúng có thể được thiết

kế đễ dàng gồm cả các đối tượng đồ họa, âm thanh

Với khả năng lưu trữ và xử lý của cả hệ thống phần cứng và phần mềm,

việc xây dựng các kho thông tin “có cấu trúc” ngày càng dé dàng và thuận lợi

» x ` ae t „ ~ ` ` ,

hơn Các bộ đề có thể được tạo ra dễ dàng với số lượng lớn, lưu sẵn và khi cần có

thể chọn ngẫu nhiên phục vụ từng kỳ thi - kiểm tra tương ứng

! Trong lĩnh vực Công nghệ hông tin, thuật ngữ này được gọi là Cơ sở dữ liệu

Trang 36

Môi trường phổ cập kiến thức về công nghệ thông tin nói chung và cách sử dụng các phần mềm máy tính chuẩn hoá ngày càng mở rộng, thuận lợi và đủ rẻ

Điều này khiến các phần mềm thi trắc nghiệm có thể nhanh chóng được chấp

nhận sử dụng trong các môi trường đào tạo, ngay cả trong các môi trường không chuyên công nghệ thông tin hoặc môi trường đặc thù là đào tạo và bồi dưỡng công chức hành chính

Có một thực tiễn là, gần đây chúng ta đã bắt đầu đề cập nhiều đến hình thức thi — kiếm tra trắc nghiệm, đặc biệt là thi — tréc nghiệm với sự-trợ giúp của máy tính Trên thế giới, hình thức đã được triển khai từ lâu và đã đi vào nề nếp, không chỉ trong các tổ chức chuyên đào tạo Các tổ chức chuyên tổ chức các kỳ thi cấp bằng tiéng Anh IELTS, TOEFT, hoặc thi cấp bang chuyén gia tin hoc

của Microsoft là các ví dụ điển hình Quy mô tổ chức thi được xử lý thống nhất trên phạm ví toàn cầu dựa trên mang máy tính Internet, Ở Việt Nam, một số năm

gần đây đã có một số trường đại học đã triển khai và triển khai tốt hình thức thj — kiểm tra này, áp dụng cho cả việc đánh giá cuối mỗi môn học và các kỳ thi tuyển

sinh đầu vào ‘

Qua thực tiễn, hình thức thi — kiếm tra trắc nghiệm tỏ ra có nhiều ưu điểm

vượt trội, đảm bảo được các yêu cầu của công tác giáo dục, đào tạo trong bối cảnh mới Tuy nhiên, một điều dễ nhận thấy là, hình thức này vẫn chưa được

triển khai rộng khắp và dâñ có nề nếp; thậm chí, còn có một số trường, ngay tại các thành phố lớn, chưa từng đề cập đến hình thức thi — kiểm tra này; một số khác còn không biết bất đầu triển khai như thế nào

Trong quá trình xây dựng các mô hình, đề tài tập trung phân tích và đề ra

các bước triển khai thích hợp, từ thủ công đến tự động — ở các mức khác nhau — phù hợp với từng hoàn cảnh cụ thể, đồng thời vẫn đễ dàng hoàn thiện dần theo

hướng tự động hoá ở các mức cao hơn khi điều kiện triển khai cho phép Đây chính là ý nghĩa thực tiễn dat được của để tài Tuy không hướng tới việc xây dựng một phần mềm thi — kiểm tra trắc nghiệm hoàn chỉnh, song mô hình được

Trang 37

xây dung trong đề tài dễ dàng có thể được viết mã và đưa vào thực hiện khi điều kiện kinh phí và thời gian cho phép

II.5 PHƯƠNG PHÁP NGHIÊN CỨU

Dé tai được thực hiện chủ yếu trên cơ sở các n&hiên cứu lý thuyết và phi

thực nghiệm

#

Trong các nghiên cứu lý thuyết, một số khái niệm đơn giản xuất phát từ

các khái niệm vốn có được xây dựng cho phù hợp môi trường đào tạo hành chính Nhằm tạo ra được một mô hình lý thuyết thuần tuý đối với việc tổ chức th tric nghiệm, các kết quả tương ứng được tổng hợp và rút ra từ các tài liệu liên quan

Lý thuyết cơ bản về thi trắc nghiệm cũng được tổng hợp, trích dẫn từ các tài liệu

thu thập được

Các đánh giá chung về các hình thức tổ chức thi truyền thống và thi tric

nghiệm hiện đang được triển khai chủ yếu dựa trên các quan sát và tự tổ chức của các thành viên để tài Bản thân tác giả để tài cũng có nhiều hoạt động tích

cực trong việc triển khai các hình thức thi trắc nghiệm tại một số môn, ở một số

trường được mời giảng Kinh nghiệm rút ra từ các hoạt động đó cũng được xem là các kết quả thử nghiệm phục vụ tốt cho nội dung của đề tài, từ việc ra đề, đến tổ chức thi và chấm, trong cả hai mô hình thủ công và tự động

Trang 38

PHAN III

Trang 39

Việc chuyển đổi từ các hình thức” thỉ khác nhau vốn tồn tại từ trước sang

hình thức thi trắc nghiệm là cần thiết, nhưng cần được tiến hành từng bước một

Trên thực tế, việc chuyển đổi này liên quan đến rất nhiều vấn dé khác nhau, từ

thói quen đến kỹ thuật tổ chức Cần khuyến khích cả các cá nhân, đơn vị đã áp dụng áp dụng và chưa quen áp dụng triển khai áp dụng thường xuyên hơn Muốn thực hiện tốt hoạt động này, cần thiết phải xây dựng một mô hình thích'hợp tương đối phù hợp với những gì vốn có hiện nay

Mô hình đơn giản chủ yếu liên quan đến việc chuẩn hoá các cong’ doan trước và sau khi thi Việc chuẩn hoá này tạo tiền để cho việc xây dựng thói quen

sử dụng hình thức thi trắc nghiệm và việc chuẩn hoá một bước hình thức thi và

các dữ liệu liên quan chuẩn bị cho việc xây dựng mô hình tự động với sự trợ giúp của máy tính

Mô hình tự động máy tính hoá tất cả các công đoạn khác nhau của hình thức thi trắc nghiệm, đặc biệt là phần thao tác thí của học viên (xem III.2)

Dưới đây là mô hình cơ bản tổ chức thi trắc nghiệm 4 - Nghiên cứu nội dung chương trình

Biên soạn - Xác định số lượng câu hỏi cho một để

câu hỏi - Biên soạn các câu hỏi trắc nghiệm

- Duyệt đề tại bộ môn L? Duyệt đề tại b Chỉnh - Duyệt đề tại khoa SỬ Và cập Ỉ nhật 4 + s ‘ ae

- Đánh giá chất lượng các câu hỏi

L Xay dung - Tổng hợp phân loại câu hỏi theo đối tượng

ngân hàng câu hỏi - Thống nhất các câu hỏi giữa các đơn vị - Quyết định só câu hỏi cho cho mỗi phần/đề

Chuẩn bị - Hướng dẫn thi

Trang 40

1.1 MO HINH DON GIAN

Dựa trên các mô tả ban đầu về bài toán thi trắc nghiệm và các vấn đề liên quan được trình bày ở phần trước của đề tài (phần II) và sơ đồ nêu trên, trong

phần này tác giả sẽ để xuất một mô hình đơn giản khả áp dụng cho môi trường

đào tạo, bồi dưỡng công chức Mô hình được trình bay dudi dang mô tả IHL.1.1 Biên soạn câu hỏi

a) Nghiên cứu nột ung chương trình món học

Nhằm hướng tới việc chuẩn hoá bộ dé thi trắc nghiệm cũng như các hoạt

động đi kèm, đây là một công việc cần thiết

Với mỗi nội dung chương trình cần có một tập câu hỏi trắc nghiệm sao

cho hội tụ đủ các yếu tố sau đây:

- Đánh giá đúng kết quả học tập của học viên theo từng đối tượng

- Bao quát toàn bộ nội dung môn học, có chú trọng đến các kiến thức trọng tâm

- Có thể đánh giá được cả ba mức độ học tập của học viên: nắm được, nắm

chắc và vận dụng ˆ

- Gồm cả hai loại câu hỏi trắc nghiệm: tự luận và khách quan

- Số lượng câu hỏi mỗi loại trong ngân hang dé phải nhiều hơn số lượng vâu hỏi được dùng trong một đề thi cụ thể

- Phân chia số câu hỏi cho mỗi phần trong đề một cách hợp lý

b) Xác định đề và kết cấu đề

Sau khi tìm hiểu kỹ nội dung môn học, cần ấn định số lượng câu hỏi cho

mot dé thi trắc nghiệm Số câu hỏi này được phân bổ theo nội dung bài học theo

một trong hai cách như sau:

- Theo các đề mục lớn liệt kê trong bảng mục lục của giáo trình; hoặc