4.5 Thử nghiệm
4.5.1 Qui trình thử nghiệm
Chúng tôi thử nghiệm hệ thống ACGS và đánh giá các kết quả thử nghiệm theo qui trình sau:
1 Xây dựng mạng xác suất Bayes dựa trên mối quan hệ giữa các khái niệm, nhiệm vụ.
2 Đánh giá kiến thức của người học về môn học trước khi thực hiện các nhiệm vụ thông qua việc trả lời các câu hỏi.
3 Đánh giá kiến thức của người học trong qúa trình học tập thông qua kết quả thực hiện các nhiệm vụ học tập.
4 Sử dụng cơ chế thích nghi, đưa ra các nhiệm vụ, khái niệm người học không nhất thiết phải tham gia tìm hiểu dựa trên các giá trị định lượng kiến thức và mơ hình nội dung học.
5 Phân tích, so sánh sự khác biệt về tiến trình học, nhiệm vụ của từng người học để đánh giá mức độ chính xác của mơ hình thử nghiệm. So sánh kết quả trong việc định lượng kiến thức với mơ hình khác.
Trong qui trình thử nghiệm, chúng tôi giả lập dữ liệu đầu vào cho bước 2 và 3. Chúng tôi sử dụng dữ liệu giả lập bởi một số lý do sau đây:
- Khó khăn trong việc đưa mơ hình vào triển khai thực tế khi chưa có tính pháp lý cũng như sự thẩm định để có thể áp dụng thực tế. Chúng tơi có thể sử dụng sự tình nguyện của sinh viên sử dụng hệ thống. Tuy nhiên trong trường hợp này kết quả trả lời của họ không đúng với cách mà họ trả lời khi tham gia khóa học thực tế. - Cần số lượng người dùng đủ lớn (khoảng trên 500 người học), do đó khó khăn trong
việc tìm kiếm sinh viên tham gia thử nghiệm.