Nhiều trường có "ngân hàng đề" là một thư mục chứa các đề thi của các năm trước. Nó dùng được một phần — nhưng nó không làm được việc mà một ngân hàng đề thật sự làm: cho phép ra một đề mới, cân bằng, và biết trước nó sẽ hoạt động thế nào.
Mỗi câu hỏi cần gắn kèm gì
Đây là khác biệt cốt lõi. Một câu hỏi trong ngân hàng không phải chỉ có nội dung câu hỏi và đáp án.
Sáu trường thông tin tối thiểu:
Nội dung nó đo — chương nào, chuẩn đầu ra nào. Đây là trường quan trọng nhất vì nó cho phép ghép đề theo bảng đặc tả.
Mức nhận thức — nhớ, hiểu, vận dụng, phân tích. Đề chỉ toàn câu ở mức nhớ là đề không đo được điều chương trình yêu cầu.
Đáp án và hướng dẫn chấm, với câu tự luận thì kèm thang điểm chi tiết.
Độ khó đo được — tỉ lệ làm đúng ở các lần đã dùng.
Độ phân biệt — câu này có tách được nhóm nắm bài với nhóm chưa.
Lịch sử sử dụng — dùng ở kỳ nào, lớp nào.
Hai trường giữa chỉ có sau khi câu được dùng thật. Chính vì vậy ngân hàng đề chỉ có giá trị khi được cập nhật sau mỗi kỳ, không phải khi được xây xong một lần.
Quy trình cho câu hỏi mới
Bốn bước, và bước thứ hai là bước hay bị bỏ:
Người ra câu viết câu kèm đầy đủ các trường ở trên.
Một người khác cùng chuyên môn giải thử mà không xem đáp án. Bước này bắt được phần lớn lỗi: câu hỏi mơ hồ, hai phương án cùng đúng, đáp án sai, dữ kiện thiếu.
Chi phí của bước này là mười phút mỗi câu; chi phí của việc bỏ qua nó là một câu lỗi trong đề thi thật, với toàn bộ việc xử lý điểm kèm theo.
Tổ bộ môn duyệt về mức độ phù hợp với chương trình.
Đưa vào ngân hàng ở trạng thái chưa có dữ liệu, và cập nhật sau lần dùng đầu.
Cập nhật sau mỗi kỳ
Sau mỗi kỳ thi, ba việc, mất khoảng một buổi cho một môn:
Tính tỉ lệ đúng và độ phân biệt cho từng câu đã dùng, và ghi vào ngân hàng.
Đánh dấu các câu cần xem lại — câu quá dễ, quá khó, hoặc có độ phân biệt âm. Nhóm cuối phải được đọc lại từng chữ trước khi dùng lại.
Loại các câu đã lộ hoặc đã dùng quá nhiều lần.
Sau ba bốn kỳ, ngân hàng bắt đầu có giá trị thật: bạn ghép được một đề và biết trước phổ điểm sẽ ra sao.
Đủ bao nhiêu câu
Câu hỏi thường gặp và câu trả lời phụ thuộc cách dùng:
Nếu mỗi kỳ ra một đề duy nhất, cần số câu gấp nhiều lần số câu trong đề, để xoay vòng qua các năm mà không lặp.
Nếu ghép nhiều mã đề từ ngân hàng, cần nhiều hơn nữa — và quan trọng là các mã đề phải tương đương, tức các câu thay thế nhau phải cùng nội dung, cùng mức nhận thức và cùng độ khó.
Đây là điểm hay bị làm sai: xáo thứ tự câu không tạo ra các mã đề tương đương nếu các câu khác nhau về độ khó.
Cách thực tế: đừng nhắm con số lớn ngay. Xây đủ cho một môn trước, dùng vài kỳ, rồi mở rộng. Một ngân hàng trăm câu được kiểm và có dữ liệu tốt hơn nhiều một tệp nghìn câu chưa ai dùng.
Bảo mật
Ba mức, và cần phân biệt:
Câu hỏi dùng cho thi kết thúc học phần — bảo mật chặt, quyền truy cập hạn chế, và có ghi nhận ai xem khi nào.
Câu hỏi dùng cho kiểm tra thường xuyên — mức thấp hơn.
Câu hỏi công bố cho người học ôn tập — công khai có chủ ý, và không bao giờ được dùng lại trong đề thi thật.
Nhóm thứ ba đáng có: một bộ câu mẫu công khai giúp người học biết dạng đề, và nó giảm hẳn sự bất công giữa người có và không có tài liệu lưu truyền.
Và một nguyên tắc vận hành: người ra đề cuối cùng không nên là người duy nhất có quyền truy cập toàn bộ ngân hàng — phân tách quyền là cách bảo vệ cả hệ thống lẫn chính người đó.
Bắt đầu khi chưa có gì
Bốn bước cho một môn, làm được trong một học kỳ:
Lập bảng đặc tả — các nội dung và mức nhận thức, với số câu mong muốn cho mỗi ô.
Thu các đề đã dùng ba năm gần nhất và tách thành từng câu, gắn vào các ô của bảng.
Bước này thường cho thấy ngay sự mất cân đối: phần lớn câu tập trung vào vài chương, và các mức nhận thức cao gần như không có.
Bổ sung cho các ô trống, ưu tiên ô thiếu nhiều nhất.
Bắt đầu ghi dữ liệu từ kỳ thi tiếp theo.
Và về công cụ: một bảng tính dùng được cho một môn. Phần mềm chuyên dụng chỉ cần khi quy mô lớn — mua phần mềm trước khi có quy trình là thứ tự ngược, và nó không tạo ra ngân hàng đề.
Mỗi câu hỏi trong ngân hàng cần gắn kèm gì?
Nội dung nó đo, mức nhận thức, đáp án và hướng dẫn chấm, độ khó đo được, độ phân biệt, và lịch sử sử dụng.
Bước nào trong quy trình hay bị bỏ?
Cho một người khác cùng chuyên môn giải thử mà không xem đáp án — bước này bắt được phần lớn lỗi câu hỏi.
Các mã đề khác nhau có tương đương không?
Chỉ khi các câu thay thế nhau cùng nội dung, cùng mức nhận thức và cùng độ khó — xáo thứ tự câu không tạo ra sự tương đương.
Bắt đầu từ đâu khi chưa có gì?
Lập bảng đặc tả, tách các đề đã dùng ba năm gần nhất thành từng câu gắn vào các ô, bổ sung ô trống, rồi bắt đầu ghi dữ liệu từ kỳ sau.