Đối sánh với cơ sở khác là một bước có trong hầu hết các bộ tiêu chuẩn đảm bảo chất lượng. Trong thực tế, nó thường được làm theo cách cho ra một phụ lục đẹp và không dẫn tới thay đổi nào.
Hai lỗi làm hỏng nó, và cả hai đều xảy ra trước khi thu thập bất cứ số liệu nào.
Lỗi thứ nhất: chọn sai nhóm so sánh
Hai hướng sai ngược nhau:
Chọn các cơ sở hàng đầu thế giới. Kết quả cho thấy khoảng cách lớn ở mọi chỉ số, và không ai biết làm gì với thông tin đó. Nó đúng nhưng không dùng được.
Chọn các cơ sở tương đương hoặc yếu hơn. Kết quả cho thấy mình ổn, và báo cáo trông tốt. Cũng không dùng được, vì mục đích của đối sánh không phải để yên tâm.
Cách chọn có ích: ba nhóm.
Một hai cơ sở tương đương về điều kiện — cùng quy mô, cùng loại hình, cùng vùng. Đây là nhóm cho biết mình đang ở đâu so với mặt bằng thật.
Một hai cơ sở đi trước một bước — không phải hàng đầu thế giới, mà là nơi cách mình một khoảng với tới được trong vài năm. Đây là nhóm cho biết bước tiếp theo trông thế nào.
Một cơ sở làm khác hẳn — mô hình đào tạo khác, cách tổ chức khác. Nhóm này ít khi được chọn và nó thường cho ra ý tưởng hữu ích nhất, vì nó cho thấy có cách làm khác chứ không chỉ cho thấy mức độ khác.
Lỗi thứ hai: chỉ so những gì dễ so
Số tín chỉ, số môn, số giảng viên có học vị tiến sĩ, số đầu sách trong thư viện — các con số này lấy dễ và nói ít.
Bốn thứ đáng so hơn:
Chuẩn đầu ra và cách đo chúng. Không so câu chữ mà so cách họ kiểm người học đã đạt chưa. Đây là chỗ lộ rõ nhất sự khác biệt về chất lượng.
Cách đánh giá trong các môn cốt lõi. Thi viết cuối kỳ, hay đồ án, hay danh mục sản phẩm? Cách đánh giá quyết định người học thực sự học gì.
Tỷ trọng thực hành và hình thức của nó.
Con đường của người tốt nghiệp — họ làm gì, ở đâu, sau bao lâu.
Lấy được bốn thứ này khó hơn lấy số liệu thống kê, và nó đòi đọc đề cương thật và nói chuyện với người thật.
Lấy thông tin ở đâu
Bốn nguồn, theo mức dễ tiếp cận:
Tài liệu công khai — chương trình đào tạo, đề cương học phần, báo cáo tự đánh giá đăng công khai.
Trao đổi trực tiếp giữa hai đơn vị. Đề nghị một buổi làm việc để cùng so chương trình là đề nghị bình thường và thường được đón nhận — vì bên kia cũng cần đối sánh.
Người có mặt ở cả hai nơi — giảng viên thỉnh giảng, người từng học ở đó, người từng công tác ở đó.
Nhà tuyển dụng nhận người từ cả hai nơi — nguồn có giá trị cao và ít được dùng. Họ so sánh được theo cách mà không tài liệu nào so được.
Ba bẫy khi đọc kết quả
Cùng một tên chỉ số, hai cách tính. Tỷ lệ tốt nghiệp đúng hạn, tỷ lệ có việc làm, tỷ lệ giảng viên cơ hữu — mỗi nơi tính một kiểu. So mà không kiểm cách tính là so hai thứ khác nhau.
Bỏ qua khác biệt đầu vào. Một chương trình tuyển người có nền tốt hơn sẽ có kết quả đầu ra tốt hơn dù dạy không khác gì. Thứ đáng so là mức tiến bộ, khó đo hơn nhiều nhưng đúng hơn nhiều.
Coi khác biệt là thiếu sót. Một chương trình dạy ít lý thuyết hơn có thể đang phục vụ một nhóm người học khác với mục tiêu khác. Câu hỏi đúng không phải "họ có gì mình không có" mà là "cách của họ có phù hợp với người học của mình không".
Biến kết quả thành hành động
Đây là bước phân biệt một đợt đối sánh có ích với một phụ lục trong hồ sơ.
Ba việc:
Chọn ra tối đa ba điểm để thay đổi. Một báo cáo liệt kê hai mươi khác biệt không dẫn tới gì. Ba điểm, có người chịu trách nhiệm và có mốc thời gian, thì có.
Ghi lại cả những gì quyết định không thay đổi và vì sao. Phần này quan trọng: nó cho thấy các khác biệt đã được cân nhắc chứ không bị bỏ qua, và nó ngăn việc năm sau lại bàn lại từ đầu.
Đặt lịch đối sánh lại. Hai tới ba năm một lần là hợp lý — đủ để các thay đổi có tác dụng và chưa quá xa để mất mạch.
Một giá trị phụ đáng kể
Đối sánh làm tử tế thường tạo ra quan hệ làm việc giữa hai đơn vị: trao đổi giảng viên, mời nhau phản biện, cùng tổ chức hoạt động cho người học.
Với nhiều cơ sở, quan hệ đó có giá trị lâu dài hơn chính bản báo cáo — và nó chỉ hình thành khi việc đối sánh được làm bằng cách gặp gỡ và trao đổi thật, không phải bằng cách tải tài liệu về rồi lập bảng.
Chọn nhóm đối sánh thế nào?
Ba nhóm: một hai cơ sở tương đương về điều kiện, một hai cơ sở đi trước một bước với tới được, và một cơ sở làm khác hẳn về mô hình.
Nên so những gì?
Chuẩn đầu ra và cách đo chúng, cách đánh giá trong các môn cốt lõi, tỷ trọng và hình thức thực hành, và con đường của người tốt nghiệp.
Bẫy nào hay gặp khi đọc số liệu?
Cùng tên chỉ số nhưng hai cách tính khác nhau, bỏ qua khác biệt về đầu vào, và coi mọi khác biệt là thiếu sót.
Làm sao để đối sánh dẫn tới thay đổi?
Chọn tối đa ba điểm để thay đổi kèm người chịu trách nhiệm và mốc thời gian, và ghi lại cả những gì quyết định không thay đổi cùng lý do.
