phương pháp nghiên cứu đánh giá văn bản/ tài liệu TS Nguyễn Quý Thanh TS Nguyễn Công Khanh Trung tâm Đảm bảo chất lượng đào tạo Nghiên cứu Phát triển giáo dục, Đại học Quốc gia Hà Nội Tel: 7549245 Fax: 7547111 Các nguyên tắc định hướng thu thập thông tin minh chứng Với tiêu chí cần làm sáng tỏ câu hỏi sau đây: Thực trạng/tình hình thực tế (mô tả)? Giải thích, nhận định thực trạng (phân tích, so sánh điểm mạnh/ điểm yếu, giải thích nguyên nhân, nhận định mức độ đạt )? Cần phải làm để cải tiến tồn (kế hoạch hành động)? Các nguyên tắc định hướng thu thập thông tin minh chứng Làm để đánh giá tiêu chí cách trung thực xác khách quan tin cậy ? Tính đầy đủ minh chứng ? Tính tường minh minh chứng ? Tính tương thích/phù hợp minh chøng ? TÝnh kh¶ thi cđa viƯc thu thËp minh chứng ? Mỗi người tham gia thu thập thông tin minh chứng trình tự đánh giá giữ đầu câu hỏi định hướng sau: Liệu minh chứng thu có cung cấp thông tin hữu ích cho việc hiểu biết đầy đủ nội hàm tiêu chí nhằm đánh giá thực trạng quan trọng tìm cách cải tiến nâng cao chất lượng khu vực ? Các phương pháp/ kỹ thuật thu thập thông tin/ minh chứng Nghiên cứu văn bản/tài liệu/ hồ sơ Lập biễu mẫu thống kê Trao đổi /Toạ đàm (nhóm) Quan sât/ dự / thăm trường Phương pháp nghiên cứu đánh giá văn bản/tài liệu/hồ sơ Xác định loại văn bản/tài liệu/hồ sơ cần thu thập? Thu thập loại bản/tài liệu/hồ sơ từ nguồn nào? Tính hành/pháp lý văn bản? Văn áp dụng cho đối tượng nào? Phạm vi áp dụng? Nội dung văn bản/tài liệu có rõ ràng, có phù hợp với tiêu chí (nội hàm)? Xác định loại văn bản/tài liệu cần thu thập Tiêu chí đòi hỏi loại văn bản/ tài liệu nào? Liệt kê loại văn cần phải tìm? Các loại văn tìm đâu? - Nơi lưu trữ ? Đơn vị nào/ phận ? - Người lưu trữ ? Người biết rõ cung cấp loại văn này? Cấp ban hành, cấp thực hiện? Đánh giá tính hành/pháp lý văn bản/tài liệu Loại văn bản/tài liệu cấp quản lý ban hành thức (có sè, cã ®ãng dÊu) ®ang cã hiƯu lùc ? VÝ dụ: Sứ mệnh, sách, kế hoạch chiến lược, quy chế, quy định, định đà cấp có thẩm quyền phê duyệt Loại văn bản/tài liệu cấp quản lý sử dụng (không có số, dấu) có hiệu lực ? Ví dụ: Các nghị quyết, biên họp, biên vấn, sổ giao ban, nhận xét phản biện, báo cáo thẩm định/ tổng kết Đánh giá tính hành/pháp lý văn bản/tài liệu (Tiếp theo) Văn cấp quản lý ban hành ? chỉnh sửa bổ xung nào? Ví dụ: Khung chương trình, chương trình chi tiết, sách giáo trình, Thời hạn có hiệu lực văn ? Ví dụ: Các quy chế, quy định, bảng phân công giáo viên giảng dạy môn Văn áp dụng cho đối tượng nào, phạm vi áp dụng ? VÝ dơ: kÕ ho¹ch thùc tËp cho sinh viên quy, hợp đồng/thoả thuận phân công giáo viên hướng dẫn SV thực tập trường tiểu học Đánh giá nội dung văn bản/tài liệu Nội dung văn bản/tài liệu có tường minh? Các chuyên gia/người thu thập đọc văn bản/tài liệu cần đánh giá tính tường minh qua: - Cấu trúc văn có rõ ràng? - Bố cục văn có rõ ràng? - Các thành tố phận văn vừa có tính độc lập, vừa có tính liên kết ? - Nội dung văn đáp ứng yêu cầu/chuẩn mực thiết kế Ví dụ: đánh giá mục tiêu khoá đào tạo GVTH? Đánh giá nội dung văn bản/tài liệu (Tiếp theo) Nội dung văn bản/tài liệu có phù hợp với tiêu chí? Chuyên gia/người thu thập đọc văn bản, đánh giá mức độ phù hợp văn với nội hàm tiêu chí qua: - Đối chiếu, so sánh nội dung văn với yêu cầu chuẩn hoá, pháp lý hoá văn - Đối chiếu, so sánh nội dung văn với yêu cầu cụ thể tiêu chí (ở mức độ) - Nội dung văn xây dựng ? quy trình xây dựng văn bản, để xây dựng Quy trình thẩm định/phê duyệt? Tạo chất lượng văn Ví dụ: đánh giá chương trình chi tiết trường CĐSP? 10 Xử lý văn bản/tài liệu Thư ký/người thu thập vào nội hàm tiêu chí tiến hành: - Phân loại ? - Mà hoá ? - Tóm tắt nội dung văn bản? - Tích hợp thành biểu bảng? Phục vụ mục tiêu mô tả rõ thực trạng, so sánh phân tích điểm mạnh điểm tồn Xếp mức cho tiêu chí cụ thể 11 Thực hành đánh giá văn bản/tài liệu Chia thành 4-5 nhóm, nhóm 5-6 người thử tiến hành đánh giá văn bản/ tài liệu theo bước sau: - Chọn tiêu chí phù hợp ? - Xác định loại văn tài liệu cần thu thập cho tiêu chí đà chọn? - Đánh giá tính hành/ pháp lý văn bản? - Đánh giá tính rõ ràng minh bạch, tính phù hợp yêu cầu tiêu chí ? đáp ứng - Xử lý: phân loại, mà hoá, tích hợp thành biểu bảng? Sử dụng minh chứng Đại học Hải phòng làm tài liệu thực hành 12 Thực hành đánh giá văn bản/tài liệu (tiếp theo) Các thành viên nhóm đóng vai trò người phản biện tích cực/ người đánh giá ngoài: - Đặt câu hỏi chất vấn mang tính xây dựng ? - Thảo luận nhóm xác định liệu văn bản/ tài liệu có coi minh chứng đáng tin cậy ? - Đánh giá tính đầy đủ minh chứng cho tiêu chí đà chọn? - Đưa kết luận khuyến nghị ? - Nhóm báo cáo tóm kết thực hành? 13 Lập biểu bảng thống kê tích hợp liệu Làm để tích hợp liệu/số liệu để lập biểu bảng thống kê tổng hợp nhằm thu thập thông tin hữu ích nhất? Mục đich? Đơn vị thống kê gị? Sự tích hợp số liệu thông kê đà phù hợp chưa? Phân tích số liệu thống kê giúp cho việc hiểu biết tranh thực trạng (nội hàm) tiêu chí hay tiêu chí liên quan khác? Số liệu thống kê giúp cho việc cải tiến? 14 Thực hành lập biểu bảng thống kê tích hợp liệu Chia thành 4-5 nhóm, nhóm 5-6 người thử tiến hành lập biểu bảng thống kê tích hợp liệu: - Chọn tiêu chí phù hợp ? - Xác định loại liệu cần cần tích hợp? - Lập bảng liệu? - Trình bày, thuyết minh/giải thích biểu bảng ? - Báo cáo trước lớp kết thực hành? 15 ... ? Tính tương thích/phù hợp minh chứng ? Tính khả thi việc thu thập minh chứng ? Mỗi người tham gia thu thập thông tin minh chứng trình tự đánh giá giữ đầu câu hỏi định hướng sau: Liệu minh chứng... quản lý sử dụng (không có số, dấu) có hiệu lực ? Ví dụ: Các nghị quyết, biên họp, biên vấn, sổ giao ban, nhận xét phản biện, báo cáo thẩm định/ tổng kết Đánh giá tính hành/pháp lý văn bản/tài... tiểu học Đánh giá nội dung văn bản/tài liệu Nội dung văn bản/tài liệu có tường minh? Các chuyên gia/ người thu thập đọc văn bản/tài liệu cần đánh giá tính tường minh qua: - Cấu trúc văn có rõ ràng?