Đang tải... (xem toàn văn)
Nghiên cứu các kinh nghiệm của quốc tế về thiết kế và tổ chức triển khai hoạt động theo dõi và đánh giá thực hiện một số dự án, một chương tình hay một chính sách, một chiến lược nhất là những kinh nghiệm liên quan đến thực hiện chiến lược phát triển thống kê quốc gia
TỔNG CỤC THỐNG KÊ VIỆN KHOA HỌC THỐNG KÊ BÁO CÁO TỔNG HỢP NỘI DUNG NGHIÊN CỨU Nghiên cứu kinh nghiệm quốc tế thiết kế tổ chức triển khai hoạt động theo dõi đánh giá thực dự án, chương trình hay sách, chiến lược, kinh nghiệm liên quan đến thực chiến lược phát triển thống kê quốc gia Đề tài: Biên soạn tài liệu hướng dẫn thực Khung theo dõi đánh giá thực Chiến lược phát triển Thống kê Việt Nam giai đoạn 2011-2020 tầm nhìn đến năm 2030 Nhóm nghiên cứu: TS Phạm Đăng Quyết TS Nguyễn Cơng Mỹ CN Nguyễn Thị Kim Oanh HÀ NỘI – tháng năm 2012 MỤC LỤC I Tổng quan kinh nghiệm quốc tế thiết kế tổ chức triển khai hoạt động theo dõi đánh giá thực dự án, chương trình, chiến lược phát triển 1.1 Khái niệm Theo dõi Đánh giá phát triển 1.2 Các nguyên tắc theo dõi đánh giá 1.3 Hệ thống theo dõi đánh giá 10 1.4 Chỉ tiêu theo dõi đánh giá 15 1.5 Các phương pháp công cụ theo dõi đánh giá 18 1.6 Xây dựng lực theo dõi đánh giá 23 II Khung theo dõi đánh giá thực Chiến lược phát triển thống kê Uganda 25 2.1 Tổng quan Chiến lược phát triển thống kê Uganda trình phát triển Khung theo dõi đánh giá 25 2.2 Khung theo dõi đánh giá Chiến lược phát triển thống kê Uganda 27 III Đề xuất Hệ thống theo dõi đánh giá việc thực Chiến lược phát triển Thống kê Việt Nam giai đoạn 2011-2020 tầm nhìn đến năm 2030 42 3.1 Mục tiêu, nguyên tắc quy trình theo dõi đánh giá thực Chiến lược phát triển Thống kê Việt Nam giai đoạn 2011-2020 tầm nhìn đến năm 2030 42 3.2 Hệ thống TD&ĐG thực CLTK11-20 44 3.3 Phương pháp công cụ TD&ĐG thực CLTK11-20 48 3.4 Đánh giá hiệu chương trình theo dõi đánh giá 51 TÀI LIỆU THAM KHẢO 52 I Tổng quan kinh nghiệm quốc tế thiết kế tổ chức triển khai hoạt động theo dõi đánh giá thực dự án, chương trình, chiến lược phát triển Trong hai thập kỷ gần có số lượng đáng kể tài liệu số tổ chức quốc tế số nước cơng bố Theo dõi Đánh giá, ví dụ Tổ chức Đối tác Thống kê Phát triển Thế kỷ 21 (PARIS21) phát hành tài liệu “Hướng dẫn sử dụng cách tiếp cận hệ thống để thực Chiến lược quốc gia phát triển thống kê” (2007), “Thống kê thống Hệ thống theo dõi đánh giá nước phát triển: Bạn hay thù?” (2008), hay Chương trình Lương thực Thế giới Liên Hợp Quốc (UNWFP) phát hành tài liệu “Hướng dẫn Theo dõi & Đánh giá”, Tổ chức Liên minh Thế giới Tham gia Công dân (CIVICUS) phát hành tài liệu “Theo dõi Đánh giá” (2001), Chính phủ Nam Phi phát hành tài liệu “Khung sách Hệ thống theo dõi đánh giá quy mô quốc gia” (2007), “Tầm quan trọng việc xây dựng lực thống kê việc theo dõi đánh giá khu vực công Nam Phi” (2009), v.v… Theo dõi đánh giá công cụ quản lý quan trọng để theo dõi tiến độ thực hỗ trợ trình định Trên giới, theo dõi đánh giá để đáp ứng yêu cầu vài nhà tài trợ, nhiên cộng đồng làm việc trực tiếp với tổ chức người hưởng lợi nhiều từ kết công việc theo dõi đánh giá Thông qua việc xem xét kỹ lưỡng cơng việc, tổ chức thiết kế chương trình hoạt động cách hiệu mang lại lợi ích lớn cho cộng đồng Phần tổng quan kinh nghiệm quốc tế việc thiết kế triển khai hoạt động theo dõi đánh giá thực chương trình/dự án hay sách/chiến lược phát triển dựa việc nghiên cứu tư liệu từ số tài liệu 1.1 Khái niệm Theo dõi Đánh giá phát triển Một khó khăn mà phải đối mặt với thực tế Theo dõi Đánh giá (TD&ĐG) có nghĩa khác người khác nhau, tiến triển phần tư kỷ qua Một số nỗ lực sớm để định nghĩa TD&ĐG Các Nguyên tắc hướng dẫn thiết kế sử dụng theo dõi đánh giá dự án chương trình phát triển nơng thơn (1984)1 Quỹ Quốc tế phát triển nông nghiệp (IFAD) Vào thời điểm đó, TD&ĐG xem xét chủ yếu hoạt động liên quan đến dự án Hướng dẫn xác định Theo dõi đánh giá liên tục hoạt động dự án theo tiến độ thực việc sử dụng yếu tố đầu vào dự án theo kỳ vọng thiết kế Theo dõi xem hoạt động nội dự án, phần quan trọng việc thực hành quản lý tốt, phần khơng thể tách rời quản lý tác nghiệp hàng ngày Đánh giá trình bày đánh giá định kỳ mức độ phù hợp, việc thực hiện, hiệu quả, tác động dự án theo mục tiêu đề Đánh giá thường liên quan đến việc so sánh theo thời gian, không gian yêu cầu thông tin đối tác bên dự án TD&ĐG kết hợp theo dõi đánh giá qua cung cấp kiến thức cần thiết cho: a) quản lý dự án có hiệu quả; b) cơng tác báo cáo trách nhiệm giải trình (IFAD 2002) Gần 20 năm sau khái niệm sửa đổi cập nhật Mạng Đánh giá Phát triển DAC (2002), họ định nghĩa Theo dõi chức liên tục sử dụng hệ thống thu thập liệu tiêu xác định để cung cấp cho quản lý đối tác chủ yếu can thiệp phát triển diễn với tiêu cho thấy mức độ tiến đạt mục tiêu tiến việc sử dụng kinh phí phân bổ "Vì vậy, Theo dõi thể giám sát thường xuyên đầu vào, hoạt động, đầu ra, kết quả, tác động hoạt động phát triển dự án, chương trình, lĩnh vực ngành cấp quốc gia Theo dõi bao gồm việc theo dõi tiến quốc gia hướng tới Mục tiêu Phát triển Thiên niên kỷ biện pháp khác quốc gia thành công phát triển Đánh giá sau xác định DAC "quy trình xác định giá trị hay ý nghĩa hoạt động, sách chương trình phát triển để xác định phù hợp thực mục tiêu, việc thực hiện, hiệu phát triển, tác động tính bền vững Đánh giá cần cung cấp thông tin đáng tin cậy hữu ích, cho phép kết hợp học kinh nghiệm vào trình định người tài trợ nhà tài trợ "2 Cả hai định nghĩa IFDA DAC thừa nhận TD&ĐG hoạt động rõ ràng liên quan đến chương trình, dự án phát triển cụ thể Đặc điểm để phân biệt định nghĩa sau so với định nghĩa ban đầu định nghĩa ban đầu phạm vi cung cấp bao quát "dự án", định nghĩa sau, phạm vi mở rộng để bao gồm hoạt động phát triển cho dù quy mơ chương trình, dự án, hay lĩnh vực ngành quốc gia – ví dụ rõ ràng việc Theo dõi Đánh giá Chiến lược giảm nghèo (PRS) Cho đến năm 2000 với đời Chiến lược giảm nghèo người bắt đầu xem xét nỗ lực TD&ĐG dự án xóa đói giảm nghèo với hoạt động theo dõi giảm nghèo quy mô lĩnh vực ngành Động thái đứng đằng sau nỗ lực quan tâm ngày tăng việc phát triển dựa chứng cần thiết phải thành lập chương trình TD&ĐG cấp quốc gia tập trung vào việc theo dõi kết Chiến lược giảm nghèo Điều đánh dấu bắt đầu công nhận thông tin TD&ĐG sử dụng phục vụ mở rộng công cụ nhà hoạch định sách, nhà lập kế hoạch, rằng, có sẵn cho xã hội cơng chúng, thúc đẩy trách nhiệm nhà quản lý khu vực công quản lý nhà nước tốt Theo dõi Đánh giá hai hoạt động liên quan với với chức khác Theo dõi quản lý tốt dự án chương trình Đánh giá việc thẩm định, phán xét dựa hoạt động cách sử dụng liệu từ theo dõi, số liệu thống kê, liệu bổ sung tạo cách định lượng định tính cần thiết Đánh giá đặt câu hỏi vượt phạm vi tiêu theo dõi phù hợp sách chương trình hiệu việc đáp ứng mục tiêu nêu, chí cho dù mục tiêu thích hợp Theo dõi nhằm mục đích cung cấp cho nhà quản lý, người định bên liên quan khác với thông tin phản hồi thường xuyên tiến việc thực kết tiêu ban đầu vấn đề cần phải điều chỉnh Theo dõi thường báo cáo việc thực thi thực tế so với lên kế hoạch dự kiến3 Theo dõi liên quan đến việc thu thập, phân tích, báo cáo liệu đầu vào, hoạt động, đầu ra, kết tác động yếu tố bên ngoài, cách hỗ trợ quản lý hiệu Trong quản lý dựa kết quả, có sử dụng chuỗi kết (xem hộp đây) Chuỗi kết cho thấy hoạt động, thông qua chuỗi quan hệ nhân trung gian, giúp thực mục tiêu dự án, chương trình sách nào4 Hộp 1: Chuỗi kết Quản lý dựa kết Tác động Mục tiêu cấp độ cao mà biện pháp can thiệp phát triển nhằm đóng góp vào Kết Ảnh hưởng ngắn hạn trung hạn kết can thiệp Đầu Sản phẩm, tư liệu sản xuất dịch vụ có từ can thiệp phát triển; gồm thay đổi phát sinh từ biện pháp can thiệp có liên quan đến kết đạt Hoạt động Hoạt động công việc thực mà thông qua đầu vào vốn, hỗ trợ kỹ thuật loại nguồn lực khác huy động để sản sinh đầu cụ thể Đầu vào Nguồn tài chính, người vật lực sử dụng cho biện pháp can thiệp phát triển Thuật ngữ OECD/DAC: Chú thích thuật ngữ Đánh giá Quản lý dựa kết Đánh giá công việc định kỳ bị ràng buộc thời gian tìm kiếm cung cấp thơng tin đáng tin cậy hữu ích trả lời câu hỏi cụ thể để hướng dẫn việc định nhân viên, người quản lý nhà hoạch định sách Đánh giá đánh giá phù hợp, hiệu suất, hiệu quả, tác động tính bền vững Đánh giá tác động kiểm tra xem liệu lý thuyết giả thiết có hợp lý, làm được, khơng Đánh giá sử dụng để rút học xuyên suốt từ kinh nghiệm đơn vị tác nghiệp xác định cần thiết phải thay đổi khuôn khổ kết chiến lược5 Theo dõi đánh giá vô phức tạp, đa ngành với kỹ chuyên sâu Theo dõi đánh giá quy mô quốc gia chí cịn phức tạp hơn, địi hỏi kiến thức chi tiết liên ngành, với tương tác lập kế hoạch, dự toán ngân sách thực Theo dõi đánh giá có điểm chung chúng hướng tới học hỏi từ làm làm việc nào, cách tập trung vào: Hiệu suất, Hiệu quả, Tác động Hiệu suất cho biết đầu vào cho công việc phù hợp với đầu Đầu vào tiền bạc, thời gian, thiết bị, nhân lực v.v… Khi thực dự án liên quan tới khả nhân rộng mở rộng quy mơ yếu tố hiệu suất quan trọng Hiệu thước đo mức độ mà chương trình phát triển hay dự án đạt mục tiêu cụ thể mà thiết lập Ví dụ, đặt việc nâng cao trình độ chun mơn tất nhân viên lĩnh vực cụ thể, thành cơng chưa? Tác động nói thực khác biệt so với tình vấn đề mà cố gắng để giải hay chưa Nói cách khác, chiến lược có hữu dụng khơng? Trước định để có điều lớn hơn, để nhân rộng dự án nơi khác, cần phải chắn làm có ý nghĩa mặt tác động mà muốn đạt được6 Tác dụng theo dõi đánh giá nhìn thấy chu trình Lưu ý theo dõi điều chỉnh nhiều lần trước sẵn sàng để đánh giá lập kế hoạch lại Theo dõi đánh giá chức khác thường phục vụ đối tượng sử dụng khác Những khác biệt TD&ĐG tóm tắt Bảng Bảng : So sánh theo dõi đánh giá Theo dõi đánh giá có thể: Giúp xác định vấn đề nguyên nhân chúng; Đề xuất giải pháp cho vấn đề; Đặt câu hỏi giả thuyết chiến lược; Buộc suy nghĩ nơi tới làm tới đó; Cung cấp thơng tin nhìn nhận sâu sắc; Khuyến khích hành động dựa thơng tin nhìn nhận sâu sắc; Tăng khả tạo khác biệt phát triển tích cực 1.2 Các nguyên tắc theo dõi đánh giá Trong tài liệu “Khung sách Hệ thống theo dõi đánh giá quy mô quốc gia” Uganda (2007) có giới thiệu nguyên tắc theo dõi đánh giá theo bảng sau: TD&ĐG nên đóng góp vào việc cải thiện quản lý nhà nước • Minh bạch • Tất phát cơng bố cơng khai trừ có lý thuyết phục khác • Trách nhiệm • Sử dụng nguồn công khai cho giám sát công chúng • Sự tham gia • Tiếng nói thuộc người dân bị thiệt thịi lịch sử • Bao gồm • Theo truyền thống lợi ích bị loại trừ thể thơng qua quy trình TD&ĐG TD&ĐG nên dựa quyền • Tuyên bố quyền • Các quyền dựa văn hóa phát huy khẳng định cách đưa giá trị chúng tất trình TD&ĐG TD&ĐG nên phát triển theo định hướng quốc gia, thể chế địa phương • Định hướng tới người nghèo • Cung cấp dịch vụ thực • Học hỏi • Quản lý nguồn nhân lực •Nêu bật nguyên nhân nghèo, tác dụng động lực ưu tiên lợi ích người nghèo cao so với nhóm có lợi • Phân tích xem xét biến phản ánh việc thi hành thể chế cung cấp dịch vụ, xác định mối liên kết xây dựng chiến lược đáp ứng • Nuôi dưỡng kiến thức khao khát học tập tổ chức cá nhân • Các kỹ cần thiết cho thảo luận TD&ĐG sẵn có, bồi dưỡng giữ lại kiến thức cần thiết cho việc sử dụng chiến lược nhân sẵn có • Nhận thức tác động sử dụng • Theo dõi phân tích cách hệ thống quán tác động can thiệp TD&ĐG xem xét, phản ánh kế hoạch kết thực tế TD&ĐG nên thực cách có đạo đức trực • Bảo mật • Quy trình bảo đảm sử dụng có trách nhiệm thơng tin cá nhân nhạy cảm • Những lời hứa ẩn danh khơng có khả xác định trơng cậy tơn trọng • Tơn trọng • Nhân phẩm tự trọng xây dựng bên liên quan với người chịu ảnh hưởng • Q trình TD&ĐG thực thành thạo nhanh nhạy • Thẩm quyền đại diện • Những người tham gia việc theo dõi đánh giá thể cách công thẩm quyền giới hạn báo cáo họ • Báo cáo cơng • Báo cáo cung cấp cơng cân đối phát TD&ĐG nên theo định hướng sử dụng • Xác định đáp ứng mong đợi • Hỗ trợ sử dụng • Sản phẩm TD&ĐG đáp ứng nhu cầu kiến thức chiến lược • Ghi chép khuyến nghị trì theo dõi thực • Một kho lưu trữ trung tâm tiêu báo cáo đánh giá truy cập trì TD&ĐG nên chắn phương pháp luận • Các tiêu phù hợp • Dựa liệu / chứng • Sự phù hợp • Ba cạnh • Chỉ tiêu chung phương pháp thu thập liệu sử dụng nơi để cải thiện chất lượng liệu cho phép phân tích xu hướng • Kết rõ ràng dựa chứng phân tích hệ thống • Phương pháp phù hợp với câu hỏi hỏi • Nhiều nguồn sử dụng để xây dựng kết đáng tin cậy TD&ĐG nên hoạt động có hiệu • Kế hoạch • Là thành phần tích hợp quản lý cơng, TD&ĐG thường xun tắc Đánh giá cuối kỳ - Thảo luận nhóm thành viên - Tổ chức họp - Nghiên cứu phân tích báo cáo quý trình thực - Nghiên cứu báo cáo quý theo dõi, đánh giá kết thực - Khảo sát - Quan sát - Phỏng vấn - Đánh giá hành động - Đánh giá báo cáo hàng tháng - Đánh giá báo cáo hàng quý Các danh mục khảo sát - Thảo luận nhóm định mức tham chiếu thành viên - Tổ chức họp - Nghiên cứu phân tích báo cáo quý trình thực - Nghiên cứu báo cáo quý theo dõi, đánh giá kết thực 2.2.3.2 Q trình thu thập thơng tin Q trình thu thập thông tin bao gồm giai đoạn: a) Chuẩn bị cho trình thu thập số liệu; b) Thu thập số liệu; c) Phân tích thuyết minh thơng tin, số liệu để theo dõi, đánh giá a) Chuẩn bị cho trình thu thập số liệu Quá trình theo dõi, đánh giá cần phải chuẩn bị xác định trước mặt lý thuyết yêu cầu thơng tin Các nhóm thu thập thơng tin cần phải tham khảo khung logic hay lý thuyết để đưa danh mục thông tin bối cảnh đảm bảo yêu cầu thu thập thông tin phải xác định cách rõ rằng, trình cần phải tìm hiểu nguồn thơng tin thu thập được: Xác định danh mục thơng tin; Phương pháp thu thập; Những nguồn thu thập thông tin; Trách nhiệm người thu thập thông tin b) Thu thập số liệu Trong trình thu thập thơng tin, nhóm thơng tin cần phải dựa vào thơng tin sẵn có phải tập trung vào loại thông tin chưa tổng kết thành văn Trên thực tế ln có vấn đề ảnh hưởng cách rõ ràng đến trình thực chiến lược (những yếu tố mang tính hệ thống, yếu tố cá nhân, lực ảnh hưởng đến trình tiến đến kết quả/mục tiêu thực chiến lược thống kê Trong q trình thu thập thơng tin cần quan tâm đến yếu tố sau: 38 Thành phần theo dõi Thời gian Chất lượng Phạm vi Chi phí Những vấn đề cần xem xét trình theo dõi - Những yêu cầu mặt thời gian để tiến đến kết đầu - Những đảm bảo thời gian yếu tố đầu vào - Ngun nhân trì hỗn yếu tố đầu vào - Những yếu tố ảnh hưởng trì hỗn q trình thực chiến lược - Cần thời gian để hoàn thành hoạt động sao? - Những xu hướng ảnh hưởng thấy mặt thời gian - Những hướng có tính khó khăn phải thực - Những hướng có ý nghĩa/tương xứng trình thực chiến lược - Những yêu cầu mặt chất lượng đầu ra? - Những yêu cầu chất lượng yếu tố đầu vào - Năng lực đội ngũ thực đưa kết đầu - Chất lượng chế, hạ tầng, phần mềm - Những xu hướng phù hợp/tương ứng - Những phạm vi/quy mô hoạt động tiến hành - Quy mô thời gian tương ứng - Quy mô yêu cầu mặt chất lượng - Quy mơ chi phí - Những xu hướng phù hợp/tương ứng - Chi phí hợp lý cho trình thực hoạt động - Những thay đổi chi phí sao? - Chi phí thời gian - Chi phí đảm bảo đạt chất lượng - Chi phí mối liên hệ với quy mô thực - Những xu hướng phù hợp/tương ứng c) Phân tích thuyết minh thơng tin, số liệu để theo dõi, đánh giá Cho đến chưa có phương pháp tiếp cận mang tính chất tiêu chuẩn để phân tích thuyết minh số liệu theo dõi, đánh giá Tuy nhiên xác tương xứng thông tin thuận tiện để đưa đánh giá tổng thể yếu tố có tính chất quan trọng để phân tích đánh giá số liệu thu thập Khi phân tích đánh giá số liệu cần quan tâm đến địa điểm thu thập thông tin mối quan hệ đa chiều thời gian, chất lượng, phạm vi, quy mơ để có nhận định có giá trị trình theo dõi, đánh giá thực chiến lược thống kê 2.2.4 Xây dựng báo cáo theo dõi, đánh giá 39 2.2.4.1 Tổng quan báo cáo cho trình theo dõi, đánh giá Đối với theo dõi, đánh giá thực chiến lược thống kê, trình báo cáo q trình mang tính chất tổng hợp kết tồn Có dạng báo cáo báo cáo chun đề q trình thực báo cáo thực hoạt động báo cáo thực cho trình theo dõi đánh giá a) Đối với báo cáo theo dõi, đánh giá cho hoạt động trình thực chiến lược thống kê, cần đảm bảo tính mô tả chi tiết, đưa thông tin trình thực hành vi, thách thức, nguồn lực, khung thời gian hoạt động b) Đối với báo cáo tổng hợp: Báo cáo cần tập trung vào việc đánh giá kết đạt so với mục tiêu đề đưa xu hướng cần thiết, nguyên nhân vấn đề, thảo luận thách thức phân tích trình thực chiến lược để đảm bảo đạt mục tiêu đề c) Báo cáo chuyên đề theo dõi, đánh giá chiến lược thống kê, bao gồm: Báo cáo tiến triển công việc theo quý; Báo cáo theo dõi, đánh giá cho quý; Báo cáo theo dõi, đánh giá hàng năm; Báo cáo kỳ; Báo cáo cuối kỳ Sau danh mục loại báo nội dung chủ yếu loại báo cáo Báo cáo tập trung vào toàn trình tiến triển cơng việc, Báo cáo tiến triển cơng thơng tin chi tiết phân tích dựa vào báo cáo hàng tháng việc theo quý - tập trung vào trình thực hành động, báo cáo mặt thời gian, khó khăn phát sinh, học kinh nghiệm Phân tích q trình tổng kết trình thực Hiện trạng kết đầu Sử dụng phương pháp khảo sát quan thực hiện, Báo cáo theo dõi, đánh báo cáo quý giá cho quý Cung cấp thông tin việc thực đánh giá khả nang tiến đến mục tiêu đề Đánh giá thách thức, cản trở có trình tiến đến mục tiêu Báo cáo xây dựng mang tính chất tổng thể q trình năm Đưa đánh giá chi tiết trình thực chiến Báo cáo theo dõi, đánh lược thống kê giá hàng năm Đưa vấn đề chung xảy quan, ngành trình thực chiến lược thống kê Phân tích báo cáo quý tổng hợp Báo cáo thực sở hội thảo hàng năm, báo 40 Báo cáo kỳ Báo cáo cuối kỳ cáo phân tích thơng tin, ý kiến phản hồi vấn đề nêu hội thảo tổng kết năm Báo cáo cần tập trung vào việc đưa kiến nghị, kế hoạch cho năm tiếp theo, yếu tố thay đổi trình thực chiến lược ngân sách cần đề cập Báo cáo thực nội báo cáo mở rộng bên ngồi Phân tích, mô tả kết đạt sở kế hoạch vạch khung logic Thảo luận vấn đề kế hoạch, học kinh nghiệm (tích cực, hạn chế) thay đổi cần thiết Báo cáo cần thực giai đoạn cuối kế hoạch thực chiến lược Tập trung vào kết đạt được, mức độ đạt mục đích đề ra, đóng góp vào q trình tiến đến mục tiêu Đánh giá, lượng hóa kết đạt so với khung tham chiếu yêu cầu Đưa kết đầu ra, tác động Đánh giá tính hiệu tác động 2.2.5.Khung pháp lý cho trình theo dõi, đánh giá Khung pháp lý Nguồn thông tin số liệu Cấu trúc báo cáo, đánh giá Vai trò trách nhiệm + Đối với quan thống kê quốc gia + Đối với quan thống kê tỉnh + Các Bộ, ngành Danh mục bộ, ngành tham gia Năng lực yêu cầu cho theo dõi, đánh giá Mối liên kết khung đánh giá hệ thống thống kê kê quốc gia với hệ thống khung đánh giá Bộ, ngành 2.2.6 Phụ lục Ma trận đánh giá mặt logic (Khung logic) Cấp độ mục Những tiêu có Phương pháp chứng Giả thiết tiêu thể đánh giá minh qua định lượng Tầm nhìn Nhiệm vụ Đánh giá kết đạt được/Đầu mong 41 muốn - Kết - Kết - Kết - Kết Ma trận theo dõi mức độ hoạt động STT Hoạt động Những vấn đề cần theo dõi Mức độ thường xuyên theo dõi Phương Nguồn pháp thu thông tin thập số liệu Cơ Cách sử quan/Người dụng thu thập thơng tin thơng tin Báo cáo tiến trình thực theo quý Báo cáo tổng kết năm Mẫu xây dựng khung tham chiếu cho đánh giá kỳ cuối kỳ III Đề xuất Hệ thống theo dõi đánh giá việc thực Chiến lược phát triển Thống kê Việt Nam giai đoạn 2011-2020 tầm nhìn đến năm 2030 Trên sở nghiên cứu kinh nghiệm quốc tế xây dựng tổ chức theo dõi đánh giá thực dự án, chương trình hay sách, kinh nghiệm liên quan đến thực chiến lược phát triển thống kê quốc gia, phần đưa đề xuất Hệ thống theo dõi đánh giá thực Chiến lược phát triển Thống kê Việt Nam giai đoạn 20112020 tầm nhìn đến năm 2030 (CLTK11-20) 3.1 Mục tiêu, nguyên tắc quy trình theo dõi đánh giá thực Chiến lược phát triển Thống kê Việt Nam giai đoạn 2011-2020 tầm nhìn đến năm 2030 Mục tiêu: Theo dõi đánh giá hoạt động quan trọng làm cho CLTK11-20 thành cơng Mục đích TD&ĐG nhằm cung cấp liệu cần thiết để: 1) hướng dẫn việc lập kế hoạch, điều phối thực chương trình hành động CLTK11-20, 2) đánh giá hiệu việc thực 42 chương trình hành động Chiến lược 3) xác định lĩnh vực để cải thiện thực điều chỉnh cần thiết Nguyên tắc TD&ĐG: Việc TD&ĐG thực CLTK11-20 phải tuân thủ nguyên tắc TD&ĐG sau: Nguyên tắc quản lý: minh bạch, trách nhiệm, tham gia đối tác Nguyên tắc khẳng định phát huy quyền bên liên quan Nguyên tắc định hướng quốc gia, thể chế địa phương Nguyên tắc đạo lý: bảo mật, tôn trọng, thẩm quyền đại diện Nguyên tắc định hướng sử dụng: đáp ứng nhu cầu quản lý hỗ trợ sử dụng Nguyên tắc phương pháp luận vững Nguyên tắc hiệu Quy trình TD&ĐG thực CLTK11-20 thể theo sơ đồ sau: Theo dõi đánh giá hai trình độc lập tương đối, quan hệ với nhau: Để có sở vững cho định điều chỉnh/thay đổi phải có kết đánh giá tốt; muốn có kết đánh giá tốt phải có 43 kết theo dõi tốt; ngược lại, yêu cầu kết đánh giá cần phải theo dõi, giám sát Sơ đồ: Theo dõi/giám sát đánh mắt xích quản lý Lập kế Thực hoạch Theo dõi tiến độ Tổng hợp, phân (KH 1) giám sát chất tích kết từ lượng họat động theo dõi, giám sát (Tự đánh giá nội - chủ quan) Đánh giá Điều tra, đánh giá bổ sung (Đấnh giá độc lập, bên khách quan) Điều chỉnh, thay đổi cần, lập kế hoạch (KH2) 3.2 Hệ thống TD&ĐG thực CLTK11-20 Các thách thức TD&ĐG cần giải nhiều cấp độ Đã có chuyển dịch từ cách tiếp cận dự án riêng lẻ sang cách tiếp cận chương trình ngành Trong TD&ĐG, thực tế dẫn đến việc xây dựng khung TD&ĐG dựa chương trình ngành Nhiều tổ chức phát triển, trước yêu cầu ngày gia tăng giải trình, xây dựng hệ thống TD&ĐG để trình bày kết đạt được, đặc biệt cấp văn phòng quốc gia Xem hộp cấp độ áp dụng hệ thống TD&ĐG khác Hộp 3: Các cấp độ áp dụng TD&ĐG khác Cấp dự án: xem xét nỗ lực tập trung tương đối ngắn hạn, thường tổ chức tài trợ phối hợp với quan đối tác tiến hành Cấp chương trình: nỗ lực dài hạn hơn, nhiều tổ chức tài trợ hợp tác với nhiều quan đối tác tiến hành Cấp ngành: xem xét cách tiếp cận chương trình ngành dài hạn với tham gia nhiều nhà tài trợ quan đối tác ngành cụ thể Cấp tổ chức: tồn nỗ lực chương trình tổ chức tài trợ, kết hợp với tổ chức tài trợ khác đối tác Cấp quốc gia: ảnh hưởng tất chương trình nhà tài trợ quốc tế nỗ lực nước phát triển Cấp khu vực: xem xét ảnh hưởng sách biện pháp can thiệp cụ thể thực khu vực thông tin tổng thể số liệu thống kê quốc gia nhằm so sánh xu hướng mơ hình phát triển khu vực Cấp toàn cầu: xem xét ảnh hưởng sách biện pháp can thiệp cụ thể thực tồn cầu thơng tin tổng thể số liệu thống kê quốc gia nhằm xác định xu hướng mơ hình phát triển toàn cầu 44 Hệ thống TD&ĐG thiết lập nhằm thực hoạt động thu thập, tổng hợp, phân tích sử dụng liệu với mục tiêu đưa hỗ trợ thích hợp kịp thời việc triển khai chương trình hành động CLTK11-20 cách hiệu Với nhiều quan hệ đối tác hình thành nhằm vươn tới mục tiêu phát triển, hệ thống TD&ĐG cần phải bao trùm nỗ lực lớn quan hệ đối tác nỗ lực tổ chức tham gia Ở hầu hết quốc gia, quan thống kê trung ương đóng vai trị đầu mối thống kê nhà nước Do đó, quan đóng vai trò chủ chốt thiết kế triển khai thực Chiến lược Hệ thống TD&ĐG thực CLTK11-20 xây dựng bao gồm cấp dựa tảng hệ thống tổ chức thống kê có Tổng cục Thống kê, gồm: Cấp quốc gia: Ban TD&ĐG quốc gia đặt Tổng cục Thống kê (tại Thanh tra Tổng cục Thống kê) quản lý toàn hệ thống TD&ĐG CLTK11-20, theo dõi đánh giá việc thực tất chương trình hành động có CLTK11-20 phạm vi tồn quốc Cấp chương trình: Bảy Tổ TD&ĐG cấp chương trình đặt đơn vị đầu mối triển khai thực chương trình hành động CLTK11-20 Cụ thể: a) Tổ TD&ĐG Chương trình - Hồn thiện thể chế, khuôn khổ pháp lý chế điều phối hoạt động thống kê – Chương trình - Đổi nâng cao chất lượng hoạt động thu thập thông tin thống kê - đặt Vụ Phương pháp chế độ thống kê công nghệ thông tin TCTK, chịu trách nhiệm theo dõi đánh giá hoạt động Chương trình Chương trình 3, báo cáo tình hình thực chương trình cho Ban TD&ĐG quốc gia b) Tổ TD&ĐG Chương trình - Tăng cường nghiên cứu ứng dụng phương pháp luận thống kê quy trình thống kê theo tiêu chuẩn quốc tế - Chương trình - Đẩy mạnh phân tích dự báo thống kê – đặt Viện Khoa học Thống kê TCTK, chịu trách nhiệm theo dõi đánh giá hoạt động Chương trình Chương trình 5, báo cáo tình hình thực chương trình cho Ban TD&ĐG quốc gia 45 c) Tổ TD&ĐG Chương trình - Đổi mới, hoàn thiện nâng cao chất lượng hoạt động xử lý, tổng hợp phổ biến thông tin thống kê - đặt Vụ Thống kê tổng hợp TCTK, chịu trách nhiệm theo dõi đánh giá hoạt động Chương trình 4, báo cáo tình hình thực chương trình cho Ban TD&ĐG quốc gia d) Tổ TD&ĐG Chương trình - Ứng dụng, phát triển cơng nghệ thơng tin truyền thông hoạt động thống kê - đặt Trung tâm Tin học thống kê khu vực I TCTK, chịu trách nhiệm theo dõi đánh giá hoạt động Chương trình 6, báo cáo tình hình thực chương trình cho Ban TD&ĐG quốc gia e) Tổ TD&ĐG Chương trình - Phát triển nhân lực ngành thống kê đặt Vụ Tổ chức cán TCTK, chịu trách nhiệm theo dõi đánh giá hoạt động Chương trình 7, báo cáo tình hình thực chương trình cho Ban TD&ĐG quốc gia g) Tổ TD&ĐG Chương trình - Mở rộng tăng cường hiệu hợp tác quốc tế lĩnh vực thống kê - đặt Vụ Thống kê nước Hợp tác quốc tế TCTK, chịu trách nhiệm theo dõi đánh giá hoạt động Chương trình 8, báo cáo tình hình thực chương trình cho Ban TD&ĐG quốc gia h) Tổ TD&ĐG Chương trình - Tăng cường sở vật chất huy động nguồn lực tài phục vụ hoạt động thống kê - đặt Vụ Kế hoạch tài TCTK, chịu trách nhiệm theo dõi đánh giá hoạt động Chương trình 9, báo cáo tình hình thực chương trình cho Ban TD&ĐG quốc gia Cấp dự án: Cán TD&ĐG cấp dự án bố trí đơn vị thực hoạt động cụ thể Chương trình hành động CLTK11-20, chịu trách nhiệm thu thập thông tin, xử lý, tổng hợp, viết báo cáo theo dõi đánh giá tình hình thực thuộc phạm vi hoạt động Chương trình hành động cho Tổ TD&ĐG cấp chương trình Bên cạnh đó, Nhóm hỗ trợ kỹ thuật TD&ĐG Tổng cục Thống kê thành lập với tham gia đơn vị thuộc Tổng cục Thống kê, 46 viện nghiên cứu trường đại học, chuyên gia từ số tổ chức quốc tế để cung cấp hỗ trợ kỹ thuật cho hoạt động theo dõi đánh giá Xây dựng hệ thống theo dõi đánh giá nỗ lực dài hạn địi hỏi phải có tham gia tích cực hỗ trợ lâu dài cấp khác Ngồi nâng cao trách nhiệm giải trình, hệ thống TD&ĐG cịn giúp bên có liên quan học hỏi từ hành vi nâng cao kiến thức hoạt động, chương trình hành động ưu tiên chiến lược có hiệu quả, lý Nền tảng kiến thức nâng cao sử dụng để cải tiến chương trình chiến lược phát triển sau Cán TD&ĐG cấp dự án thu thập, tổng hợp quản lý toàn số liệu liên quan đến theo dõi, đánh giá tình hình thực hoạt động thuộc phạm vi chương trình hành động đơn vị, báo cáo cho Tổ TD&ĐG cấp chương trình Tổ TD&ĐG cấp chương trình xử lý, tổng hợp phân tích số liệu báo cáo tất hoạt động thuộc phạm vi chương trình hành động mình, báo cáo đề xuất ý kiến đóng góp để cải tiến hay điều chỉnh chương trình cho Ban TD&ĐG quốc gia Ban TD&ĐG quốc gia đạo đơn vị hệ thống TD&ĐG phối hợp với đơn vị có liên quan thu thập, tổng hợp, phân tích số liệu TD&ĐG tồn chương trình hành động thực CLTK11-20; tổ chức kiểm tra, giám sát đánh giá kết việc thực CLTK11-20, xây dựng báo cáo TD&ĐG cho lãnh đạo Tổng cục Thống kê Bộ Kế hoạch Đầu tư để trình Chính phủ có biện pháp đạo cần thiết Nhóm hỗ trợ kỹ thuật cung cấp hỗ trợ kỹ thuật cho đơn vị TD&ĐG cấp quốc gia cấp chương trình, thực nghiên cứu đánh giá độc lập, hỗ trợ kỹ thuật giúp cán chương trình người định dễ dàng sử dụng số liệu để triển khai chương trình, xác định ưu tiên, cải tiến hay điều chỉnh hành động chiến lược cần thiết Hệ thống TD&ĐG gắn liền với Khung TD&ĐG thực CLTK1120 Ban TD&ĐG quốc gia lập vận hành Cơ sở liệu thơng tin quản lý máy tính cấp quốc gia cấp chương trình Các hồ sơ 47 Chương trình phải chứa đựng số liệu chi tiết Chương trình hành động với kế hoạch tiến độ thực chi tiết Cơ sở liệu chứa đựng hồ sơ hoạt động tất Chương trình Tổ TD&ĐG cấp chương trình chuẩn bị gửi lên Ban TD&ĐG quốc gia 3.3 Phương pháp công cụ TD&ĐG thực CLTK11-20 Việc theo dõi đánh giá sử dụng phương pháp quản lý dựa kết để nâng cao hoạt động chương trình cách so sánh phân tích kết thực tế với kết theo kế hoạch thông qua điều tra đầu kỳ, giám sát thường xuyên, báo cáo/điều chỉnh điều tra cuối kỳ Các cán quản lý chương trình theo dõi kết cách theo dõi đầu đo lường đóng góp thay đổi theo thời gian Phương pháp cơng cụ TD&ĐG trình bày bảng sau: Quá trình theo dõi Phương pháp thu thập liệu đánh giá Công cụ thu thập liệu Họp xem xét theo • Quan sát Danh sách kiểm dõi đánh giá • Phỏng vấn tra hàng tháng • Xem xét hoạt động • Xem xét báo cáo hàng tháng • Các họp Báo cáo tiến độ • Xem xét phân tích báo cáo Định dạng báo hàng quý hoạt động cáo • Xem xét phân tích báo cáo hàng tháng • Biên họp Ủy ban thống kê lĩnh vực Đi thực địa theo • Quan sát Danh sách kiểm dõi hàng quý • Phỏng vấn tra • Xenm xét hoạt động • Xem xét báo cáo tiến độ hàng quý 48 • Các họp Họp xem xét • Báo cáo thực địa TD&ĐG hàng q • Xem xét phân tích báo cáo Danh sách kiểm tra thực địa Báo cáo theo dõi • Xem xét phân tích báo cáo Định dạng báo đánh giá hàng tiến độ hàng quý cáo quý • Báo cáo thực địa / Báo cáo TD&ĐG hàng quý Họp sơ kết thực • Xem xét phân tích báo cáo Danh sách kiểm tháng tiến độ hàng quý tra • Báo cáo thực địa / Báo cáo Định dạng báo TD&ĐG hàng quý cáo Báo cáo theo dõi • Xem xét phân tích báo cáo Định dạng báo đánh giá việc theo dõi đánh giá hàng quý cáo Hội thảo tổng kết • Xem xét phân tích báo cáo Danh sách kiểm việc thực theo dõi đánh giá hàng quý tra hàng năm • Các họp (những người thực thực hàng năm bên liên quan cấp cao) Đánh giá thực • Khảo sát/điều tra Điều khoản tham kỳ chiếu • Quan sát • Phỏng vấn • Xem xét hoạt động • Xem xét báo cáo hàng tháng • Xem xét báo cáo tiến độ hàng quý, hàng quý báo cáo TD&ĐG hàng năm • Thảo luận nhóm tập trung • Các họp 49 Đánh giá thực • Khảo sát/điều tra Điều khoản tham cuối chiếu • Quan sát • Phỏng vấn • Xem xét hoạt động • Xem xét báo cáo hàng tháng • Xem xét báo cáo tiến độ hàng quý, hàng quý TD&ĐG hàng năm, báo cáo đánh giá kỳ • Thảo luận nhóm tập trung • Các họp Để thực cách hiệu công tác theo dõi kết quả, cán chương trình cần thiết lập liệu ban đầu hay thực đo lường lần đầu tiêu lựa chọn, đo lường tiêu thực hiện, thiết kế chế hoạt động bao gồm hoạt động lên kế hoạch thực địa, họp với bên liên quan phân tích cách hệ thống báo cáo Đánh giá thường thực giai đoạn: i) Đánh giá ban đầu; ii) Đánh giá kỳ; iii) Đánh giá kết thúc; iv) Đánh giá tác động i) Đánh giá ban đầu: Được tiến hành chương trình, dự án bắt đầu nhằm xem xét tình hình thực tế so với thực trạng ban đầu mô tả văn kiện chương trình, dự án phê duyệt nhằm tìm giải pháp giai đoạn ban đầu chuẩn bị thiết kế kỹ thuật lập kế hoạch làm việc chi tiết ii) Đánh giá kỳ: Được tiến hành vào chu trình thực chương trình hành động nhằm xem xét tiến độ thực từ bắt đầu và, cần thiết, khuyến nghị điểu chỉnh iii) Đánh giá kết thúc - tiến hành chương trình hành động kết thúc nhằm đánh giá kết đạt được, xem xét lại tồn q trình thực hiện, rút học cần thiết cung cấp sở cho việc chuẩn bị báo cáo kết thúc 50 iv) Đánh giá tác động: Được tiến hành thời điểm thích hợp vịng đến năm sau chương trình kết thúc hoạt động kết đưa vào sử dụng thực tiễn để đánh giá hiệu suất, tính bền vững tác động kinh tế xã hội so với mục tiêu ban đầu Đến cuối giai đoạn, đon vị TD&ĐG tiến hành thực điều tra cuối kỳ để đo lường ảnh hưởng chương trình can thiệp sở định hướng cho Chiến lược quốc gia Giữa hai điều tra đầu kỳ cuối kỳ, đơn vị TD&ĐG tổ chức “giám sát hỗ trợ” để theo dõi tiến độ việc đạt kết đầu chiến lược Chương trình hành động Kết có kiến nghị đưa vào hệ thống báo cáo để chuẩn bị cho việc rà soát kế hoạch hoạt động năm phiên họp kế hoạch hành động năm CLTK11-20 3.4 Đánh giá hiệu chương trình theo dõi đánh giá Để đánh giá hiệu chương trình TD&ĐG, sử dụng tiêu chí đánh giá chất lượng Hệ thống TD&ĐG sau: • Hữu ích - hệ thống TD&ĐG cung cấp thông tin thực tiễn cho đối tượng sử dụng dự kiến • Khả thi – phương pháp, cơng cụ, thời gian quy trình thủ tục đề xuất phải thực tiễn, thận trọng đạt hiệu chi phí • Đúng đắn – hoạt động TD&ĐG thực hợp pháp, có đạo lý có tính đến lợi ích đối tượng chịu tác động kết TD&ĐG mang lại • Chính xác – đầu TD&ĐG bộc lộ truyền thơng tin kỹ thuật thích đáng để hỗ trợ việc quản lý công tác thực đầu tư hiệu suất hiệu Các chương trình, dự án quản lý tốt phải tự thích nghi với hồn cảnh thay đổi Tương tự, hệ thống TD&ĐG cần xem xét, điều chỉnh thường xuyên cần cải tiến với tiến trình thực chương trình, dự án Hệ thống TD&ĐG cần đáp ứng yêu cầu phản hồi thông tin phát sinh đối tượng sử dụng thông qua việc thiết kế lại đầu tầm nhìn bên liên quan mở rộng 51 TÀI LIỆU THAM KHẢO Roger Edmunds and Tim Marchant (2008), Official Statistics and Monitoring and Evaluation Systems in Developing Countries: Friends or Foes?, PARIS21 Roger Edmunds and Tim Marchant (2008), Official Statistics and Monitoring and Evaluation Systems in Developing Countries: Friends or Foes?, PARIS21 South Africa (2007), Policy Framework for the Goverment-wide Monitoring and Evaluation System, Presidency Republic of South Africa Hội nghị bàn tròn quốc tế lần thứ ba Quản lý kết phát triển (2007), Theo dõi Đánh giá: Tăng cường kết phát triển, Hà Nội South Africa (2007), Policy Framework for the Goverment-wide Monitoring and Evaluation System, Presidency Republic of South Africa Janet Shapiro (2001), Monitoring and Evaluation, CIVICUS South Africa (2007), Policy Framework for the Goverment-wide Monitoring and Evaluation System, Presidency Republic of South Africa Hội nghị bàn tròn quốc tế lần thứ ba Quản lý kết phát triển (2007), Theo dõi Đánh giá: Tăng cường kết phát triển, Hà Nội Roger Edmunds and Tim Marchant (2008), Official Statistics and Monitoring and Evaluation Systems in Developing Countries: Friends or Foes?, PARIS21 10 Janet Shapiro (2001), Monitoring and Evaluation, CIVICUS UNFPA (2008), Các thuật ngữ theo dõi, đánh giá quản lý dựa kết quả, Hà Nội 12 South Africa (2007), Policy Framework for the Goverment-wide Monitoring and Evaluation System, Presidency Republic of South Africa 11 52 ... I Tổng quan kinh nghiệm quốc tế thiết kế tổ chức triển khai hoạt động theo dõi đánh giá thực dự án, chương trình, chiến lược phát triển 1.1 Khái niệm Theo dõi Đánh giá phát triển. .. nghiên cứu kinh nghiệm quốc tế xây dựng tổ chức theo dõi đánh giá thực dự án, chương trình hay sách, kinh nghiệm liên quan đến thực chiến lược phát triển thống kê quốc gia, phần đưa đề xuất Hệ thống... kinh nghiệm quốc tế thiết kế tổ chức triển khai hoạt động theo dõi đánh giá thực dự án, chương trình, chiến lược phát triển Trong hai thập kỷ gần có số lượng đáng kể tài liệu số tổ chức quốc tế số