Dự án và tổ chức phi lợi nhuận không có doanh thu làm thước đo cuối cùng, nên bộ chỉ số phải tách rõ đầu ra (đã làm được bao nhiêu việc) với kết quả (cuộc sống hay hành vi của người hưởng lợi đã thay đổi gì). Báo cáo chỉ toàn đầu ra như số buổi tập huấn, số người tham dự thì đẹp, nhưng không trả lời được câu dự án có tạo ra thay đổi hay không.
Bài này viết cho điều phối viên dự án, cán bộ theo dõi đánh giá ở các tổ chức xã hội, nhóm thiện nguyện có quy mô, câu lạc bộ cộng đồng và người làm dự án trong doanh nghiệp xã hội. Trọng tâm là chọn chỉ số cho cả dự án và tổ chức, dùng AI để soạn và phản biện. Các yêu cầu báo cáo cụ thể của từng nhà tài trợ khác nhau; luôn đối chiếu với văn bản thoả thuận của bạn. Mọi ví dụ là giả định.
Đầu vào, hoạt động, đầu ra, kết quả, tác động
Khung suy nghĩ phổ biến trong giới làm dự án là chuỗi kết quả: đầu vào (tiền, người, thời gian) đi qua hoạt động (tổ chức lớp học, phát tài liệu, tư vấn) để tạo ra đầu ra (số người được học, số buổi tư vấn), từ đó mong đợi kết quả (người học thay đổi kiến thức, thực hành), và về lâu dài là tác động (cải thiện đời sống của cộng đồng). Nhiều nhà tài trợ dùng các biến thể như khung logic hay lý thuyết thay đổi; tên gọi khác nhau nhưng ý chính là vậy.
Ví dụ giả định: một dự án ở Đắk Lắk hướng dẫn phụ nữ dân tộc thiểu số ghi chép thu chi gia đình. Đầu ra là sáu mươi người hoàn thành khoá học. Kết quả mong đợi là sau sáu tháng, một phần lớn trong số đó vẫn ghi chép thu chi đều đặn và dùng nó để quyết định chi tiêu. Tác động lâu dài có thể là giảm vay nóng, nhưng đó là thứ dự án sáu tháng khó chứng minh được một mình.
Bộ chỉ số tốt có cả đầu ra lẫn kết quả, và thành thật về tác động. Đầu ra dễ đo và dự án kiểm soát được; kết quả khó đo hơn nhưng là lý do dự án tồn tại; tác động thường chịu ảnh hưởng của quá nhiều yếu tố để quy hết cho một dự án nhỏ.
Bộ chỉ số mẫu cho một dự án cộng đồng
Bảng dưới minh hoạ với dự án giả định ở trên. Mỗi dự án cần chỉ số riêng theo mục tiêu của mình, nhưng cấu trúc ba tầng giống nhau.
| Tầng | Chỉ số ví dụ | Cách thu thập |
|---|---|---|
| Đầu ra | Số người hoàn thành đủ số buổi; số buổi hướng dẫn tại nhà đã thực hiện | Danh sách điểm danh, sổ theo dõi của cán bộ |
| Đầu ra | Tỷ lệ người tham gia thuộc đúng nhóm mục tiêu | Đối chiếu tiêu chí chọn lựa lúc đăng ký |
| Kết quả | Tỷ lệ người vẫn ghi chép thu chi sau sáu tháng | Thăm hộ ngẫu nhiên, hỏi và xem sổ có sự đồng ý |
| Kết quả | Số người kể được một quyết định chi tiêu đã thay đổi nhờ ghi chép | Phỏng vấn ngắn, ghi lại câu chuyện |
| Quá trình | Tỷ lệ bỏ học giữa chừng và lý do | Hỏi thăm người bỏ học |
| Chi phí | Chi phí cho mỗi người hoàn thành khoá học | Tổng chi chia cho số người hoàn thành |
Chỉ số "thuộc đúng nhóm mục tiêu" hay bị quên nhưng rất quan trọng: nếu dự án dành cho hộ khó khăn mà người tham gia phần lớn là hộ khá giả hơn vì họ có thời gian, đầu ra vẫn đẹp mà dự án đã lệch khỏi mục tiêu. Chỉ số chi phí chỉ dùng để theo dõi và so sánh nội bộ giữa các đợt, không phải để so với tổ chức khác.
Đường cơ sở: không đo lúc đầu thì không nói được thay đổi
Đo trước khi bắt đầu. Muốn nói người học thay đổi, phải biết lúc đầu họ ở đâu. Một khảo sát ngắn khi đăng ký, hỏi đúng những điều sẽ hỏi lại lúc cuối, là đường cơ sở tối thiểu.
Giữ câu hỏi giống nhau. Nếu đầu kỳ hỏi "có ghi chép thu chi không" mà cuối kỳ hỏi "có ghi chép đều đặn mỗi tuần không", hai con số không so được. Viết bộ câu hỏi một lần và dùng lại.
Cân nhắc nhóm so sánh khi có thể. Nếu có một nhóm tương tự chưa tham gia dự án, đo cả nhóm đó giúp tách thay đổi do dự án với thay đổi do hoàn cảnh chung. Với dự án nhỏ, điều này không phải lúc nào cũng làm được; khi không làm được, nói rõ trong báo cáo.
Ghi lại hoàn cảnh. Mất mùa, dịch bệnh, giá cả biến động đều có thể làm kết quả lên xuống. Ghi lại những sự kiện đó trong sổ theo dõi để khi viết báo cáo, bạn giải thích được và không quy hết cho dự án.
Những cách đo nên tránh
Chỉ báo cáo số người tham dự. Số người tham dự là đầu ra, không phải kết quả. Dùng nó một mình dễ dẫn tới chạy theo số đông, mời cả những người không thuộc đối tượng cho đủ danh sách.
Chỉ chọn câu chuyện thành công để kể. Câu chuyện thay đổi là bằng chứng quý, nhưng chỉ kể chuyện tốt mà giấu chuyện không hiệu quả làm báo cáo mất tin cậy. Báo cáo trung thực về điều chưa làm được giúp nhà tài trợ hiểu và thường được trân trọng hơn.
Thu thập dữ liệu cá nhân nhiều hơn cần thiết. Đừng hỏi người hưởng lợi những thông tin không dùng cho chỉ số nào. Mỗi câu hỏi thêm là một gánh nặng cho người trả lời và một rủi ro bảo vệ dữ liệu cho tổ chức.
Quy tác động dài hạn cho một dự án ngắn. Viết "dự án đã giảm nghèo cho cộng đồng" sau sáu tháng là nói quá. Hãy nói ở mức bằng chứng cho phép: dự án đã tạo ra thay đổi gì ở người tham gia, và điều đó có thể góp phần vào mục tiêu dài hạn thế nào.
Chỉ số ở cấp tổ chức, không chỉ cấp dự án
Một tổ chức phi lợi nhuận chạy nhiều dự án cùng lúc cần thêm vài chỉ số cho chính nó: tổ chức có khoẻ không, có giữ được người không, có phụ thuộc quá vào một nguồn tiền không. Bảng dưới là gợi ý, mỗi tổ chức chọn theo hoàn cảnh.
| Chỉ số | Đo gì | Vì sao cần |
|---|---|---|
| Tỷ trọng chi cho chương trình | Phần chi trực tiếp cho hoạt động với người hưởng lợi so với tổng chi | Cho thấy tiền đi đến đâu, nhưng không nên ép quá thấp phần quản lý vì tổ chức cần người và hệ thống để vận hành |
| Mức phụ thuộc nguồn tài trợ | Phần ngân sách đến từ nguồn lớn nhất | Một nguồn chiếm phần lớn là rủi ro khi nguồn đó dừng |
| Giữ chân nhân sự và tình nguyện viên | Số người còn gắn bó sau một năm | Người mới liên tục là mất kinh nghiệm thực địa và quan hệ với cộng đồng |
| Báo cáo đúng hạn | Số báo cáo cho nhà tài trợ và cơ quan quản lý nộp đúng hạn | Chỉ số ngưỡng, giữ uy tín của tổ chức |
| Phản hồi của cộng đồng | Số góp ý, khiếu nại từ người hưởng lợi và cách đã xử lý | Tổ chức có lắng nghe người mình phục vụ không |
Các chỉ số cấp tổ chức nên được ban điều hành nhìn mỗi quý, tách riêng khỏi báo cáo dự án. Chúng hiếm khi được nhà tài trợ hỏi tới, nhưng là thứ quyết định tổ chức có còn tồn tại để làm dự án tiếp theo hay không.
Câu lệnh nhờ AI soạn khung chỉ số và báo cáo
AI giúp được nhiều ở khâu soạn khung, viết câu hỏi khảo sát, và tóm tắt câu chuyện đã thu thập. Tuyệt đối không dán tên, ảnh, địa chỉ, hoàn cảnh cá nhân nhận diện được của người hưởng lợi, nhất là trẻ em và nhóm dễ tổn thương. Câu lệnh mẫu:
- "Dự án sáu tháng hướng dẫn ghi chép thu chi gia đình cho sáu mươi phụ nữ ở vùng nông thôn. Hãy đề xuất chuỗi kết quả từ đầu vào tới tác động, và với mỗi tầng đầu ra, kết quả, một đến hai chỉ số đo được kèm cách thu thập phù hợp với người ít dùng điện thoại."
- "Viết bộ năm câu hỏi khảo sát đầu kỳ và cuối kỳ giống hệt nhau, ngôn ngữ đơn giản, tránh câu hỏi dẫn dắt, để đo thay đổi thói quen ghi chép thu chi."
- "Đây là mười câu chuyện đã được ẩn danh từ người tham gia: [dán]. Hãy gom theo loại thay đổi, chỉ ra những câu chuyện cho thấy dự án chưa hiệu quả, và không thêm chi tiết không có trong câu chuyện gốc."
- "Phản biện bộ chỉ số dự án sau: chỉ số nào chỉ là đầu ra đội lốt kết quả, chỉ số nào khó thu thập trung thực ở thực địa?"
Đặc biệt cảnh giác khi AI viết báo cáo: nó hay thêm thắt cho câu chuyện hay hơn hoặc đưa ra con số nghe hợp lý. Mọi con số, mọi trích dẫn trong báo cáo phải truy ngược được về sổ sách và ghi chép gốc. Báo cáo gửi nhà tài trợ là văn bản tổ chức chịu trách nhiệm.
Báo cáo cho nhà tài trợ và cho chính tổ chức
Báo cáo cho nhà tài trợ nên mở đầu bằng bảng chỉ số so với chỉ tiêu đã cam kết, mỗi chỉ số kèm một câu giải thích chênh lệch. Sau đó là phần kết quả với bằng chứng, câu chuyện tiêu biểu (cả thành công và chưa thành công), và bài học. Nếu có chỉ số trượt, nói rõ nguyên nhân và cách điều chỉnh; nhiều nhà tài trợ quan tâm tới khả năng học hỏi của tổ chức không kém con số.
Nhưng đừng chỉ đo cho nhà tài trợ. Tổ chức cũng cần một bộ chỉ số nội bộ để tự học: mô hình nào hiệu quả, chi phí ở đâu cao bất thường, nhóm nào khó tiếp cận. Một số chỉ số nội bộ có thể không bao giờ vào báo cáo, như tỷ lệ cán bộ thực địa quá tải, nhưng chúng quyết định dự án có bền hay không.
Khi dự án dùng dữ liệu về trẻ em, người khuyết tật hay nạn nhân của bạo lực, các yêu cầu về đồng ý và bảo mật càng chặt. Làm theo chính sách bảo vệ của tổ chức và nhà tài trợ, và khi có câu hỏi pháp lý về dữ liệu cá nhân, nên hỏi luật sư, có thể bắt đầu trên AI Cố Vấn tại aicovan.com. Nếu cần dựng bảng theo dõi tự động hay phân tích dữ liệu khảo sát sâu, xem thêm AI Phân Tích.
Câu hỏi thường gặp
Đầu ra và kết quả khác nhau thế nào?
Đầu ra là những gì dự án làm được và đếm trực tiếp, như số buổi tập huấn, số người hoàn thành. Kết quả là thay đổi ở người hưởng lợi nhờ những đầu ra đó, như họ áp dụng được kiến thức. Báo cáo tốt có cả hai.
Dự án nhỏ có cần đường cơ sở không?
Rất nên có, dù chỉ là một khảo sát ngắn lúc đăng ký. Không có đường cơ sở thì không nói được người tham gia đã thay đổi bao nhiêu, và kết quả cuối kỳ chỉ là một con số không có điểm so sánh.
Có nên dùng AI viết báo cáo cho nhà tài trợ không?
AI có thể giúp soạn khung, viết lại câu cho rõ, tóm tắt câu chuyện đã ẩn danh. Nhưng mọi con số và nhận định phải được người trong dự án kiểm lại với ghi chép gốc. Tổ chức chịu trách nhiệm cho từng câu trong báo cáo.
Chỉ số chi phí trên mỗi người hưởng lợi có nên so với tổ chức khác không?
Không nên, vì bối cảnh, vùng, đối tượng và chất lượng can thiệp khác nhau rất nhiều. Dùng chỉ số này để so các đợt trong chính dự án của bạn và để tìm chỗ chi phí bất thường.
Thu thập câu chuyện thay đổi thế nào cho trung thực?
Hỏi câu mở như điều gì đã thay đổi kể từ khi tham gia, ghi đúng lời người kể, và thu cả những câu chuyện cho thấy dự án chưa giúp được. Xin phép trước khi dùng câu chuyện, ẩn danh người kể.
Dán dữ liệu người hưởng lợi vào chatbot có được không?
Không nên dán thông tin nhận diện được cá nhân, nhất là của trẻ em và nhóm dễ tổn thương. Chỉ dùng số tổng hợp hoặc câu chuyện đã ẩn danh hoàn toàn, theo chính sách bảo vệ dữ liệu của tổ chức và nhà tài trợ.