Đánh giá định lượng dùng con số đếm hoặc đo được để trả lời "bao nhiêu, bao lâu, bao nhiêu phần trăm". Đánh giá định tính dùng lời mô tả, nhận xét, câu chuyện để trả lời "như thế nào, vì sao, chất lượng ra sao". Khi đo kết quả của một nhóm, hai loại bổ sung cho nhau: số cho thấy hiện tượng, lời giải thích cho thấy bản chất.
Nhiều đơn vị rơi vào một trong hai cực. Có nơi chỉ tin con số và bỏ qua mọi thứ không vào được bảng tính; có nơi đánh giá hoàn toàn bằng cảm nhận của người quản lý. Bài này trình bày cách ghép hai loại một cách có kỷ luật: thang mô tả mức độ cho thứ khó đếm, cách thu thập nhận xét để không thành giai thoại, và cách dùng chatbot gom nhóm phản hồi mà vẫn giữ quyền nhận định cho con người.
Mỗi loại thấy được gì và bỏ sót gì
Con số mạnh ở chỗ so sánh được qua thời gian và giữa các nhóm, ít bị ảnh hưởng bởi trí nhớ hay thiện cảm. Tỷ lệ học viên hoàn thành khoá học, số ngày trung bình để xử lý một hồ sơ, số khiếu nại mỗi tháng đều là thông tin khó cãi. Nhưng con số không nói được vì sao học viên bỏ ngang, hồ sơ chậm ở khâu nào, khách khiếu nại vì điều gì.
Nhận định định tính mạnh ở chỗ giải thích. Một câu phản hồi như "bài giảng hay nhưng giờ học trùng ca làm của em" nói nhiều hơn mọi con số về tỷ lệ bỏ học. Điểm yếu của nó là khó tổng hợp, dễ bị chọn lọc: người quản lý thường nhớ lời khen gần nhất hoặc lời chê gay gắt nhất, không phải bức tranh chung.
Vì vậy, cách dùng hợp lý là để con số chỉ ra chỗ cần nhìn và để nhận định định tính giải thích chỗ đó. Khi tỷ lệ hoàn thành khoá học giảm, đọc phản hồi của những người bỏ ngang. Khi phản hồi định tính liên tục nhắc tới một vấn đề, tìm con số để biết vấn đề đó lớn tới đâu.
Ghép số với nhận định: ví dụ giả định ở ba đơn vị
Mỗi dòng dưới đây là một cặp: con số cho thấy hiện tượng và nguồn định tính giải thích nó.
| Đơn vị | Con số theo dõi | Nguồn định tính đi kèm | Câu hỏi cặp này trả lời |
|---|---|---|---|
| Trung tâm đào tạo kỹ năng ở Huế | Tỷ lệ học viên hoàn thành khoá | Hai câu hỏi mở trong phiếu cuối khoá và gọi hỏi người bỏ ngang | Vì sao người học bỏ ngang và nên đổi gì |
| Tổ chức phi lợi nhuận hỗ trợ nông hộ ở Gia Lai | Số hộ áp dụng kỹ thuật mới sau một vụ | Ghi chép thăm đồng theo mẫu cố định | Hộ áp dụng gặp khó ở bước nào |
| Phòng hành chính của công ty sáu mươi người | Số yêu cầu xử lý trễ hạn | Phản hồi ngắn của các phòng sau mỗi quý | Phòng nào thấy phiền nhất và vì sao |
Để ý cột thứ ba đều có hình thức cố định: câu hỏi mở cố định, mẫu ghi chép cố định, kỳ thu cố định. Định tính không có nghĩa là tuỳ hứng. Thu thập theo một khuôn ổn định thì nhận xét giữa các kỳ mới so được với nhau.
Dựng thang mô tả cho thứ khó đếm
Với những kết quả khó quy ra số như chất lượng một bản kế hoạch hay mức chủ động của nhóm trong dự án, thang mô tả mức độ là cách biến nhận định thành thứ nhất quán. Cách dựng:
- Chọn một khía cạnh cụ thể cần đánh giá, ví dụ "bản đề xuất dự án gửi nhà tài trợ".
- Xác định ba hoặc bốn mức, đặt tên đơn giản: chưa đạt, đạt, tốt, rất tốt.
- Với mỗi mức, viết hai đến ba dấu hiệu quan sát được. Ví dụ mức đạt: có mục tiêu đo được, có ngân sách khớp hoạt động; mức tốt: thêm phần rủi ro và cách xử lý.
- Cho hai người dùng thang chấm độc lập vài bản mẫu, so kết quả. Chỗ nào hai người chấm khác nhau là chỗ mô tả chưa rõ.
- Sửa mô tả cho tới khi hai người chấm khá khớp, rồi mới đưa vào dùng chính thức.
- Lưu lại các bản mẫu đã chấm làm ví dụ cho từng mức, để người mới dùng thang có cái để đối chiếu thay vì chỉ đọc lời mô tả.
Thang mô tả dùng để đánh giá sản phẩm công việc của nhóm, không phải để xếp hạng con người. Khi thang được dùng trong đánh giá nhân viên, đó là quy trình nhân sự với những yêu cầu riêng về công bằng và khiếu nại; cần quy chế của đơn vị và người làm nhân sự tham gia.
Thu thập nhận xét để không thành giai thoại
Hỏi cùng câu hỏi, cùng thời điểm. Một câu hỏi mở cố định cuối mỗi khoá học hoặc mỗi quý cho phép so được nhận xét qua các kỳ. Đổi câu hỏi liên tục sẽ chỉ thu được những mảnh rời rạc.
Thu từ cả người hài lòng lẫn không hài lòng. Những người bỏ ngang, những khách không quay lại thường im lặng. Chủ động gọi hỏi một số người trong nhóm này cho thông tin mà phiếu cuối khoá không bao giờ có.
Ghi nguyên văn, đừng tóm tắt ngay. Người ghi tóm tắt theo cách hiểu của mình dễ làm mất sắc thái. Giữ lời gốc, phần diễn giải để lúc tổng hợp.
Đếm tần suất chủ đề. Sau khi gom nhận xét theo chủ đề, đếm số lần mỗi chủ đề xuất hiện. Đây là cầu nối giữa định tính và định lượng: bạn vẫn giữ lời gốc nhưng biết vấn đề nào phổ biến nhất.
Nhờ chatbot gom nhóm phản hồi, giữ quyền nhận định
Gom vài trăm câu phản hồi thành nhóm chủ đề là việc chatbot làm nhanh và khá tốt. Trước khi dán, xoá tên người, số điện thoại, tên lớp, tên khách hàng và bất kỳ chi tiết nào nhận diện được ai. Với phản hồi nhạy cảm như khiếu nại về một nhân viên cụ thể, cân nhắc không đưa vào chatbot mà tự đọc.
Câu lệnh mẫu: "Dưới đây là các câu trả lời cho câu hỏi mở cuối khoá học, đã xoá thông tin nhận diện. Hãy gom thành tối đa sáu chủ đề, đặt tên ngắn cho mỗi chủ đề, đếm số câu thuộc mỗi chủ đề và trích hai câu tiêu biểu nguyên văn. Một câu có thể thuộc hai chủ đề. Câu nào không xếp được thì để riêng nhóm khác. Không đưa ra kết luận về nguyên nhân hay đề xuất."
Phần "không đưa ra kết luận" là để giữ ranh giới. Chatbot gom và đếm giúp bạn, còn hiểu vì sao và quyết định làm gì là việc của người nắm bối cảnh. Sau khi có kết quả, đọc lại vài câu trong mỗi nhóm để kiểm việc xếp nhóm; chatbot đôi khi gộp hai ý khác nhau chỉ vì dùng chung từ ngữ, hoặc bỏ sót câu mỉa mai mang nghĩa ngược lại.
Những lỗi hay gặp khi trộn hai loại đánh giá
Ghép số với nhận định giúp đánh giá đầy đủ hơn, nhưng cũng mở ra vài cái bẫy riêng:
- Dùng một câu chuyện ấn tượng để bác bỏ con số. "Có khách khen hết lời mà" không làm tỷ lệ khiếu nại tăng gấp đôi biến mất.
- Biến thang mô tả thành điểm số rồi cộng trung bình như số đo thật. Mức "tốt" không nhất thiết cách mức "đạt" đúng bằng khoảng cách giữa "đạt" và "chưa đạt".
- Chỉ đọc phản hồi định tính khi con số xấu. Đọc cả khi con số tốt để biết điều gì đang chạy đúng và cần giữ.
- Để một người duy nhất vừa thu, vừa tóm tắt, vừa kết luận. Cần ít nhất hai người đọc nguồn gốc khi kết luận quan trọng.
Mục đích cuối cùng không phải là có thêm một loại dữ liệu, mà là có bức tranh đủ để nhóm quyết định đúng việc tiếp theo. Một cách tự kiểm đơn giản: sau mỗi buổi rà soát, hỏi xem quyết định vừa đưa ra dựa trên con số nào và nhận định nào. Nếu chỉ dựa trên một phía, có thể nhóm đang bỏ sót nửa còn lại của bức tranh.
Một quý ở tổ chức hỗ trợ nông hộ: số và lời kể cùng đọc
Ví dụ giả định: một tổ chức phi lợi nhuận nhỏ ở Gia Lai hướng dẫn nông hộ trồng cà phê áp dụng cách tưới tiết kiệm nước. Sau một vụ, con số cho thấy khoảng một nửa số hộ tham gia tập huấn đã áp dụng. Nhìn riêng con số, có thể kết luận chương trình đạt mức trung bình và nên tăng số buổi tập huấn.
Ghi chép thăm đồng theo mẫu cố định lại kể một câu chuyện khác. Phần lớn hộ chưa áp dụng không phải vì không hiểu kỹ thuật, mà vì chưa có tiền mua ống tưới, hoặc vì đất thuê ngắn hạn nên không muốn đầu tư. Thêm buổi tập huấn sẽ không giải quyết được những lý do này. Tổ chức đổi hướng: tìm cách kết nối hộ với nguồn vật tư trả chậm và thử nghiệm phiên bản tưới đơn giản hơn cho đất thuê.
Kỳ sau, con số tỷ lệ áp dụng vẫn được theo dõi như cũ, nhưng báo cáo gửi nhà tài trợ có thêm ba chủ đề định tính chính kèm số hộ nhắc tới mỗi chủ đề. Nhà tài trợ hiểu vì sao con số chưa cao và đồng ý điều chỉnh hoạt động thay vì chỉ yêu cầu tăng chỉ tiêu.
Khi nào để định tính làm thước đo chính
Khi kết quả là chất lượng của một sản phẩm phức tạp. Một bản kế hoạch, một bản thiết kế, một buổi tư vấn khó gói vào một con số mà không méo. Thang mô tả có dấu hiệu quan sát được là thước đo chính hợp lý, kèm vài con số phụ như số lần phải sửa.
Khi nhóm còn quá nhỏ hoặc quá mới. Vài chục trường hợp mỗi kỳ khiến tỷ lệ nhảy lung tung. Lúc này đọc kỹ từng trường hợp có giá trị hơn tính phần trăm.
Khi đang khám phá vấn đề chưa rõ. Trước khi biết nên đo gì, phỏng vấn và quan sát giúp tìm ra điều đáng đếm. Định tính đi trước, định lượng theo sau khi đã rõ câu hỏi.
Khi con số dễ bị làm đẹp mà lời kể thì khó. Có những chỉ số nhân viên điều chỉnh được mà không cải thiện công việc, như số cuộc gọi chăm sóc khách. Lúc đó, nghe lại một mẫu nhỏ cuộc gọi theo thang mô tả có thể cho thông tin đáng tin hơn chính con số đếm, miễn là việc nghe lại được nhân viên biết trước và làm theo quy định của đơn vị.
Câu hỏi thường gặp
Đánh giá định tính có khách quan được không?
Không thể khách quan tuyệt đối, nhưng có thể nhất quán hơn nhiều nhờ câu hỏi cố định, thang mô tả có dấu hiệu quan sát được, và ít nhất hai người đọc độc lập. Mục tiêu là giảm cảm tính chứ không phải loại bỏ hoàn toàn nhận định con người.
Có nên quy thang mô tả ra điểm số để tính trung bình không?
Có thể để theo dõi xu hướng thô, nhưng cần nhớ khoảng cách giữa các mức không đều như số đo. Báo cáo nên kèm số lượng ở từng mức thay vì chỉ một điểm trung bình, để thấy bao nhiêu trường hợp còn ở mức chưa đạt.
Nhóm nhỏ không có thời gian đọc phản hồi thì làm sao?
Giới hạn một câu hỏi mở duy nhất mỗi kỳ và đọc theo đợt, ví dụ cuối tháng dành ba mươi phút. Có thể nhờ chatbot gom nhóm trước sau khi đã xoá thông tin nhận diện, rồi đọc kỹ các câu tiêu biểu.
Phản hồi định tính có nên đưa vào báo cáo gửi cấp trên không?
Nên, dưới dạng chủ đề kèm số lần xuất hiện và một hai câu trích nguyên văn đã ẩn danh. Cách này giúp cấp trên hiểu nguyên nhân phía sau con số mà không phải đọc hàng trăm câu.
Dán phản hồi của khách vào chatbot có rủi ro gì?
Rủi ro chính là lộ thông tin cá nhân hoặc chi tiết nhận diện được người phản hồi. Xoá tên, số điện thoại, địa chỉ, tên nhân viên được nhắc tới trước khi dán, và kiểm chính sách dữ liệu của công cụ đang dùng.