Thiết kế khảo sát

Khảo sát khó hơn vẻ ngoài

Tạo khảo sát có vẻ dễ: viết vài câu hỏi, gửi đi và đếm câu trả lời. Nhưng khảo sát thiết kế kém tạo ra dữ liệu sai lệch hoặc vô dụng. Câu hỏi diễn đạt tệ có thể đẩy người trả lời về một đáp án cụ thể. Thang đo không rõ ràng có thể có ý nghĩa khác nhau với người khác nhau. Khảo sát quá dài sẽ khiến hầu hết bỏ ngang, để lại kết quả sai lệch chỉ từ những người kiên nhẫn nhất.

Thiết kế khảo sát tốt là kỹ năng kết hợp tâm lý học, giao tiếp và thống kê. Mục tiêu là thu thập thông tin chính xác, trung thực phản ánh điều mọi người thực sự nghĩ, cảm thấy hoặc làm - không phải điều câu hỏi gợi ý họ nói.

Các loại câu hỏi

Câu hỏi đóng cho người trả lời tập hợp lựa chọn cố định. "Bạn hài lòng với dịch vụ của chúng tôi ở mức nào? Rất hài lòng / Hài lòng / Trung lập / Không hài lòng / Rất không hài lòng." Dễ phân tích thống kê nhưng hạn chế điều người trả lời có thể nói.

Câu hỏi mở cho người trả lời tự viết. "Chúng tôi có thể làm gì để cải thiện trải nghiệm của bạn?" Có thể khám phá những hiểu biết bất ngờ nhưng tốn thời gian phân tích và khó lượng hóa.

Hầu hết khảo sát thiết kế tốt dùng cả hai. Câu hỏi đóng cung cấp xương sống định lượng, trong khi vài câu hỏi mở nắm bắt sắc thái mà lựa chọn cố định có thể bỏ sót.

Biểu đồ trên cho thấy phân phối phản hồi điển hình trên thang Likert năm điểm. Lưu ý phản hồi có xu hướng tập trung quanh giữa và hơi nghiêng về phía tích cực - mô hình phổ biến gọi là sai lệch đồng ý, khi mọi người có xu hướng đồng ý nhiều hơn không đồng ý.

Tránh câu hỏi dẫn dắt và câu hỏi gài bẫy

Câu hỏi dẫn dắt hướng người trả lời đến đáp án cụ thể. "Bạn không đồng ý rằng dịch vụ khách hàng của chúng tôi tuyệt vời sao?" gần như đòi câu trả lời "có". Phiên bản trung lập: "Bạn đánh giá dịch vụ khách hàng của chúng tôi như thế nào?" Câu hỏi dẫn dắt đôi khi được cố ý sử dụng để tạo kết quả có lợi, nhưng chúng phá hủy độ tin cậy.

Câu hỏi gài bẫy chứa giả định ẩn. "Bạn thích các tính năng cao cấp mới của chúng tôi đến mức nào?" giả định người trả lời đã dùng và thích chúng. Ai chưa dùng hoặc không thích bị ép vào câu trả lời khó xử.

Câu hỏi kép hỏi hai điều cùng lúc. "Bạn hài lòng với tốc độ và độ chính xác của dịch vụ ở mức nào?" Nếu tốc độ tốt nhưng độ chính xác tệ thì sao? Người trả lời không thể trả lời trung thực. Tách thành hai câu hỏi riêng.

Sai lệch phản hồi và cách giảm thiểu

Sai lệch mong muốn xã hội xảy ra khi người trả lời đưa câu trả lời họ nghĩ là chấp nhận được về mặt xã hội thay vì sự thật. Mọi người phóng đại tập thể dục, giảm nhẹ uống rượu, và tuyên bố tái chế nhiều hơn thực tế. Khảo sát ẩn danh giảm sai lệch này nhưng không loại bỏ hoàn toàn.

Hiệu ứng thứ tự cũng ảnh hưởng phản hồi. Câu hỏi đầu khảo sát có thể định hình cách nghĩ về câu hỏi sau. Nếu hỏi về trải nghiệm tiêu cực trước, người trả lời có thể phê phán hơn khi đánh giá mức hài lòng tổng thể. Ngẫu nhiên hóa thứ tự câu hỏi có thể giúp, dù dòng chảy logic cũng quan trọng.

Mệt mỏi phản hồi xuất hiện khi khảo sát quá dài. Sau 10-15 phút, chất lượng phản hồi giảm mạnh. Mọi người bắt đầu chọn cùng một đáp án cho mọi câu hỏi (gọi là "kẻ đường thẳng") hoặc vội vã không đọc kỹ. Giữ khảo sát ngắn nhất có thể. Mỗi câu hỏi phải xứng đáng có mặt bằng cách phục vụ trực tiếp mục tiêu nghiên cứu.

Biểu đồ trên cho thấy tỷ lệ hoàn thành điển hình theo độ dài khảo sát. Khảo sát 5 phút giữ chân hầu hết người trả lời, trong khi khảo sát 30 phút mất phần lớn. Những người hoàn thành khảo sát dài thường không đại diện cho đối tượng rộng hơn.

Thang Likert và định dạng phản hồi

Thang Likert là định dạng phản hồi phổ biến nhất trong khảo sát. Nó trình bày một phát biểu và yêu cầu người trả lời cho biết mức độ đồng ý, thường trên thang 5 hoặc 7 điểm. Năm điểm (Rất đồng ý đến Rất không đồng ý) phù hợp cho hầu hết mục đích. Bảy điểm cho phân biệt tinh hơn nhưng có thể gây khó cho người trả lời bình thường.

Một tranh luận phổ biến là có nên bao gồm điểm giữa trung lập không. Bao gồm nó cho phép người thực sự trung lập thể hiện, nhưng cũng cho lối thoát dễ dàng cho người không muốn suy nghĩ kỹ. Một số nhà nghiên cứu dùng số chẵn lựa chọn (4 hoặc 6 điểm) để buộc người trả lời nghiêng về một phía.

Dù chọn thang nào, hãy nhất quán trong suốt khảo sát. Chuyển đổi giữa thang 5 và 7 điểm, hoặc đổi hướng (đôi khi "1" là tốt nhất, đôi khi "1" là tệ nhất), gây nhầm lẫn và tăng tỷ lệ lỗi.

Xem xét cỡ mẫu

Bạn cần bao nhiêu phản hồi? Câu trả lời phụ thuộc vào mức chính xác mong muốn, mức biến thiên của tổng thể và sai số chấp nhận được. Cho hầu hết mục đích thực tế, 300-400 phản hồi cho sai số khoảng 5% ở mức tin cậy 95%. Mẫu lớn hơn cho chính xác hơn nhưng với hiệu suất giảm dần - từ 400 lên 1.600 phản hồi chỉ giảm sai số một nửa.

Nhưng cỡ mẫu chỉ quan trọng nếu mẫu đại diện. Một triệu phản hồi từ thăm dò trực tuyến tự chọn giá trị kém hơn 500 phản hồi từ mẫu ngẫu nhiên đúng cách. Chất lượng lấy mẫu luôn quan trọng hơn số lượng phản hồi.