Anketler Göründüğünden Daha Zordur
Anket oluşturmak kolay görünür: birkaç soru yazın, gönderin ve yanıtları sayın. Ancak kötü tasarlanmış anketler yanıltıcı veya işe yaramaz veriler üretir. Kötü ifade edilmiş bir soru, yanıtlayanları belirli bir cevaba yönlendirebilir. Belirsiz bir ölçek, farklı insanlar için farklı anlamlara gelebilir. Çok uzun bir ankette, yanıtlayanların çoğu yarısında bırakır ve size yalnızca en motive (veya sıkılmış) tamamlayanlardan yanlı sonuçlar bırakır.
İyi anket tasarımı, psikoloji, iletişim ve istatistiği birleştiren bir beceridir. Amaç, insanların gerçekte ne düşündüğünü, hissettiğini veya yaptığını yansıtan doğru, dürüst bilgi toplamaktır -- soru ifadenizin onları söylemeye yönlendirdiği şeyi değil.
Soru Türleri
Kapalı uçlu sorular, yanıtlayanlara seçmeleri için sabit bir seçenek seti sunar. "Hizmetimizden ne kadar memnunsunuz? Çok memnun / Memnun / Kararsız / Memnun değil / Hiç memnun değil." Bunlar istatistiksel olarak analiz etmesi kolaydır ancak yanıtlayanların size söyleyebileceklerini sınırlar.
Açık uçlu sorular, yanıtlayanların kendi kelimeleriyle cevap vermesine olanak tanır. "Deneyiminizi geliştirmek için ne yapabiliriz?" Bunlar şaşırtıcı içgörüler ortaya çıkarabilir ancak analiz etmesi zaman alıcıdır ve nicelleştirmesi zordur.
İyi tasarlanmış anketlerin çoğu her ikisinin bir karışımını kullanır. Kapalı uçlu sorular nicel omurgayı sağlarken, birkaç açık uçlu soru sabit seçeneklerin kaçırabileceği nüansları yakalar.
Yukarıdaki grafik, beş puanlık bir Likert ölçeğinde tipik bir yanıt dağılımını gösterir. Yanıtların orta ve hafif olumlu uçta kümelenme eğiliminde olduğuna dikkat edin -- insanların katılmamaktan çok katılma eğiliminde olduğu onaylama yanlılığı olarak bilinen yaygın bir örüntü.
Yönlendirici ve Önyargılı Sorulardan Kaçınma
Bir yönlendirici soru, yanıtlayanları belirli bir cevaba yönlendirir. "Müşteri hizmetimizin mükemmel olduğuna katılmıyor musunuz?" pratik olarak "evet" için yalvarır. Tarafsız bir versiyon şöyle olurdu: "Müşteri hizmetimizi nasıl değerlendirirsiniz?" Yönlendirici sorular bazen olumlu sonuçlar üretmek için kasıtlı olarak kullanılır, ancak herhangi bir anketin güvenilirliğini yok ederler.
Bir önyargılı soru gizli bir varsayım içerir. "Yeni premium özelliklerimizi ne kadar seviyorsunuz?" yanıtlayanın bunları kullandığını ve sevdiğini varsayar. Özellikleri kullanmamış veya beğenmemiş herkes garip bir cevap vermeye zorlanır veya soruyu tamamen atlar.
Çift namlulu sorular aynı anda iki şey hakkında sorar. "Hizmetimizin hızından ve doğruluğundan ne kadar memnunsunuz?" Ya hız harikaysa ama doğruluk korkunçsa? Yanıtlayan dürüst bir cevap veremez. Bunları iki ayrı soruya bölün.
Yanıt Yanlılığı ve Nasıl En Aza İndirilir
Sosyal arzu edilirlik yanlılığı, yanıtlayanların doğru yerine sosyal olarak kabul edilebilir gördükleri cevapları vermesiyle ortaya çıkar. İnsanlar egzersizi abartır, alkol tüketimini küçümser ve gerçekte yaptıklarından daha fazla geri dönüşüm yaptıklarını iddia eder. Anonim anketler bu yanlılığı azaltır ancak tamamen ortadan kaldırmaz.
Sıra etkileri de yanıtları etkileyebilir. Anketin başındaki sorular, insanların sonraki sorular hakkında nasıl düşündüklerini çerçeveleyebilir. Önce olumsuz deneyimler hakkında sorarsanız, yanıtlayanlar genel memnuniyeti değerlendirirken daha eleştirel bir zihin yapısında olabilir. Soru sırasını rastgeleleştirmek yardımcı olabilir, ancak mantıksal akış da önemlidir.
Yanıt yorgunluğu, anketler çok uzun olduğunda ortaya çıkar. 10-15 dakikadan sonra yanıt kalitesi keskin biçimde düşer. İnsanlar her soru için aynı cevabı seçmeye başlar ("düz çizgi çizme" denir) veya dikkatlice okumadan acele eder. Anketleri mümkün olduğunca kısa tutun. Her soru, doğrudan araştırma hedefinize hizmet ederek yerini hak etmelidir.
Yukarıdaki grafik, anket uzunluğuna göre tipik tamamlama oranlarını gösterir. 5 dakikalık bir anket çoğu yanıtlayanı tutar, 30 dakikalık bir anket ise büyük çoğunluğu kaybeder. Uzun anketleri tamamlayan yanıtlayanlar genellikle daha geniş kitleyi temsil etmez.
Likert Ölçekleri ve Yanıt Formatları
Likert ölçeği, anketlerde en yaygın kullanılan yanıt formatıdır. Bir ifade sunar ve yanıtlayanlardan katılım düzeylerini belirtmelerini ister, tipik olarak 5 puanlık veya 7 puanlık bir ölçekte. Beş puan (Kesinlikle Katılıyorum'dan Kesinlikle Katılmıyorum'a) çoğu amaç için iyi çalışır. Yedi puan daha ince ayrımlar sunar ancak sıradan yanıtlayanları bunaltabilir.
Yaygın bir tartışma, tarafsız bir orta noktanın dahil edilip edilmeyeceğidir. Dahil etmek, gerçekten tarafsız olan yanıtlayanların bunu ifade etmesine olanak tanır, ancak çok düşünmek istemeyen insanlar için kolay bir kaçış da sağlar. Bazı araştırmacılar, yanıtlayanları bir tarafa yönelmeye zorlamak için çift sayıda seçenek (4 veya 6 puan) kullanır.
Hangi ölçeği seçerseniz seçin, anket boyunca tutarlı olun. 5 puanlık ve 7 puanlık ölçekler arasında geçiş yapmak veya yönü değiştirmek (bazen "1" en iyi, bazen "1" en kötü anlamına gelir), yanıtlayanları karıştırır ve hata oranlarını artırır.
Örneklem Büyüklüğü Değerlendirmeleri
Kaç yanıta ihtiyacınız var? Cevap, sonuçlarınızın ne kadar hassas olmasını istediğinize, popülasyonunuzun ne kadar değişken olduğuna ve ne kadar hata kabul etmeye istekli olduğunuza bağlıdır. Çoğu pratik amaç için 300-400 yanıt, %95 güven düzeyinde yaklaşık %5'lik bir hata payı verir. Daha büyük örneklemler daha fazla hassasiyet sağlar ancak azalan getirilerle -- 400'den 1.600 yanıta çıkmak hata payını yalnızca yarıya indirir.
Ancak örneklem büyüklüğü yalnızca örneklem temsili ise önemlidir. Kendi kendini seçen bir çevrimiçi anketten gelen bir milyon yanıt, düzgün bir şekilde rastgeleleştirilmiş bir örneklemden gelen 500 yanıttan daha az değerlidir. Örnekleme kalitesi her zaman yanıt miktarından üstündür.
İyi anket tasarımı, iyi seçilmiş bir formatta net, tarafsız sorular gerektirir. Yönlendirici, önyargılı ve çift namlulu sorulardan kaçının. Likert ölçeklerini tutarlı biçimde kullanın. Yanıt yorgunluğunu önlemek için anketleri kısa tutun. Anonimlik yoluyla sosyal arzu edilirlik yanlılığını en aza indirin. Ve küçük, temsili bir örneklemin büyük, yanlı bir örneklemden çok daha değerli olduğunu unutmayın. Anketinizin kalitesi, ondan çıkaracağınız her içgörünün kalitesini belirler.