Sayılar Hem Dürüst Hem Yanıltıcı Olabilir
Her gün istatistiklerle bombardımana tutulursunuz. "Araştırmalar kahvenin ömrü uzattığını gösteriyor." "Suç oranları %200 arttı." "Diş hekimlerinin 10'da 9'u bu diş macununu öneriyor." Bu ifadelerin hepsi gerçek verilere dayanıyor olabilir ve yine de her biri size çarpıtılmış bir resim sunuyor olabilir.
Sayıların kendisi sorun değil. Sorun nasıl paketlendikleridir. Bağlam olmayan bir istatistik, paragraf olmayan bir cümle gibidir: teknik olarak doğru ama yanlış anlaşılması kolay. Bu ders, karşılaştığınız herhangi bir istatistiksel iddiayı değerlendirmek için pratik bir kontrol listesi sunar.
Soru 1: Çalışmayı Kim Yaptı?
Kaynak son derece önemlidir. Hakemli bir bilimsel dergide yayımlanan araştırma, yayınlanmadan önce alanın diğer uzmanları tarafından kontrol edilmiştir. Bir şirketin basın bültenindeki istatistik böyle bir kontrolden geçmemiştir.
Bu, kurumsal araştırmanın her zaman yanlış veya akademik araştırmanın her zaman doğru olduğu anlamına gelmez. Ama kaynağı bilmek, bulgunun ne kadar incelemeden geçtiğini söyler.
Bir başlık "Yeni araştırma çikolatanın hafızayı güçlendirdiğini ortaya koydu" diyor. Daha derine baktığınızda çalışmanın büyük bir çikolata üreticisi tarafından finanse edildiğini, yalnızca 12 katılımcıyı içerdiğini ve düşük itibarli bir dergide yayımlandığını keşfediyorsunuz. Bu, bulguyu ne kadar ciddiye almanız gerektiğini değiştirir. Bunu, bir devlet sağlık kuruluşu tarafından finanse edilen, beş yıl boyunca 5.000 kişiyi kapsayan ve birinci sınıf bir tıp dergisinde yayımlanan bir çalışmayla karşılaştırın. Aynı konu, çok farklı güvenilirlik.
Soru 2: Kimler İncelendi ve Kaç Kişi?
Örneklem boyutu önemlidir. 15 kişilik bir çalışma ilginç bir şeye işaret edebilir ama fazla bir şey kanıtlayamaz. 15.000 kişilik bir çalışma çok daha fazla ağırlık taşır. Küçük çalışmalar, şansla aşırı sonuçlar üreterek yanlış alarmlar verme eğilimindedir.
Eşit derecede önemli olan: örneklemde kimler vardı? Yalnızca üniversite öğrencileriyle yapılmış bir uyku çalışması emeklilere uygulanamayabilir. Japonya'da yapılmış bir beslenme çalışması diğer ülkelerdeki beslenme alışkanlıklarına doğrudan tercüme edilmeyebilir. İncelenen kişilerin, iddianın uygulandığı kişilere benzer olup olmadığını her zaman sorun.
Soru 3: Araştırmayı Kim Finanse Etti?
Finansman araştırmayı otomatik olarak bozmaz ama teşvik yaratır. Şeker endüstrisi tarafından finanse edilen çalışmalar, tarihsel olarak şekerin sağlık risklerini küçümsemiştir. İlaç şirketleri tarafından finanse edilen çalışmalar, aynı ilaçların bağımsız çalışmalarından daha olumlu sonuçlar bulma eğilimindedir.
İtibarı yüksek dergiler artık araştırmacıların çalışmalarını kimin ödediğini açıklamasını zorunlu kılar. Finansman bilgisi bulamıyorsanız, bu başlı başına dikkatli olmanız için bir nedendir.
Soru 4: Gerçek Sayılar Neler?
Başlıklar dramatik çerçevelemeyi sever. "Riskinizi ikiye katlandırıyor!" kulağa korkunç geliyor. Ama neyin riski? Orijinal risk 10.000'de 1 ise ve ikiye katlanıp 10.000'de 2 olmuşsa, bu hâlâ çok küçük. 10'da 1'den 10'da 2'ye çıkmışsa çok daha büyük bir mesele.
Her zaman yüzdelerin veya çarpanların değil, mutlak sayıların peşinden gidin. "Riskte %50 artış" başlangıç noktanıza göre tamamen farklı şeyler ifade eder.
Bir haber makalesi raporluyor: "Her gün işlenmiş et tüketimi belirli bir kanser riskini %18 artırıyor." Kulağa endişe verici geliyor. Ama bu kanserin temel riski ömür boyu 100 kişi başına yaklaşık 5. %18'lik bir artış bunu yaklaşık 100 kişi başına 6'ya çıkarır. "Ömür boyu %5 yerine %6 risk" size "%18 daha fazla risk"ten çok farklı bir his verir. Her iki ifade de aynı veriyi tanımlıyor.
Soru 5: Bu Korelasyon mu Nedensellik mi?
Bu, habercilikte en yaygın hatalardan biridir. İki şeyin birlikte olması, birinin diğerine neden olduğu anlamına gelmez. Dondurma satışları ve boğulma olayları yazın birlikte yükselir; bunun nedeni dondurmanın boğulmaya neden olması değil, hava sıcak olduğunda daha fazla insanın hem dondurma alıp hem yüzmeye gitmesidir.
"Kahvaltı yapan insanlar daha fazla kazanıyor" gibi bir başlık gördüğünüzde kendinize sorun: kahvaltı yapmak daha yüksek kazanca mı neden oluyor? Yoksa istikrarlı, iyi maaşlı işleri olan insanların sadece sabahlarında daha fazla zamanı ve rutini mi var? Veri tek başına hangi açıklamanın doğru olduğunu söyleyemez.
Yanıltıcı Grafiklere Dikkat Edin
Grafikler verileri ince yollarla çarpıtabilir. İşte en yaygın numaralar:
- Kesilmiş eksenler: 0 yerine 95'ten başlayan bir çubuk grafik, küçük bir farkı devasa gösterebilir.
- Gerilmiş veya sıkıştırılmış ölçekler: Eksen ölçeğini değiştirmek, yavaş bir trendi dramatik bir sıçrama gibi gösterebilir veya gerçek bir artışı yumuşak bir eğime dönüştürebilir.
- Seçici zaman dilimleri: Hisse senedi performansını en düşük noktasından en yükseğine göstermek herhangi bir yatırımı parlak gösterir. Zirveden çukura göstermek aynı yatırımı felaket gösterir.
- 3B efektler: Üç boyutlu çubuk ve pasta grafikleri, gözlerinizin boyutu nasıl algıladığını bozar. 3B pasta grafiğin ön dilimleri, arkadaki aynı boyuttaki dilimlerden daha büyük görünür.
"Neye Kıyasla?" Testi
Bir istatistik gördüğünüzde sorun: neye kıyasla? "Ürünümüz %30 daha etkili." Neden daha etkili? Hiçbir şey yapmamaktan mı? Piyasadaki rakipten mi? Kendi önceki versiyonundan mı? Net bir karşılaştırma olmadan sayı neredeyse anlamsızdır.
Benzer şekilde, eksik bağlama dikkat edin. "İşsizlik %4'e düştü." Bu iyi mi? Daha önce nerede olduğuna, karşılaştırılabilir ülkelerde ne olduğuna ve "işsizlik"in nasıl tanımlandığına bağlı. İş aramaktan vazgeçenler sayılıyor mu?
Hızlı Kontrol Listeniz
Haberlerde veya sosyal medyada istatistiksel bir iddia gördüğünüzde şu soruları gözden geçirin:
- Çalışmayı kim yaptı ve nerede yayımlandı?
- Kaç kişi incelendi ve kimlerdi?
- Araştırmayı kim ödedi?
- Yüzdelerin arkasındaki gerçek sayılar neler?
- Bu nedensellik mi yoksa sadece bir bağlantı mı gösteriyor?
- Grafik adil mi çizilmiş?
- Karşılaştırma noktası ne?
Her iddiayı bir dedektif gibi araştırmanız gerekmez. Ama bu sorulardan iki veya üçünü bile sormak, çoğu yanıltıcı istatistiği düşüncenizi şekillendirmeden önce yakalar.
Haberlerdeki istatistikler genellikle basitleştirilir, yeniden paketlenir veya daha cazip bir hikâye oluşturmak için bağlamlarından koparılır. Sayılar gerçek olabilir ama yarattıkları izlenim yanlış olabilir. Çalışmayı kimin yaptığını, kaç kişinin dahil olduğunu, kimin finanse ettiğini, gerçek sayıların ne olduğunu ve iddianın korelasyon mu nedensellik mi hakkında olduğunu sorarak, bir istatistiğin güveninizi mi yoksa şüphenizi mi hak ettiğini hızla değerlendirebilirsiniz.