Kiedy dane kłamią systematycznie
Błąd systematyczny (bias) to zniekształcenie, które konsekwentnie przesuwa wyniki w jedną stronę. To nie przypadkowy szum - to systematyczny problem, który sprawia, że wyniki są regularnie zawyżone lub zaniżone. Rozpoznanie biasu to jedna z najważniejszych umiejętności w krytycznym myśleniu.
Bias doboru próby (selection bias)
Najczęstszy rodzaj biasu. Powstaje, gdy próba nie odzwierciedla populacji.
Ankieta online o nawykach zdrowotnych Polaków. Problem: odpowiadają tylko osoby z dostępem do internetu i chętne do wypełniania ankiet. Starsi ludzie, osoby w małych miejscowościach bez internetu i osoby niezainteresowane zdrowiem są pominięte. Wyniki będą przesunięte w stronę młodszych, miejskich, prozdrowotnych respondentów.
Bias przetrwania (survivorship bias)
Widzimy tylko tych, którzy "przetrwali" - i ignorujemy tych, którzy odpadli po drodze.
"Społeczeństwo przykładane do sukcesu": czytamy o polskich startupach, które odniosły sukces. Wniosek: "Wystarczy mieć dobry pomysł i ciężko pracować!" Ale nie widzimy tysięcy startupów, które upadły mimo dobrego pomysłu i ciężkiej pracy. Skupiamy się na "ocalonych" i wyciągamy fałszywe wnioski.
Bias potwierdzenia (confirmation bias)
Szukamy informacji potwierdzających to, w co już wierzymy, i ignorujemy te, które temu przeczą.
Jesteś przekonany, że homeopatia działa, bo Twoja ciocia poczuła się lepiej po tabletkach homeopatycznych. Ignorujesz setki badań naukowych mówiących o braku efektu. Za to gorliwie szukasz anegdot potwierdzających Twoje przekonanie. To bias potwierdzenia w działaniu.
Bias odpowiedzi (response bias)
Ludzie nie zawsze odpowiadają szczerze - szczególnie na wrażliwe pytania.
Ankieta pyta: "Ile alkoholu wypijacie tygodniowo?" Większość ludzi zaniża ilość. Ankieta pyta: "Jak często ćwiczysz?" Większość zawyża. Dlatego dane ankietowe o alkoholu i ćwiczeniach są notoryczne nierzetelne.
Bias pytania (question bias)
Sposób zadania pytania wpływa na odpowiedź.
Pytanie 1: "Czy popierasz prawo do posiadania broni?" Pytanie 2: "Czy popierasz wolny dostęp do broni palnej, która co roku zabija tysiące ludzi?" Oba pytają o to samo, ale dają dramatycznie różne wyniki. Kolejność słów, emocjonalne sformułowania i sugestywne nagłówki to wszystko formy biasu pytania.
Bias publikacji (publication bias)
Badania z "ciekawymi" (statystycznie istotnymi) wynikami są częściej publikowane niż te, które nie znalazły żadnego efektu. To zniekształca nasz obraz nauki.
10 zespołów bada, czy czekolada poprawia pamięć. 9 nie znajduje efektu i nie publikuje wyników. 1 znajduje "istotny" efekt (może przypadkiem) i publikuje. Media tytułują: "Nauka potwierdziła - czekolada poprawia pamięć!" W rzeczywistości większość dowodów jest przeciwna.
Jak chronić się przed biasem
- Używaj losowego doboru próby - to minimalizuje bias doboru
- Stosuj zaślepianie - w eksperymentach podwójne zaślepianie eliminuje wiele biasów
- Szukaj sprzecznych dowodów - świadomie szukaj informacji podważających Twoje przekonania
- Sprawdzaj źródła - kto przeprowadził badanie? Kto je finansował? Jaki mieli interes?
- Zwracaj uwagę na wielkość próby - małe próby są bardziej podatne na bias
Błąd systematyczny (bias) to zniekształcenie konsekwentnie przesuwające wyniki w jedną stronę. Najczęstsze typy to bias doboru próby, przetrwania, potwierdzenia, odpowiedzi i publikacji. Rozpoznanie biasu to kluczowa umiejętność krytycznego myślenia. Zawsze pytaj: kto został pominięty? Czy pytanie nie było sugestywne? Kto finansował badanie?