W naukach ścisłych każdy pomiar ma swój margines błędu — termometr może się mylić o ułamek stopnia, waga o kilka gramów. Testy psychologiczne nie są wyjątkiem, a w ich przypadku margines błędu bywa znacznie większy, niż mogłoby się wydawać laikowi patrzącemu na „twardą” liczbę wyniku IQ.
Czym jest błąd pomiaru w psychometrii?
W psychometrii posługujemy się pojęciem standardowego błędu pomiaru (SEM). To statystyczna miara tego, jak bardzo wynik danej osoby mógłby się różnić, gdyby wykonała ten sam test wielokrotnie, w identycznych warunkach, bez efektu uczenia się. Dla dobrze skonstruowanych testów klinicznych SEM wynosi zwykle około 3–5 punktów IQ.
Co to oznacza w praktyce?
Jeśli ktoś uzyska wynik 112 punktów, a SEM testu wynosi 4 punkty, oznacza to, że z około 95% pewnością jego „prawdziwy” wynik (czyli teoretyczna średnia z nieskończonej liczby powtórzeń testu) mieści się w przedziale mniej więcej 104–120 punktów. To dość szeroki zakres — obejmujący zarówno górną granicę przeciętnej, jak i dolną granicę wyniku „powyżej przeciętnej”.
Skąd bierze się ta niepewność?
Na wynik wpływa wiele czynników niezwiązanych bezpośrednio ze zdolnościami poznawczymi: poziom zmęczenia, jakość snu poprzedniej nocy, stres związany z samą sytuacją badania, chwilowa koncentracja, a nawet drobne czynniki losowe, jak to, które akurat zadania z puli o podobnym poziomie trudności trafiły do konkretnej wersji testu.
Dlaczego psychologowie mówią o przedziałach, nie liczbach?
Rzetelny raport z badania psychologicznego nie podaje wyniku jako pojedynczej, „ostatecznej” liczby, lecz jako przedział ufności, np. „wynik pełnoskalowy 108 (przedział ufności 95%: 103–113)”. Taka forma prezentacji uczciwie oddaje niepewność pomiaru i chroni przed nadinterpretacją drobnych różnic między wynikami.
Praktyczna wskazówka
Jeśli podejdziesz do testu IQ (dowolnego, także klinicznego) dwukrotnie w odstępie tygodni i uzyskasz wyniki różniące się o kilka punktów, nie oznacza to, że Twoja inteligencja „się zmieniła”. To normalna zmienność pomiaru. Warto o tym pamiętać, zanim przywiąże się nadmierną wagę do konkretnej liczby — szczególnie tej z jednorazowego, krótkiego testu online.
Skąd matematycznie bierze się SEM?
Standardowy błąd pomiaru wylicza się ze wzoru SEM = SD × √(1 - rtt), gdzie SD to odchylenie standardowe wyników w populacji (dla IQ: 15), a rtt to rzetelność testu (reliability) — współczynnik określający, jak konsekwentnie test mierzy tę samą cechę. Dobrze skonstruowane testy kliniczne mają rtt na poziomie 0,9-0,95. Dla porównania: test o rzetelności 0,9 da SEM w okolicach 4,7 punktu, a test o niższej rzetelności, powiedzmy 0,7 (częstsze w uproszczonych narzędziach online), da SEM bliżej 8,2 punktu — czyli znacznie szerszy przedział niepewności.
Dlaczego to ma znaczenie dla testów online?
Krótsze testy, oparte na mniejszej liczbie zadań, mają zwykle niższą rzetelność niż długie baterie kliniczne — po prostu statystycznie trudniej uzyskać stabilny pomiar na podstawie 20-30 zadań niż na podstawie 100+ zadań rozłożonych na kilkanaście podtestów. To kolejny powód, dla którego wynik testu online warto traktować jako orientacyjny szacunek, a nie precyzyjny pomiar porównywalny z wynikiem pełnego badania klinicznego.