Trafność konwergencyjna i dyskryminacyjna – czy skala mierzy właściwy konstrukt?
Wysoka alfa Cronbacha nie wystarcza, aby stwierdzić, że kwestionariusz jest dobrym narzędziem. Skala może być bardzo spójna wewnętrznie, a mimo to mierzyć coś innego niż zamierzony konstrukt. Dlatego analiza psychometryczna powinna obejmować również trafność.
Dwa ważne jej aspekty to:
- trafność konwergencyjna,
- trafność dyskryminacyjna.
Trafność a rzetelność
Rzetelność dotyczy przede wszystkim powtarzalności i spójności pomiaru.
Trafność dotyczy tego, czy interpretacja wyników testu jest zgodna z tym, co rzeczywiście chcemy mierzyć.
Można mieć narzędzie rzetelne, ale nietrafne.
Przykład:
waga zawsze zawyża wynik o 5 kg.
Jest powtarzalna, ale systematycznie błędna.
Trafność konwergencyjna
Trafność konwergencyjna oznacza, że miary teoretycznie związane z tym samym lub bardzo podobnym konstruktem rzeczywiście są ze sobą odpowiednio powiązane. Załóżmy, że tworzymy nową skalę stresu. Jeżeli jest trafna konwergencyjnie, powinna wykazywać związek z uznanymi narzędziami mierzącymi stres lub blisko powiązane konstrukty.
Korelacje
Jednym ze sposobów jest porównanie nowej skali ze skalą referencyjną.
Przykład:
r = 0,68; 95% CI: 0,58–0,76.
Taki wynik może stanowić dowód wspierający trafność konwergencyjną, jeśli kierunek i wielkość korelacji są zgodne z hipotezą teoretyczną.
Czy korelacja musi wynosić 0,90?
Nie.
Jeżeli dwie skale mierzą dokładnie to samo, bardzo wysoka korelacja może być oczekiwana. Jeżeli mierzą konstrukty pokrewne, ale nieidentyczne, umiarkowana lub silna korelacja może być bardziej realistyczna. Wartość należy interpretować zgodnie z hipotezą postawioną przed analizą.
Jeśli chcesz się dowiedzieć czym jest kostrukt, przejdź do kursu tutaj i tutaj.
Trafność dyskryminacyjna
Trafność dyskryminacyjna dotyczy tego, czy narzędzie można odróżnić od pomiarów innych konstrukcji. Jeżeli tworzymy skalę lęku, nie powinna ona być statystycznie nierozróżnialna od skali depresji, mimo że oba konstrukty mogą być ze sobą skorelowane.
Problem zbyt wysokiej korelacji
Załóżmy, że dwie teoretycznie różne podskale mają:
r = 0,94.
Może to sugerować, że w praktyce nie są wyraźnie odrębnymi konstruktami. Wtedy pojawia się pytanie, czy rzeczywiście potrzebujemy dwóch osobnych skal.
CFA i trafność
Konfirmacyjna analiza czynnikowa pozwala testować, czy itemy przypisane do różnych konstruktów tworzą odrębne czynniki.
Możemy porównać np.:
- model jednoczynnikowy,
- model dwuczynnikowy.
Jeżeli model z dwoma odrębnymi czynnikami lepiej opisuje dane i ma sens teoretyczny, może to wspierać odrębność konstruktów.
AVE
W modelach SEM/CFA można obliczać:
Średnia wyodrębniona wariancja (Average Variance Extracted – AVE).
AVE opisuje przeciętną część wariancji wskaźników wyjaśnianą przez dany konstrukt latentny.
W literaturze często spotyka się wartość około:
AVE ≥ 0,50
jako orientacyjny punkt odniesienia dla trafności konwergencyjnej. Nie jest to jednak absolutna granica działająca w każdym badaniu.
Fornell-Larcker
Klasycznym podejściem do oceny trafności dyskryminacyjnej jest kryterium Fornella-Larckera. Porównuje ono pierwiastek z AVE danego konstruktu z jego korelacjami z innymi konstruktami. Metoda jest jednak tylko jednym z dostępnych narzędzi i ma znane ograniczenia.
HTMT
Współcześnie często wykorzystuje się:
HTMT – czyli wskaźnik Heterotrait-Monotrait wariancji (Heterotrait-Monotrait Ratio).
Wysoka wartość HTMT może sugerować problem z odrębnością konstruktów.
Spotyka się orientacyjne progi, np.:
0,85 lub 0,90.
Nie należy jednak traktować ich mechanicznie bez uwzględnienia konstrukcji modelu i niepewności oszacowania.
Trafność nie wynika z jednego testu
Nie istnieje jedna analiza, która „potwierdza trafność kwestionariusza”.
Walidacja może obejmować m.in.:
- strukturę wewnętrzną,
- związki z innymi zmiennymi,
- różnice między znanymi grupami,
- trafność kryterialną,
- stabilność pomiaru,
- zgodność z teorią.
Trafność należy traktować jako zbiór dowodów wspierających określoną interpretację wyniku.
Hipotezy przed analizą
Dobra walidacja powinna zaczynać się od konkretnych przewidywań.
Przykład:
„Wynik nowej skali stresu będzie dodatnio skorelowany z PSS-10 na poziomie co najmniej umiarkowanym oraz słabiej skorelowany ze skalą satysfakcji z życia.”
Taki plan jest znacznie bardziej informacyjny niż sprawdzanie dowolnych korelacji po zebraniu danych.
Trafność a korelacja Pearsona
Korelacja Pearsona jest często stosowana w analizie trafności, ale dobór współczynnika powinien zależeć od charakteru zmiennych i relacji.
Można rozważyć również:
- Spearmana,
- modele latentne,
- korelacje polichoryczne,
- inne metody.
Nie należy wybierać Pearsona wyłącznie dlatego, że jest najbardziej znany.
Trafność a alfa Cronbacha
Wynik:
α = 0,92
nie oznacza:
„kwestionariusz jest trafny”.
Alfa dotyczy spójności pozycji, a nie tego, czy skala mierzy właściwy konstrukt.
To jeden z najczęstszych błędów w pracach dyplomowych.
Jak raportować?
Przykład:
„Trafność konwergencyjną oceniono poprzez korelację z uznanym narzędziem mierzącym ten sam konstrukt. Uzyskano r = 0,71; 95% CI: 0,63–0,78. Trafność dyskryminacyjną oceniono w modelu CFA; wszystkie wartości HTMT pomiędzy odrębnymi konstruktami były niższe niż przyjęty wcześniej poziom odniesienia.”
Najczęstsze błędy
- utożsamianie alfa Cronbacha z trafnością,
- brak hipotez walidacyjnych,
- testowanie przypadkowych korelacji,
- uznawanie jednej korelacji za pełną walidację,
- mechaniczne stosowanie progów AVE i HTMT,
- brak CFA przy analizie złożonej struktury skali,
- brak informacji o niepewności oszacowań.
FAQ
Co to jest trafność konwergencyjna?
Stopień, w jakim wyniki są zgodnie powiązane z innymi miarami podobnego konstruktu.
Co to jest trafność dyskryminacyjna?
Stopień, w jakim konstrukt można odróżnić od innych, teoretycznie odmiennych konstruktów.
Czy alfa Cronbacha mierzy trafność?
Nie.
Czy korelacja wystarczy do walidacji?
Zwykle nie. Jest tylko jednym ze źródeł dowodów.
Co to jest HTMT?
Wskaźnik stosowany m.in. do oceny odrębności konstruktów w modelach latentnych.
Wspóraca w zakresie analiz kwestionariuszy i analiz statystycznych
Potrzebujesz walidacji kwestionariusza, EFA, CFA, analizy rzetelności lub trafności psychometrycznej?
statystyka@statystyka.org.pl – bezpłatna wycena anlizy danych medycznych
tel. 692 809 254
Frazy kluczowe: trafność konwergencyjna, trafność dyskryminacyjna, walidacja kwestionariusza, psychometria, CFA, EFA, AVE, HTMT, korelacja Pearsona, rzetelność, alfa Cronbacha, omega McDonalda, analiza statystyczna