Model może mieć wysokie AUC i dobrą kalibrację, ale nadal pozostaje pytanie: czy jego zastosowanie poprawia decyzje kliniczne? Do tego celu opracowano analizę krzywej decyzyjnej (Decision Curve Analysis, DCA). Metodę opisali Vickers i Elkin w 2006 roku. Dlaczego AUC nie Read More …
Tag: model predykcyjny
Kalibracja modelu predykcyjnego – czy przewidywane ryzyko odpowiada rzeczywistości?
Model predykcyjny może bardzo dobrze odróżniać osoby o większym i mniejszym ryzyku, a jednocześnie podawać błędne wartości prawdopodobieństwa. Dlatego sama krzywa ROC i AUC nie wystarczają. Drugim podstawowym elementem oceny jest kalibracja (calibration). Co oznacza dobra kalibracja? Jeżeli model przewiduje Read More …