Calibração de Confiança

Processo de verificar e ajustar se um score de confiança corresponde à frequência observada de acerto. Em um sistema calibrado para determinada população, previsões agrupadas perto de 0,8 deveriam estar corretas aproximadamente 80% das vezes. Reliability diagrams, Brier score e Expected Calibration Error ajudam a medir essa correspondência por faixa.

Calibração depende da distribuição, do horizonte temporal e do significado do score original. Mudança de domínio pode invalidá-la, e um ECE agregado pode ocultar segmentos perigosos. O score calibrado serve para políticas de abstenção, revisão humana e roteamento de risco; o threshold continua sendo uma decisão do system owner baseada no custo dos erros.