Identificando Erros de Previsão em Dados Observacionais

Resumo Tomadores de decisão, como médicos, juízes e gerentes, fazem escolhas importantes com base em previsões de resultados desconhecidos. Esses tomadores de decisão cometem erros sistemáticos de previsão com base nas informações disponíveis? Se sim, de que maneiras suas previsões estão sistematicamente tendenciosas? Neste artigo, caracterizo as condições sob as quais erros sistemáticos de previsão podem ser identificados em contextos empíricos como contratação, diagnóstico médico e liberdade provisória. Derivo um teste estatístico para verificar se o tomador de decisão comete erros sistemáticos de previsão sob essas suposições e forneço métodos para estimar as maneiras pelas quais as previsões do tomador de decisão estão sistematicamente tendenciosas. Analiso as decisões de liberdade provisória de juízes na cidade de Nova York, estimando que pelo menos 20% dos juízes cometem erros sistemáticos de previsão sobre o risco de má conduta dados as características do réu. Motivado por essa análise, estimulo os efeitos de substituir juízes por regras de decisão algorítmica e descubro que substituir juízes por algoritmos onde ocorrem erros sistemáticos de previsão domina o status quo.