O efeito Dunning-Kruger pode ser apenas um artefato de dados (2020)
Uma afirmação de que o famoso efeito Dunning-Kruger pode ser um artefato estatístico, e não um fenômeno psicológico real, leva a uma análise minuciosa de como os estudos originais foram concebidos e analisados. Comentadores dissecam problemas como autocorrelação, efeitos de teto e simulações enviesadas, ao mesmo tempo em que contrapõem o resultado acadêmico mais nuançado (“todos se descalibram, mas os novatos fazem isso numa faixa mais ampla”) ao meme popular de que “idiotas não sabem que são idiotas.” Muitos continuam convencidos pela própria experiência de que a incompetência confiante é comum, mas admitem que os problemas de replicação da psicologia e métodos fracos dificultam saber quão forte ou especial o efeito realmente é.
Críticas estatísticas à alegação de “artefato”
- Vários comentaristas consideram o artigo vago e pouco explicado, especialmente sobre como a simulação “aleatória” foi gerada.
- Outros examinam o código compartilhado e apontam problemas: testes t de quartis aparentemente copiados de forma incorreta, linhas aleatórias amostradas apenas com inclinação positiva e viés, e uma correlação positiva imposta (por exemplo, r=0.19) que em parte já incorpora o efeito.
- Alguns argumentam que a semelhança entre os gráficos simulados e os originais é uma evidência fraca: “dois gráficos parecem semelhantes” ≠ “portanto o resultado original não significa nada.”
- Outros apontam autocorrelação e efeitos de teto/chão: quando as autoavaliações são ruidosas e limitadas entre 0–100, os de baixo desempenho só podem superestimar até certo ponto para baixo, e os de alto desempenho só podem superestimar até certo ponto para cima, produzindo as formas características em “X” ou “U” mesmo com ruído.
Interpretações dos achados originais de Dunning-Kruger
- Vários comentaristas enfatizam que o resultado original era modesto: os de baixo desempenho achavam que tinham ido um pouco melhor (por exemplo, F ≈ D), e os de alto desempenho subestimavam ligeiramente (A ≈ B), não “idiotas acham que são gênios.”
- Alguns observam que análises posteriores relatam que especialistas e novatos superestimam e subestimam com frequência semelhante; os especialistas apenas fazem isso em uma faixa mais estreita, o que implica melhor calibração.
- Outros destacam que, ao fazer a média por quartis e postos relativos, vieses estruturais podem criar o gráfico mesmo que a autoavaliação individual seja basicamente aleatória.
DK coloquial vs científico, e conceitos relacionados
- Muitos veem uma divisão:
- O DK científico (a afirmação forte sobre “a maioria” dos de baixo desempenho) parece frágil sob reanálise.
- O DK coloquial (“algumas pessoas são absurdamente confiantes quando incompetentes”) claramente combina com a observação cotidiana.
- Fenômenos relacionados são discutidos: síndrome do impostor, “doença do engenheiro”/ultracrepidarianismo (especialistas extrapolando para outras áreas), efeitos de falsa consenso e estágios clássicos de competência do tipo “você não sabe o que não sabe”.
Crise de replicação e ceticismo em psicologia
- Alguns participantes usam o DK como mais um exemplo numa crise de replicação mais ampla; eles questionam se grande parte da psicologia é ciência rigorosa.
- Outros rebatem: áreas “moles” são inerentemente mais difíceis de medir; replicações fracassadas não invalidam automaticamente todos os efeitos, apenas métodos fracos.
Anedotas, intuição e meta-ironia
- Muitos insistem que o DK “deve” ser real com base em experiência em gestão e tecnologia; outros alertam que isso é viés de confirmação.
- Há comentários meta recorrentes de que usar ou “refutar” com confiança o DK sem entender a estatística é, por si só, um exemplo de DK.