A revisão por pares é um sistema baseado na honra (2008)
A revisão por pares na ciência é retratada como um filtro baseado na honra e na reputação, de barreira baixa, que fornece uma verificação básica de sanidade em vez de uma garantia de verdade. Os comentaristas destacam problemas sistêmicos — viés, gatekeeping, incentivos corruptos, pouca responsabilização dos revisores e o uso indevido do status de “revisado por pares” em políticas, na mídia e na avaliação de carreira — ao mesmo tempo em que observam que trabalhos defeituosos e até fraudes passam rotineiramente pelo processo. Alternativas e reformas como revisão por pares aberta, servidores de pré-print e avaliações mais transparentes e colaborativas são sugeridas como formas de melhorar a relação sinal-ruído sem sobrecarregar os pesquisadores nem consolidar o poder dos editores.
Papel e Limites da Revisão por Pares
- Amplamente apresentada como uma barreira baixa / verificação de sanidade, não como garantia de verdade ou de consenso científico.
- O valor real de um artigo é visto como sua influência posterior e sua replicação, não sua aceitação.
- Alguns argumentam que, se os artigos são “apenas pontos de partida para conversa”, não deveriam ser usados em excesso para recompensas ou políticas; outros respondem que os profissionais já os interpretam assim.
- Preocupação de que o público e os jornalistas tratem “revisado por pares” como “fato comprovado”, alimentando tanto o entusiasmo quanto a reação negativa.
Replicação, Prazos e Impacto
- Vários comentários enfatizam que a validação vem da reprodução ao longo do tempo, e não da revisão inicial.
- Faz-se a distinção entre artigos “seminais” (fortemente examinados, replicados) e artigos de “enchimento” (trabalho incremental e material para o currículo).
- Exemplos históricos (bactérias de úlcera, microbioma intestinal, debates sobre Alzheimer) são usados para mostrar como o consenso pode resistir a novas evidências por anos.
Falhas, Vieses e Incentivos
- A revisão por pares muitas vezes não detecta fraude e fabricação; são citados escândalos de grande repercussão e artigos trote.
- Há relatos de revisores bloqueando ou atrasando trabalhos concorrentes, exigindo autocitações ou impondo modismos estreitos; isso é visto como mais grave em alguns periódicos do que em conferências, ou vice-versa, dependendo da área.
- Sistemas centrados em conferências (especialmente em CS/ML) são criticados por serem adversariais, orientados por prestígio e vulneráveis a revisões de baixo esforço ou de má-fé.
- A revisão por pares para bolsas e as métricas de publish-or-perish são vistas como fatores que desviam a pesquisa de trabalhos “blue sky” e a empurram para temas seguros e financiáveis.
Modelos Alternativos e em Evolução
- Há forte apoio à revisão por pares pública e contínua: relatórios abertos, discussão visível, sinais de reputação para revisores.
- São mencionados exemplos de periódicos e conferências usando revisões abertas ou assinadas e pré-prints no estilo arXiv com comentários da comunidade.
- As sugestões incluem espaços separados para resultados tentativos versus resultados solidamente replicados, e novos “selos de aprovação” além das contagens de citações.
Uso Fora da Comunidade Científica
- O maior problema apontado ocorre quando formuladores de políticas, financiadores e comissões de contratação usam a revisão por pares como um atalho barato para uma avaliação profunda.
- Alguns veem isso como uma falha de jornalismo/comunicação; outros, como um uso estrutural indevido de uma ferramenta concebida para filtragem entre especialistas.
Tecnologia e IA
- Há preocupação de que IA generativa esteja sendo usada para escrever revisões; há apelos por responsabilização e revisões assinadas.
- Contraponto: ferramentas são aceitáveis se humanos continuarem responsáveis pela correção, embora haja desconforto com um ecossistema de artigos escritos por IA e revisados por IA.