Radar Perene / Arquivos / ciência

O que é peer review — e por que um estudo revisado vale mais

◦ Metodologia v2.2 dos índices (working papers com DOI). Ver metodologia.

Ciência

Dois estudos chegam ao leitor na mesma semana e afirmam coisas opostas sobre o mesmo mercado. Os dois têm gráficos, os dois citam dados, os dois soam competentes. O leitor não tem laboratório para refazer as contas de nenhum deles. Em que se apoiar? A ciência conviveu com esse problema durante séculos e a resposta institucional que ela construiu tem nome em inglês e tradução tímida: revisão por pares.

Peer review (revisão por pares) é o processo em que um periódico envia um estudo para outros pesquisadores da mesma área — em geral sem revelar quem escreveu e sem revelar quem revisa — para que procurem erros, exijam testes adicionais e recomendem ou não a publicação. É um filtro de qualidade aplicado por concorrentes; não é um certificado de verdade.

A definição carrega as duas metades que este artigo desenvolve: por que o filtro vale — e por que ele não vale o que muita gente lhe atribui.

Como funciona por dentro

O percurso típico num periódico de economia ou finanças tem etapas bem demarcadas. O texto chega ao editor, que decide primeiro se ele sequer entra na fila — boa parte é devolvida nessa triagem inicial, sem parecer. O que passa segue para dois ou três pareceristas: pesquisadores da área, não remunerados, que assinam pareceres anônimos apontando falhas de método, pedindo testes que faltam, questionando interpretações.

Raramente a primeira resposta é "sim". O desfecho comum é o pedido de revisão: o autor refaz, responde ponto a ponto, e o texto volta aos mesmos pareceristas — às vezes por mais de uma rodada. O processo inteiro se mede em meses, com frequência em mais de um ano. O anonimato duplo, onde é adotado, tem função precisa: o parecer deve mirar o texto, não o prestígio ou a obscuridade de quem o escreveu.

É um mecanismo trabalhoso, lento e imperfeito — e continua sendo o mais confiável que a comunidade científica encontrou para separar argumento examinado de argumento apenas publicado.

O que o selo garante — e o que não garante

Um estudo revisado vale mais por uma razão simples: pessoas com competência e incentivo para derrubá-lo tentaram, e não conseguiram. O leitor sem laboratório terceiriza para os pareceristas o teste que não pode fazer. É informação real, e é por isso que a hierarquia importa: parecer de especialista hostil vale mais que curtida de público simpático.

O que o selo não garante é a verdade. Estudos revisados já foram refutados, corrigidos e retratados; a crise de replicação das últimas décadas mostrou que resultados com carimbo também caem quando alguém refaz as contas. A revisão examina o argumento e os testes apresentados — ela não refaz o experimento, não audita os dados brutos, não elimina o viés de publicação. O carimbo diz "foi examinado com rigor"; nunca diz "está certo".

Para o leitor de pesquisa de mercado, a régua prática fica assim: revisado > não revisado, em igualdade de condições — e nenhum dos dois dispensa a pergunta sobre método, amostra e o que ficou fora do relatório.

Existe ainda a falsificação do selo, que o leitor precisa conhecer: os periódicos ditos predatórios, que cobram do autor e publicam qualquer texto após uma "revisão" de fachada, às vezes em dias. Eles imitam a aparência do sistema — nome pomposo, site de revista, até fator de impacto inventado — sem executar o exame que dá valor ao carimbo. A defesa é a mesma de sempre em ciência: verificar quem edita, quem já publicou ali e quanto tempo a avaliação levou. Um "aceito em 48 horas" diz tudo o que importa.

Onde a casa está nesse funil

A produção pública do Radar Perene vive hoje no degrau anterior a esse filtro: são working papers — estudos completos, publicados no Zenodo com DOI, que ainda não passaram pelo crivo de pareceristas. O estudo estrutural do Índice Ânima, por exemplo, está público sob o DOI 10.5281/zenodo.21327595, com suas versões e correções registradas no próprio repositório, à vista de qualquer leitor.

Dizemos isso com a naturalidade de quem conhece o mapa: working paper é uma etapa do percurso científico, não um atalho para evitá-lo. Cada estágio tem seu grau de garantia, e declarar o estágio é parte da honestidade do produto — um estudo da casa afirma na capa exatamente quanto escrutínio externo já recebeu, nem mais, nem menos.

Perguntas frequentes

Os pareceristas são pagos?

Em regra, não — a revisão é trabalho voluntário, tratado como dever da comunidade científica. É um dos motivos da lentidão do sistema, e um dos temas mais debatidos da publicação acadêmica atual.

Quanto tempo leva uma revisão por pares?

Varia por área e periódico; em economia e finanças, o ciclo completo costuma se medir em muitos meses, e ultrapassar um ano não é exceção. A lentidão é o preço do exame — e é a razão de existirem working papers.

Estudo revisado pode estar errado?

Pode, e a história da ciência está cheia de exemplos. A revisão reduz a probabilidade de erro grosseiro; não a zera. A correção definitiva vem de outro mecanismo: a replicação por pesquisadores independentes.

Quem revisa é sempre anônimo?

No formato dominante em economia, sim — anonimato simples ou duplo. Há periódicos experimentando revisão aberta, com pareceres publicados e assinados; o debate entre os dois modelos segue vivo.

---

O filtro dos pareceristas existe, em boa parte, para pegar um defeito específico que domina a pesquisa quantitativa — e é o próximo tema da trilha: Overfitting em backtest não é sobre trading, é sobre método.

Leituras da casa: o produto diário desse rigor está na leitura de hoje, no Diário.

Ler um estudo específico com essa régua — o que o selo dele garante e o que não garante — é o tipo de exame que a casa faz sob consulta.

Leia também: Overfitting em backtest não é sobre trading, é sobre método · O que é o Índice Ânima? · O que é um working paper — e o que ele não é