Um estudo diz... Mas o que isso realmente significa?

Os artigos científicos devem ser escritos por pesquisadores experientes e submetidos a periódicos que devem garantir um determinado nível de qualidade. Para garantir a qualidade adequada, os periódicos recrutam especialistas na área para avaliar a qualidade do artigo e, com base nos comentários, o trabalho é aprovado ou rejeitado para publicação. Esse processo é chamado de revisão por pares

Mas com o passar dos anos, ficou claro que simplesmente citar um artigo não é mais suficiente para vencer uma discussão. Na verdade, é mais importante que o público entenda como contextualizar um artigo científico e qual pode ser sua real relevância.

Por que devemos ter mais cuidado com as referências científicas

Cerca de 3,4 milhões de artigos são publicados anualmente. O Nature Index 2024 mostra que os EUA e a China dominam as publicações, enquanto Portugal ocupa a 29ª posição em números absolutos. No entanto, países como Paquistão, Vietnã e Índia lideram no número de artigos per capita. A publicação científica está crescendo globalmente. Isso pode significar que mais países estão investindo em pesquisas, mais cientistas estão trabalhando em questões importantes ou que há uma maior curiosidade. No entanto, isso apresenta desafios: como podemos avaliar milhões de artigos e confiar em seus resultados? Papéis retraídos são uma tendência preocupante. Os editores removem publicações com problemas sérios, como má conduta, falhas metodológicas

A situação se torna ainda mais complicada quando artigos são citados em discussões públicas. É comum ver afirmações opostas apoiadas por “estudos”. Um exemplo bem conhecido é um artigo de 1998 que sugere uma ligação entre a vacina MMR e o transtorno do espectro do autismo. O estudo recebeu ampla atenção da mídia e contribuiu para o declínio nas taxas de vacinação. Investigações posteriores revelaram sérios erros metodológicos, conflitos de interesse e violações éticas, e o artigo acabou sendo retirado. Apesar disso, algumas figuras públicas ainda o citam, repetindo afirmações há muito desacreditadas pela comunidade científica

É importante ressaltar que, quando um artigo é posteriormente refutado, isso não significa necessariamente que os cientistas foram desonestos. Muitas vezes, reflete como a ciência progride: por meio de vários estudos testando a mesma pergunta de diferentes ângulos

Autor: João R. Neves;

Por que tantos artigos são publicados

organização da ciência moderna muitas vezes pressiona os pesquisadores a fabricar ou manipular resultados para garantir financiamento e manter posições acadêmicas. Isso leva a esquemas da Paper Mill que produzem artigos com dados fabricados por uma taxa ou trocam o credenciamento de autoria para aumentar o número de publicações. Os periódicos predatórios oferecem publicação com mínima ou nenhuma revisão real por pares para maximizar os lucros. Mesmo sem má conduta, os incentivos influenciam sutilmente a pesquisa. Estudos de replicação, que verificam a confiabilidade de resultados anteriores, raramente são viáveis devido à dificuldade em garantir financiamento. Finalmente, geralmente, resultados negativos não são publicados porque os periódicos não têm interesse em aceitar tais resultados, pois priorizam

Isso significa que a ciência não é confiável?

Claro que não. Devido à sua natureza autocorretiva, a ciência continua sendo o método mais confiável que temos para entender o mundo. Um único artigo não define sua força, mas contribui para o processo coletivo de teste, replicação e validação. O processo científico é, portanto, capaz de se corrigir ao longo do tempo, descobrindo possíveis falhas, refazendo experimentos para validar ou refutar uma hipótese anterior. Nesse sentido, o que parece verdadeiro e convincente hoje pode ser desacreditado amanhã. Por exemplo, entre o século XVII e o início do século XX, o tabaco foi recomendado para tratar asma e outras doenças respiratórias. Na época, com base nas melhores evidências disponíveis, o conhecimento dos médicos apontava nessa direção. No entanto, agora sabemos melhor que não só não trata, mas também piora essas condições. Essa correção constante, embora possa parecer contraditória, é como o conhecimento progride

Tipos de artigos científicos

Quando as pessoas citam “um estudo”, muitas vezes imaginam um artigo de pesquisa original. No entanto, esse não é o único tipo de redação científica. A literatura científica compreende vários artigos com finalidades distintas. Os mais comuns são artigos de pesquisa originais que apresentam novos experimentos ou dados. Estudos exploratórios investigam direções de pesquisa novas ou negligenciadas, geralmente concluindo com uma hipótese estruturada e uma chamada para pesquisas adicionais. A pesquisa confirmatória segue uma estrutura mais rígida, projetada para testar uma hipótese específica

Autor: João R. Neves;

Embora a maioria das pessoas pense nos artigos como estudos confirmatórios, eu diria que a maioria (dependendo da área) é exploratória. Em ambos os casos, esses estudos abordam questões específicas, portanto, um único estudo raramente fornece uma resposta definitiva

Os artigos de revisão resumem os resultados de muitos estudos sobre um tópico, fornecendo uma imagem mais clara da compreensão da comunidade científica. A maioria das resenhas é narrativa e carece de uma estratégia de busca definida, que possa refletir a intenção dos autores. As abordagens estruturadas incluem revisões sistemáticas e metanálises. As revisões sistemáticas seguem uma metodologia definida para pesquisar a literatura, incluindo palavras-chave, bancos de dados e critérios. As metanálises coletam dados quantitativos de estudos e os analisam estatisticamente para determinar a direção da evidência combinada

Finalmente, os pesquisadores poderiam discutir interpretações em vez de apresentar novos resultados em comentários ou artigos de opinião. Reconhecer o tipo de artigo ajuda a avaliar o peso de suas conclusões

Podemos saber se um estudo é confiável?

Seria conveniente se cada artigo científico viesse com uma pontuação de confiabilidade. Algumas ferramentas já tentam fazer algo semelhante analisando citações, verificando a consistência estatística ou avaliando se os métodos estão claramente relatados. No entanto, julgar a confiabilidade da pesquisa com base apenas no artigo é mais complicado. A força de um estudo depende de fatores como desenho experimental, tamanho da amostra e como os resultados se ajustam aos trabalhos anteriores.

Mesmo assim, algumas perguntas simples podem ajudar a contextualizar um estudo. Uma é se a afirmação se baseia em um único artigo ou em vários estudos que chegam a conclusões semelhantes. O conhecimento científico tende a se fortalecer quando diferentes grupos de pesquisa obtêm resultados comparáveis ao longo do tempo. Você pode procurar isso nas citações na introdução e discussão do artigo. Também pode ajudar a analisar como o estudo foi conduzido. Amostras muito pequenas, falta de grupos de controle ou descrições vagas dos métodos podem sugerir que os resultados devem ser interpretados com cautela. Para obter informações sobre esses tópicos, veja os métodos e as legendas do gráfico. Por fim, vale perguntar se o resultado se encaixa em um corpo maior de pesquisas. Um estudo que se alinha às descobertas consistentes de muitos artigos geralmente tem mais peso do que um resultado surpreendente que ainda não foi confirmado. Para verificar isso, talvez seja necessário dar uma olhada em bancos de dados científicos, como PubMed, Web of Science ou outros bancos de dados mais comuns no campo de estudo. Por esse motivo, os cientistas raramente confiam em um único artigo, mas sim no acúmulo de evidências ao longo do tempo.

No final das contas, um artigo científico não é a resposta final. É uma contribuição para uma conversa contínua sobre como o mundo funciona. Então, da próxima vez que alguém disser que “a ciência diz” ou que “um estudo prova” alguma coisa, talvez valha a pena fazer uma pausa por um momento. Um artigo sozinho raramente resolve um debate. Aprender a ler artigos científicos dessa forma pode ser a etapa mais útil para navegar no cenário avassalador das publicações modernas