Crédito: WIN-Initiative/Neleman/Getty
Artigos de pesquisa sobre o câncer com sinais de terem sido produzidos por fábricas de papel recebem o dobro de citações do que artigos reais na área, mostra uma análise de milhares de artigos.1.
Num estudo publicado no servidor de pré-impressão bioRxiv, os autores relatam que os artigos provavelmente produzidos por fábricas de papel são frequentemente citados ou citados por outros artigos potencialmente fraudulentos. As fábricas de papel são empresas que produzem e vendem manuscritos de baixa qualidade – muitas vezes contendo dados e resultados fabricados – concebidos para se assemelharem a pesquisas reais.
Adrian Barnett, estatístico da Universidade de Tecnologia de Queensland, em Brisbane, Austrália, e seus colegas dizem que sua análise sugere que a manipulação agregada de citações está inflando as métricas de impacto dos periódicos em oncologia molecular.
Essas métricas medem a frequência com que os artigos de um periódico são citados em outros estudos, entre outras coisas. Em muitos países, os artigos publicados em revistas com elevado fator de impacto são tidos em conta quando os investigadores se candidatam a empregos e financiamento.
Os detetives da integridade da pesquisa há muito suspeitam que as fábricas de papel estavam inflacionando as citações, disse René Aquarius, pesquisador de neurocirurgia do Centro Médico da Universidade Radboud, em Nijmegen, na Holanda. “Mas é bom ver isso confirmado de uma forma tão elegante”, acrescentou.
Os principais periódicos não estão imunes
Barnett diz que há uma suposição de que os estudos produzidos pelas fábricas de papel só estão sendo publicados em revistas com métricas de baixo impacto, mas a pesquisa de sua equipe sugere que não é o caso.
Barnett e seus colegas analisaram 33.159 artigos publicados entre 2012 e 2023 em 20 revistas de oncologia molecular de alto impacto. A equipe usou uma ferramenta de inteligência artificial chamada BERT, desenvolvida anteriormente para identificar documentos suspeitos. Ele procura recursos reveladores que geralmente aparecem em artigos retirados de chamadas em papel. As fábricas de papel produzem frequentemente manuscritos que utilizam conjuntos de dados fabricados, imagens manipuladas e frases invulgares ou “torturadas” concebidas para escapar aos detectores de plágio. Para cada artigo revisado, o BERT atribui uma pontuação de probabilidade que estima a probabilidade de um artigo produzir o estudo.
A ferramenta sinalizou 4.085 artigos – 12,3% de todos os artigos examinados – como tendo características associadas a artigos de fábricas de papel. Os pesquisadores identificaram artigos potencialmente fraudulentos em 19 dos 20 periódicos examinados. O câncer da natureza O único periódico analisado foi aquele que não publicou nenhum artigo questionável. (a naturezaSua equipe de notícias é editorialmente independente de sua editora, Springer Nature, que publica O câncer da natureza.)
Adam Day, fundador da Clear Skies, uma empresa de integridade de pesquisa em Londres que ajuda os editores a descobrir se seus periódicos estão sendo alvo de fábricas de papel, disse que detectar padrões inflacionados de contagem de citações pode ajudar a manter os periódicos em risco.
Os pesquisadores notaram problemas com o BERT em estudos anteriores, como a detecção de falsos positivos2 – Documentos originais. Não está claro se a taxa de falsos positivos do BERT afeta os resultados de pesquisas recentes, disse Day.
Barnett diz que os 4.085 artigos sinalizados provavelmente incluem alguma pesquisa real. Mas dados os grandes tamanhos das amostras, estes não alterarão os padrões gerais observados nas suas descobertas. Ele observa que a ferramenta se destina a apontar potenciais suspeitos e padrões gerais de atividade de coleta de documentos – em vez de determinar definitivamente se um artigo é genuíno.
Citações de jogos
A equipe também examinou os padrões de citação de artigos questionáveis e dos periódicos em que foram publicados. Eles descobriram que artigos suspeitos eram citados por outros jornais com até duas vezes mais frequência do que artigos não sinalizados. A diferença entre as taxas de citação de artigos questionáveis e não questionáveis foi maior nos primeiros anos após a publicação, mas diminuiu ao longo do tempo.
Os pesquisadores também identificaram um padrão de artigos questionáveis fazendo referência a outros artigos questionáveis. Os autores sugerem que as fábricas de papel estão citando seus artigos anteriores. “Quando um pesquisador sem escrúpulos compra um produto de uma fábrica de papel, ele recebe não apenas um artigo publicado, mas também uma citação desse artigo como parte do acordo”, diz Burnett.
Em alguns periódicos, artigos questionáveis são responsáveis por mais da metade das citações que recebem. Por exemplo, para Câncer molecular E Jornal de Pesquisa Experimental e Clínica do Câncer57% das citações são de artigos sinalizados. (Ambas as revistas são publicadas pela BMC Portfolio, que é propriedade da Springer Nature.)
A diretora de publicação do BMC Journal, Selene Carey, disse que ela e sua equipe estão revisando as descobertas da pré-impressão e tomarão medidas quando apropriado.
