Investigando ‘spin’ em revistas científicas
Um estudo recente investigou a “rotação” em artigos de pesquisa em psiquiatria e psicologia. Os autores do estudo encontraram spin em mais da metade dos resumos analisados. Que impacto isso pode ter nas decisões dos médicos?
À medida que os meios de comunicação e notícias competem por visualizações, às vezes podem exagerar as manchetes e o conteúdo para atrair o leitor.
Embora muitos acreditem que os periódicos científicos são algumas das fontes de informação mais confiáveis, eles não estão imunes ao desejo de serem lidos e compartilhados.
Um estudo recente buscou avaliar quanto autores de “spin” usaram nos resumos de trabalhos de pesquisa publicados em periódicos de psicologia e psiquiatria.
Eles escolheram olhar os resumos porque resumem o artigo inteiro, e os médicos costumam usá-los para ajudar a informar decisões médicas.
O que é spin?
Neste estudo, os autores descrevem sua definição de spin da seguinte forma:
“[T]ele usa estratégias específicas de relato, por qualquer motivo, para destacar que o tratamento experimental é benéfico, apesar de uma diferença estatisticamente não significativa para o resultado primário, ou para distrair o leitor dos resultados estatisticamente não significativos “.
Os autores publicaram suas descobertas na revista Medicina baseada em evidências do BMJ. Eles analisaram documentos dos seis principais periódicos de psiquiatria e psicologia de 2012 a 2017.
Os periódicos incluíam JAMA Psychiatry, a American Journal of Psychiatry, e as British Journal of Psychiatry.
Especificamente, os pesquisadores se concentraram em ensaios clínicos randomizados com “endpoints primários não significativos”. O objetivo primário de um estudo é o principal resultado do estudo, e “não significativo” nesse contexto significa que, estatisticamente, a equipe não encontrou evidências suficientes para respaldar sua teoria.
Spin vem de várias formas, incluindo:
- relatar seletivamente os resultados, em que os autores mencionam apenas determinados resultados
- P-hacking, em que os pesquisadores executam uma série de testes estatísticos, mas publicam apenas os números dos testes que produzem resultados significativos
- uso inadequado ou enganoso de medidas estatísticas
Quão comum é a rotação?
No total, eles analisaram os resumos de 116 artigos. Destes, 56% apresentaram evidências de rotação. Isso incluiu spin em 2% dos títulos, 21% das seções de resultados do resumo e 49% nas seções de conclusão do resumo. Em 15% dos artigos, o spin esteve presente nas seções de resultados e conclusão dos resumos.
Os pesquisadores também investigaram se o financiamento da indústria estava associado ao spin. Talvez surpreendentemente, eles não encontraram evidências de que o apoio financeiro da indústria aumentasse a probabilidade de giro.
Os resultados são preocupantes. Embora a rotação da mídia em geral seja preocupante, os médicos usam documentos de pesquisa para ajudar a orientar as decisões clínicas. Como escrevem os autores:
“Os pesquisadores têm uma obrigação ética de relatar de forma honesta e clara os resultados de suas pesquisas”. No entanto, na seção abstrata, os autores podem escolher os detalhes que eles incluem. Os autores do presente estudo têm preocupações sobre o que isso pode significar para os médicos:
“Adicionar rotação ao resumo de um artigo pode enganar os médicos que estão tentando tirar conclusões sobre um tratamento para os pacientes. A maioria dos médicos lê apenas o artigo na maioria das vezes. “
As implicações
Embora os pesquisadores não tenham investigado os efeitos do spin em grande profundidade, os autores apontam para um estudo que mostra o ponto de vista deles.
Nele, os cientistas coletaram resumos do campo da pesquisa sobre o câncer. Todos foram ensaios clínicos randomizados, com um resultado primário estatisticamente não significativo. Todos os resumos incluíram spin.
Os pesquisadores criaram segundas versões desses resumos nos quais eles removeram o spin. Eles recrutaram 300 oncologistas como participantes. Os pesquisadores deram a metade deles um resumo original com rotação, e deram à outra metade o resumo sem rotação.
Preocupantemente, os médicos que leram os resumos com rotatividade classificaram a intervenção abordada no artigo como mais benéfica.
Como escrevem os autores do artigo de estudo recente: “Aqueles que escrevem manuscritos de ensaios clínicos sabem que possuem uma quantidade limitada de tempo e espaço para captar a atenção do leitor. É mais provável que resultados positivos sejam publicados e muitos manuscritos os autores se voltaram para práticas de relatórios questionáveis para embelezar seus resultados “.
Outro estudo, publicado em 2016, amplia o escopo desta edição. Eles investigaram como os revisores – cientistas experientes que examinam artigos antes da publicação – influenciaram a rotação. Eles descobriram que em 15% dos casos, o revisor pediu aos autores para adicionar spin.
O presente estudo tem algumas limitações. Por exemplo, essas descobertas podem não se aplicar a outros periódicos ou campos de pesquisa. Eles também observam que identificar spin é um esforço subjetivo e, embora tenham empregado dois extratores de dados independentes, há espaço para erro.
O tamanho exato da questão da rotação na pesquisa médica ainda não foi descoberto, mas os autores concluem que “[a]os editores de revistas e os revisores devem continuar vigilantes para reduzir o risco de relatos tendenciosos dos resultados dos ensaios “.
Source link