p Mês passado, O anterior Ministro de Pesquisa e Tecnologia da Indonésia gabou-se de que em 2019, A Indonésia ultrapassou a Malásia e Cingapura no número de artigos acadêmicos publicados. p Contudo, estudiosos argumentam que esta 'produtividade' é o resultado de um sistema de medição de desempenho fortemente criticado por acadêmicos com base principalmente em produção e citações, em vez de qualidade de pesquisa.

p A avaliação de desempenho baseada em resultados também levou a práticas antiéticas galopantes entre a comunidade de pesquisa da Indonésia, incluindo 'dragagem de dados' - inflando tamanhos de amostra ou adulteração de modelos estatísticos - para produzir pesquisas com resultados que provem suas hipóteses, que são mais favorecidos por periódicos.

p Sandersan Onie, um Ph.D. candidato na University of New South Wales, disse durante um webinar sobre transparência de pesquisa realizado no final do mês passado, que essas práticas desonestas aumentaram à medida que os pesquisadores buscam a publicabilidade em vez da precisão.

p "Os experimentadores podem realizar dez tipos diferentes de procedimentos estatísticos, mas eles relatam apenas aquele com maior probabilidade de ser publicado e citado. Eles realizam relatórios seletivos, " ele disse.

p Mais de 1, 000 participantes de cerca de 30 instituições transmitiram o webinar intitulado " Avanço da Ciência na Indonésia:Práticas Atuais de Pesquisa Global ", o primeiro desse tipo na Indonésia.

p Simine Vazire, professor de psicologia da University of California-Davis, foi um dos principais palestrantes do evento.

p Ela diz que embora existam muitas maneiras de promover a transparência, geralmente, existem três estratégias que podem aumentar diretamente a credibilidade da pesquisa.

p Pré-registro do processo de experimentação

p O primeiro método que Vazire sugeriu foi uma prática comumente conhecida como pré-registro, que é um carimbo de data / hora, versão somente leitura de um plano de pesquisa criado antes da realização do estudo.

p Os pesquisadores precisam elaborar a pesquisa que planejam realizar antes mesmo de coletar uma porção de dados.

p As informações podem variar desde as hipóteses propostas, a qual método estatístico será usado para analisar os dados.

p O documento será então arquivado em um sistema como o Open Science Framework (OSF), uma plataforma de gerenciamento de pesquisa de código aberto.

p "Se você obtiver uma descoberta empolgante com um resultado, você não será capaz de esconder mais tarde o fato de que também mediu doze outros resultados, "Vazire disse.

p "Você está se comprometendo com antecedência a tornar público quantos resultados e tratamentos você teve."

p A segunda prática é enviar o que é conhecido como relatórios registrados. Essencialmente, eles são uma forma mais rigorosa e formal de pré-registro.

p Os autores enviam um manuscrito pré-elaborado explicando o argumento de venda em mais detalhes a um periódico para revisão inicial.

p Se os editores decidirem que o estudo atende a todos os seus critérios para um bom projeto de pesquisa, eles dão aos autores o que é chamado de aceitação 'em princípio'. Aqui, os editores aceitam os artigos antes mesmo do autor coletar os dados. A revista publicará o artigo independentemente do resultado do estudo, portanto, mantendo a integridade científica.

p “O bom dos relatórios registrados é que a decisão de aceitar ou rejeitar o artigo para publicação não depende de sua hipótese estar certa, se você obteve um resultado estatisticamente significativo, ou se os relatórios são chocantes ou emocionantes ou provavelmente serão muito citados, "Vazire disse.

p Essas práticas de pré-registro impedem os cientistas de dragar dados e 'fazer hipóteses após os resultados serem conhecidos' (HARKing) . Isso ocorre porque, se os pesquisadores se desviarem de seu método de pesquisa previamente acordado, eles devem justificar por que o fizeram.

p Além de que, relatórios registrados podem resolver o problema em que pesquisas com resultados negativos têm baixa probabilidade de serem publicadas.

p Os resultados negativos são igualmente importantes para a ciência, mas os periódicos os consideram pouco atraentes e atraem menos citações.

p Um estudo de 2019 da Cardiff University, por exemplo, destaca como cerca de 60% dos trabalhos de pesquisa publicados usando o sistema de relatórios registrados têm resultados negativos.

p Compare isso com as estimativas da literatura atual, onde aproximadamente apenas 10% dos artigos publicados em periódicos contêm resultados negativos, indicando viés de publicação extremo.

p Atualmente, apenas 209 periódicos no mundo oferecem um mecanismo de relatórios registrados em seu processo de publicação, nenhum deles da Indonésia. Isso equivale a menos de 0,01% dos 24, 600 títulos de periódicos revisados ​​por pares e indexados no Scopus.

p Rizqy Amelia Zein, professor de psicologia da Universitas Airlangga que foi um dos organizadores do webinar, disse em uma entrevista de acompanhamento que as publicações indonésias ainda têm um longo caminho a percorrer.

p "A maioria dos periódicos indonésios se preocupa apenas com os aspectos cosméticos. Raramente se preocupam com a qualidade, já que sua principal prioridade é, obviamente, a indexação no Scopus, " ela disse.

p Incentivar o compartilhamento de dados por meio de emblemas

p O último método que Vazire recomenda é o uso de crachás por periódicos para motivar os pesquisadores a compartilhar dados.

p O melhor exemplo talvez seja a Association for Psychological Science. Três de suas revistas de prestígio, Incluindo Ciência Psicológica , oferecer distintivos para autores e seus manuscritos aceitos em reconhecimento às práticas científicas abertas.

p Três emblemas estão disponíveis. Um para fornecer dados em um repositório público, um para fornecer materiais de acesso aberto, e outro para a implementação de práticas de pré-registro.

p Um estudo americano de 2016 confirmou que, após a implementação desses emblemas, o número de Ciência Psicológica artigos que relataram dados abertos dispararam.

p "Eu também vi um efeito cascata dessa política em periódicos menores. Embora eles não tivessem emblemas ou políticas de dados abertos, ainda vimos muitos outros autores compartilhando seus dados porque eles entendiam que agora as pessoas confiavam mais nos papéis quando tinham dados abertos, "Vazire disse.

p Um estudo de 2017 realizado por pesquisadores da Queensland University of Technology sugeriu que crachás de dados abertos foram o único incentivo testado que motivou os pesquisadores a compartilhar dados.

p Sandersan diz que essas práticas de transparência e responsabilidade não são as soluções finais, mas representam passos em direção ao objetivo final de produzir pesquisas confiáveis ​​de alta qualidade.

p “É muito importante não lermos apenas o jornal, mas sabemos quais decisões os pesquisadores tomam e como chegaram lá. Ao exigir transparência, pesquisadores podem mostrar todo o seu processo de pensamento, " ele disse.

p "Se apenas incentivarmos o índice h e a produção de publicações e todas essas coisas, isso só nos ajudará a criar pesquisas ruins. " p Este artigo foi republicado de The Conversation sob uma licença Creative Commons. Leia o artigo original.