As respostas geradas pela IA estão minando a pesquisa de crowdsourcing

As pesquisas online estão repletas de respostas geradas por IA, que podem contaminar fontes de dados críticas para os cientistas.

Plataformas como a Prolific pagam aos participantes uma pequena taxa para responder às perguntas dos pesquisadores. É popular entre os acadêmicos como uma maneira fácil de recrutar participantes para pesquisas comportamentais.

Anne-Marie Nussberger Os seus colegas do Instituto Max Planck para o Desenvolvimento Humano, em Berlim, Alemanha, decidiram investigar com que frequência os entrevistados usam inteligência artificial depois de observarem exemplos no seu próprio trabalho. “As taxas de incidência que observávamos eram realmente chocantes”, diz ela.

Descobrimos que 45% dos participantes que responderam a uma pergunta aberta no Prolific copiaram e colaram o conteúdo na caixa. Os pesquisadores acreditam que isso indica que as pessoas estão fazendo perguntas aos chatbots de IA para economizar tempo.

Um exame mais aprofundado do conteúdo das respostas sugeriu que elas comunicavam de forma mais clara o uso da IA, como linguagem “excessivamente detalhada” ou “claramente não humana”. “Com base nos dados que recolhemos no início deste ano, parece que uma proporção significativa dos estudos está contaminada”, diz ela.

Em um estudo subsequente usando o Prolific, os pesquisadores adicionaram armadilhas projetadas para prender pessoas que usam o chatbot. Dois reCAPTCHAs, um teste de pequena escala baseado em padrões projetado para distinguir entre humanos e bots, detectaram 0,2% dos participantes. Um reCAPTCHA mais sofisticado, que utiliza informações sobre o comportamento passado e atual de um usuário, eliminou 2,7% adicionais de participantes. Uma pergunta baseada em texto, invisível para humanos, mas legível para bots, que solicitou a inclusão da palavra “avelã” na resposta recebeu um adicional de 1,6%, e a proibição de copiar e colar identificou um adicional de 4,7%.

“O que precisamos fazer é responder e reagir às pesquisas on-line, em vez de desacreditá-las completamente”, diz Nussberger. Cabe aos pesquisadores, diz ela, tratar as respostas com mais suspeita e tomar medidas para evitar que a IA atue sobre elas. “Mas o que é realmente importante é que também acho que grande parte da responsabilidade recai sobre as plataformas. Elas precisam responder e levar esta questão muito a sério.”

em uma declaração para novo cientistaUm porta-voz da Prolific disse: “A Prolific tem enfrentado os desafios da IA ​​na pesquisa on-line há mais de um ano e desenvolvido soluções que protegem a qualidade dos dados. Nossas descobertas mostram que uma direção clara pode reduzir o uso de IA em 61%. Nosso recurso de verificação de confiabilidade, lançado em maio de 2025, detecta conteúdo de IA com 98,7% de precisão. Continuamos a ser transparentes e a fornecer soluções robustas para a comunidade de pesquisa.

“A integridade da pesquisa comportamental online já está sendo desafiada por participantes em sites de pesquisa que se apresentam falsamente ou usam bots para obter dinheiro ou vouchers, sem mencionar a validade das respostas remotas de autorrelato para a compreensão da psicologia e do comportamento humanos complexos”. Matt HodgkinsonConsultor freelancer de ética em pesquisa. “Os pesquisadores precisam trabalhar juntos para encontrar maneiras de verificar remotamente o envolvimento humano ou retornar à antiga abordagem de contato face a face”.