Recentemente publiquei aqui na newsletter uma análise dos detectores de texto gerados por Inteligência Artificial, aplicativos que surgem como a “solução” para os problemas de integridade acadêmica gerados pela própria tecnologia.
Porém, a existência de falsos positivos e a própria opacidade desses sistemas, que não sabemos exatamente como funcionam, são pontos negativos. Somando-se ao clima de desconfiança e as severas repercussões que uma acusação podem ter sobre a vida acadêmica e profissional dos estudantes, muitas instituições já se posicionam de forma contrária a seu uso.
Com este prompt, proponho uma abordagem alternativa. Mais do que critérios probabilísticos usados para a identificação de padrões de escrita, a ideia é observar as características aparentes do texto.
Os critérios a seguir auxiliam a identificar as principais características do texto gerado por IA e que constituem, por si só, deficiências na produção textual. Ao final de contas, são elas o motivo pelo qual os alunos (e nós mesmos, professores) devemos evitar o uso de IA para produção de texto final.
Por este motivo, não é necessário passar o prompt por um chatbot para analisar o texto suspeito; você pode simplesmente utilizar a lista de critérios apresentada como um guia para sua própria avaliação. Esta análise tradicional, baseada em uma leitura atenta e crítica, permite que educadores identifiquem as características problemáticas nos textos sem depender de ferramentas tecnológicas adicionais (e custosas).
Alternativamente, o prompt fornece a base para uma atividade de letramento em IA. Ao revisarem textos que tenham gerado com auxílio de IA, os próprios alunos podem desenvolver uma percepção crítica sobre como essas produções frequentemente não atingem critérios essenciais de qualidade textual.
Contudo, e mantendo a coerência com nosso posicionamento sobre os detectores de texto IA, tome os resultados com cautela e consciência. Utilize-os como um guia para uma leitura aprofundada, prestando particular atenção para os pontos assinalados. Mas em hipótese nenhuma assuma que é um veredito inquestionável e objetivo.
Finalmente, uma observação em relação ao uso ético. Somente aplique o prompt caso tenha autorização do autor para tal. Ao enviar o texto para um aplicativo de IA, corre-se o risco de que ele seja utilizado como base para o treinamento. Esta é um dos cuidados apontados no guia “Diretrizes para o uso ético e responsável da Inteligência Artificial Generativa: um guia prático para pesquisadores”, do qual sou co-autor.
Analise o texto fornecido e identifique possíveis indicadores de que foi gerado por IA, considerando os seguintes aspectos:
Estrutura e coerência
-
Verifique se há quebras abruptas de raciocínio ou mudanças bruscas de tópico -
Identifique parágrafos que parecem desconectados entre si -
Avalie se existem conclusões que não decorrem logicamente das premissas apresentadas
Padrões de linguagem
-
Procure por repetições excessivas de palavras ou estruturas sintáticas -
Identifique uso exagerado ou inadequado de adjetivos -
Observe se há frases muito similares em estrutura -
Verifique o uso repetitivo de conectivos ou expressões de transição
Naturalidade do discurso
-
Avalie se o texto soa artificial ou mecânico -
Identifique expressões genéricas ou lugares-comuns em excesso -
Verifique se há inconsistências no tom ou registro linguístico -
Observe se existem formulações que se assemelham a padrões pré-definidos (“templates”)
Contextualização
-
Identifique afirmações vagas ou sem fundamentação específica -
Verifique se há exemplos concretos ou se o texto permanece abstrato -
Avalie se as referências culturais ou temporais são coerentes -
Encontre estrangeirismos e “traduções ao pé da letra” que não fazem sentido em nossa língua
Estilo
-
Observe se há variações naturais de ritmo e complexidade das frases -
Verifique se o texto mantém um estilo consistente, mas não roboticamente regular -
Identifique se há nuances e sutilezas próprias da escrita humana
Elementos criativos:
-
Verifique se há metáforas originais ou se são clichês -
Observe se as analogias são superficiais ou verdadeiramente significativas -
Identifique se há pensamento lateral ou conexões inesperadas entre ideias -
Avalie se o texto apresenta perspectivas inovadoras ou apenas repete visões comuns -
Observe se há humor ou ironia utilizados de forma natural
Qualidade da exemplificação
-
Verifique se os exemplos são genéricos ou específicos e detalhados -
Observe se os exemplos realmente ilustram o ponto sendo discutido -
Identifique se há variedade nos tipos de exemplos ou se seguem sempre o mesmo padrão -
Avalie se os exemplos demonstram conhecimento contextual ou são superficiais -
Verifique se os exemplos parecem baseados em experiência real ou são artificialmente construídos
Por favor, forneça uma análise detalhada, destacando os elementos encontrados em cada categoria, por separado. Ao final, inclua sua avaliação sobre a probabilidade do texto ter sido gerado por Inteligência Artificial.
Importante: não “force” sua análise. Caso não identifique quaisquer destes elementos, simplesmente diga que não estão presentes no texto analisado.
Em tempo, apliquei o prompt a um texto notoriamente gerado por IA, inclusive contendo alucinações de referências bibliográficas. A avaliação final foi:
A análise revela que este documento apresenta uma probabilidade extremamente alta de ter sido gerado por Inteligência Artificial. O texto exibe padrões repetitivos, contextualização superficial, exemplificação genérica e estilo mecânico característicos de sistemas de IA generativa.
Particularmente reveladores são: a repetição de estruturas, a falta de exemplos concretos, a sobreposição de conteúdo entre seções diferentes, os links de acesso com datas futuras, e a consistência excessivamente regular do discurso. Um pesquisador humano provavelmente produziria um texto com mais variações estilísticas, aprofundamento conceitual e exemplificação baseada em experiência prática.
Independentemente de ter usado ou não a tecnologia, estas características por si só evidenciam a falta de qualidade do texto. Foram estes os critérios utilizados na avaliação e na atribuição da nota.
Este prompt está licenciado sob a Licença Creative Commons Atribuição 4.0 Internacional. Esta licença exige que os reutilizadores deem crédito ao criador (Marcelo Sabbatini) e permite que os reutilizadores distribuam, remixem, adaptem e desenvolvam o material em qualquer meio ou formato, inclusive para fins comerciais.
Use o prompt por sua própria conta e risco; os resultados podem levar a informações incorretas.