Qual Detector de IA o Turnitin Usa?

A detecção de escrita por IA do Turnitin é um modelo proprietário, desenvolvido internamente, que a própria empresa criou e lançou em abril de 2023. Não é uma versão rebatizada ou licenciada da ferramenta de outra empresa — o Turnitin constrói e treina seu próprio classificador em grandes conjuntos de textos pareados, humanos e escritos por IA, usando os dados de escrita de estudantes que já circulam pelo seu serviço de verificação de plágio.

Desde o lançamento, o Turnitin passou de um único modelo para uma combinação de modelos criados para sinalizar texto diretamente gerado por IA, texto de IA que foi parafraseado, e texto de IA alterado por chamadas ferramentas "humanizadoras". A empresa relata que o detector já foi usado para revisar bem mais de 200 milhões de trabalhos em milhares de instituições.

O modelo do Turnitin lê prosas longas e as pontua no nível de frase, atribuindo a cada frase um valor entre 0 (confiantemente humano) e 1 (provavelmente gerado por IA). Para isso, ele examina o documento em segmentos sobrepostos de cerca de 250 palavras, e depois agrega essas pontuações por frase em uma única porcentagem geral.

Essa porcentagem é uma estimativa de quanto do documento o software do Turnitin acredita ter sido gerado por ferramentas de escrita por IA — não um veredito definitivo. O próprio Turnitin apresenta o número como um estímulo para revisão humana, e não como prova de má conduta, e estudos independentes documentaram taxas relevantes de falsos positivos, incluindo taxas mais altas de sinalização para escritores não nativos de inglês e prosa acadêmica muito formulaica. Uma porcentagem é um sinal, não uma conclusão.

Não. GPTZero, Originality.ai, Copyleaks e Turnitin são produtos separados e concorrentes, cada um com seu próprio modelo de detecção desenvolvido de forma independente. O Turnitin não recorre ao GPTZero ou ao Originality.ai nos bastidores, e essas ferramentas não alimentam a pontuação do Turnitin.

É por isso que o mesmo texto pode receber porcentagens de IA diferentes de detectores diferentes: cada fornecedor treina com dados diferentes e calibra seus limites de forma diferente. O modelo do Turnitin é ajustado especificamente para escrita acadêmica e costuma ser descrito como conservador, mas continua sendo seu próprio sistema, com seus próprios pontos fortes e pontos cegos.

É fácil confundir as duas pontuações, mas elas medem coisas completamente diferentes. O Relatório de Similaridade compara o seu texto com um banco de dados de trabalhos publicados, páginas da web e outras submissões de estudantes para encontrar trechos coincidentes ou não originais — isso é detecção de plágio. Já o indicador de escrita por IA estima quanto do texto parece ter sido gerado por máquina, independentemente de ser original ou não.

Os dois funcionam de forma independente: os destaques de escrita por IA não aparecem no Relatório de Similaridade, e uma pontuação baixa de similaridade não diz nada sobre o indicador de IA. Um trabalho pode ter 0% de similaridade (totalmente original) e ainda assim receber uma porcentagem alta de escrita por IA, ou o contrário. Conhecer essa diferença é importante na hora de interpretar o retorno.

A detecção de escrita por IA do Turnitin é um recurso controlado pela instituição. Ela é ativada e administrada por escolas e professores, e, na maioria das configurações, o Relatório de Escrita por IA fica completamente oculto para os estudantes. Em geral, os estudantes não conseguem fazer login e rodar seu próprio trabalho no detector de IA do Turnitin sob demanda.

Isso significa que a primeira vez que um estudante sabe a sua porcentagem de escrita por IA costuma ser depois da entrega, por meio de um professor que decide compartilhá-la. Não existe um portal oficial de autoatendimento voltado ao estudante para o indicador de IA — o acesso fica com a instituição, a critério do educador.