Turnitin detecta ChatGPT? - De que forma e o que informa
Se você estava se perguntando, "O Turnitin detecta ChatGPT?"—você está no lugar certo.
Este artigo foi feito para estudantes, professores e todos aqueles interessados em saber como a integridade acadêmica é garantida na era da inteligência artificial avançada.
Vamos mergulhar e explicar como a tecnologia de detecção do Turnitin funciona, o que ela procura e como apresenta seus resultados. Vamos começar!
Principais Conclusões: O Turnitin Detecta o ChatGPT?
O Turnitin consegue identificar conteúdo gerado por IA, inclusive resultados provenientes do ChatGPT. Ele foi desenvolvido para determinar se um trabalho foi criado ou parafraseado por uma inteligência artificial.
No entanto, o Turnitin não informa qual ferramenta de IA, como o ChatGPT, foi utilizada nem a qual conta ela pertence. O foco é exclusivamente na existência de conteúdo gerado por IA.
O Turnitin apresenta uma taxa de exatidão de 98% na identificação de trabalhos gerados por IA.
Os resultados da detecção são exibidos no relatório de similaridade, normalmente acessível apenas aos professores.
Alternativa para Estudantes: Para obter relatórios semelhantes, os estudantes podem usar o T-detector, que realiza uma análise com base nos dados oficiais do Turnitin para gerar um relatório que inclui tanto as pontuações de similaridade quanto as de IA, replicando o que os professores veem.
Qual Conteúdo o Turnitin Detecta?
Para compreender completamente como o Turnitin lida com o conteúdo gerado pelo ChatGPT, é fundamental identificar os elementos específicos que ele analisa:
Texto Gerado por IA: O Turnitin consegue detectar textos criados por IA, verificando se o conteúdo foi produzido por modelos como GPT-3, GPT-3.5 e GPT-4.
Texto Parafraseado por IA: Ele também é capaz de reconhecer conteúdos que foram parafraseados por ferramentas de IA, um método comum para burlar os detectores de plágio.
Modelos e Alcance da Detecção
Modelos Suportados: A tecnologia atualmente se concentra em modelos populares de escrita por IA, como GPT-3, GPT-3.5 e, mais recentemente, GPT-4. Esses modelos são conhecidos pelo amplo uso na criação de textos com características humanas.
Expansão Futura: O Turnitin pretende atualizar e ampliar continuamente sua capacidade de detecção para incluir novos modelos de IA, garantindo que seu sistema continue eficaz contra as ferramentas de escrita por IA mais modernas.
Submissões Anteriores
O Indicador de IA do Turnitin não é exclusivo para novas submissões; ele também pode identificar conteúdo gerado por IA em documentos enviados anteriormente, desde que estes sejam reenviados para análise.
Mecânica da Detecção
Comparação com Banco de Dados e Textos: O Turnitin utiliza um extenso banco de dados de trabalhos acadêmicos, artigos e periódicos para comparar os documentos submetidos. Essa comparação auxilia na identificação de correspondências e semelhanças que possam indicar plágio ou conteúdo gerado por IA.
Padronização da Escrita e Análise Estatística: O software emprega algoritmos avançados para detectar padrões de escrita característicos de textos gerados por IA, diferenciando-os da escrita humana. Ele também analisa elementos estruturais, como o tamanho das frases e a escolha de palavras, a fim de identificar anomalias que sugerem o envolvimento de IA.
Análise de Citações e Referências: O Turnitin verifica as citações e referências presentes nos documentos para assegurar que todas as fontes estejam corretamente citadas.
Após a análise de um documento, o Turnitin gera um relatório de IA no Relatório de Similaridades, destacando os trechos que correspondem a texto gerado por IA e apresentando uma porcentagem.
Como o Turnitin Detecta Conteúdo Gerado pelo ChatGPT
Modelo de Detecção de Escrita por IA do Turnitin
O Turnitin utiliza um processo detalhado para identificar textos gerados por IA, descrito da seguinte maneira:
Segmentação de Texto: Cada trabalho submetido é inicialmente dividido em segmentos de aproximadamente algumas centenas de palavras (cerca de cinco a dez frases).
Análise de Sobreposição: Esses segmentos se sobrepõem para assegurar que cada frase seja analisada dentro de seu contexto.
Modelo de Pontuação: Cada sentença recebe uma nota em uma escala de 0 (escrita por humanos) a 1 (gerada por IA).
Estimativa Geral: Com base na média das pontuações de todos os segmentos, o modelo gera uma estimativa geral da proporção do texto que se presume ter sido gerada por IA.
Funcionamento da Detecção de Paráfrase por IA do Turnitin
Assim que um segmento é classificado como gerado por IA pelo modelo de detecção de escrita, o modelo de detecção de paráfrase por IA procede à análise desses segmentos:
Análise de Paráfrase: Se o modelo de IA determinar que uma sentença é gerada por IA, mas não foi parafraseada com o auxílio de uma ferramenta de IA, ela recebe uma nota de 1 no modelo de detecção e uma nota de 0 no modelo de parafrase, sendo marcada apenas como gerada por IA.
Pontuação Abrangente: As médias das pontuações de todos os segmentos são utilizadas para gerar uma estimativa geral de quanto do texto submetido se acredita ter sido gerado por IA e parafraseado com o auxílio de uma ferramenta de IA.
Importante: o sistema do Turnitin não tem como alvo específico o ChatGPT ou qualquer outra ferramenta de IA em particular; ele realiza uma verificação abrangente de muitos conteúdos gerados por IA.
Como o Turnitin Exibe a Detecção de Texto Gerado pelo ChatGPT
Interpretação do Relatório de IA
Quando o Turnitin identifica texto que pode ter sido gerado por IA, como o conteúdo do ChatGPT, os resultados são incorporados ao relatório geral de similaridade sem que o texto seja especificamente rotulado como "gerado pelo ChatGPT." Confira o que você encontrará no relatório:
Pontuação Combinada: A pontuação geral de detecção de IA é a soma das pontuações do detector de IA e da detecção de paráfrase de IA. Essa pontuação total aparece de forma destacada no relatório de similaridade.
Pontuações Individuais: Você também encontrará pontuações separadas para conteúdo gerado por IA e conteúdo parafraseado por IA, oferecendo uma visão detalhada da análise.
Codificação de Cores dos Resultados
Os resultados da detecção de escrita por IA utilizam cores específicas para facilitar a interpretação do relatório:
Ciano: Texto realçado em ciano indica que o conteúdo provavelmente foi gerado por IA.
Roxo: Texto realçado em roxo sugere que o conteúdo gerado por IA provavelmente foi parafraseado.
Entendendo os Indicadores de Detecção de IA
Ao abrir o Relatório de Similaridade, o recurso de detecção de escrita por IA apresenta indicadores baseados na análise realizada:
Azul com Porcentagem (0-100): Indica a porcentagem de texto que o modelo de IA do Turnitin determinou ter sido gerado por IA. Essa porcentagem não se aplica a todo o documento, mas apenas a textos em prosa longa.
Baixa Porcentagem (*%): Indica que menos de 20% do conteúdo foi escrito por IA; esses casos são marcados com um asterisco, sem exibir a porcentagem, para minimizar falsos positivos.
Cinza (Sem Porcentagem Exibida): Indica que a submissão não pôde ser processada para detecção de IA, possivelmente por não atender às especificações do sistema quanto ao tipo de arquivo, tamanho ou idioma.
Erros e Limitações no Processamento
Se uma submissão não atender aos critérios necessários para a detecção de IA ou se ocorrer um erro de processamento, o Turnitin poderá exibir uma mensagem de erro. As submissões devem cumprir requisitos específicos relacionados ao tamanho do arquivo, à contagem de palavras e ao idioma para que o relatório de escrita por IA seja gerado com sucesso. Caso esses requisitos não sejam atendidos ou ocorra algum problema técnico, o Turnitin poderá não conseguir processar a detecção de IA, sendo necessária uma nova submissão ou uma investigação adicional pela equipe de suporte.
Relatório de Similaridade Turnitin vs. Detecção de Escrita ChatGPT
O Relatório de Similaridade do Turnitin é um recurso tradicional que avalia a originalidade do trabalho do estudante ao calcular a porcentagem de texto que corresponde a outros documentos presentes no extenso banco de dados do Turnitin, que inclui artigos acadêmicos, livros e páginas da web.
Em contrapartida, a Detecção de Escrita AI do Turnitin analisa as submissões para identificar a porcentagem do texto que pode ter sido gerada por AI, independentemente da pontuação de similaridade. A detecção por AI não interage com as métricas de similaridade, ou seja, mudanças em um não afetam o outro. Tanto a Detecção de AI quanto o Relatório de Similaridade podem ser acessados e revisados de forma independente, podendo cada um ser baixado em PDF para uma análise detalhada.
Quão Preciso é o Turnitin na Detecção de Texto Escrito pelo ChatGPT?
O Turnitin busca manter uma detecção eficaz de IA, mantendo a taxa de falsos positivos abaixo de 1% para documentos com um conteúdo significativo de IA. Contudo, há limitações notáveis na precisão do modelo de detecção de IA do Turnitin:
Falsos Positivos: O modelo apresenta uma taxa de falsos positivos de 1%, o que significa que pode, por engano, identificar como gerado por IA um em cada 100 textos escritos por humanos.
Taxa de Não Detecção: Pode deixar de identificar até 15% do conteúdo escrito por IA, de forma que, se 45% de um documento for identificado como escrito por IA, a porcentagem real pode chegar a 60%.
Requisitos de Conteúdo: Os algoritmos do Turnitin precisam de pelo menos 300 palavras de prosa contínua para identificar efetivamente o conteúdo gerado por IA. Isso quer dizer que textos mais curtos e formatos que não consistem em prosa, como itens em listas, podem não ser analisados com precisão.
A ferramenta de detecção de paráfrase por IA foi criada para complementar o detector principal de IA, mas pode, às vezes, sinalizar erradamente textos gerados por IA que não passaram por paráfrase ou deixar de identificar textos que foram parafraseados.
Perguntas Frequentes
Qual percentual é considerado inaceitável no Turnitin?
O índice de similaridade aceitável no Turnitin pode variar conforme a instituição e o trabalho. Em geral, um índice abaixo de 15% costuma ser aceitável, 16-25% pode levantar suspeitas, e acima de 25% tende a ser considerado inaceitável. Sempre verifique com seu instrutor para obter as diretrizes específicas para o seu curso.
O Turnitin pode detectar conteúdo produzido por IA de outras ferramentas?
Sim, o sistema de detecção do Turnitin foi desenvolvido para identificar textos produzidos por uma variedade de ferramentas de IA, não se limitando a modelos específicos. Isso inclui ferramentas avançadas de escrita com IA amplamente utilizadas na indústria.
O Turnitin consegue detectar o ChatGPT mesmo se você parafrasear?
Sim, o Turnitin é capaz de identificar textos gerados pelo ChatGPT mesmo quando são parafraseados, dependendo do grau e da forma da parafraseação.
Um professor pode saber se usei o ChatGPT?
Professores podem conseguir identificar o uso do ChatGPT ou de ferramentas semelhantes em seu trabalho por meio das capacidades de detecção de IA do Turnitin, especialmente se o conteúdo apresentar padrões típicos de textos gerados por IA.
Como evitar que o Turnitin detecte o ChatGPT?
Para reduzir as chances de detecção, garanta que suas submissões sejam essencialmente originais, utilize o conteúdo do ChatGPT de forma moderada e revise profundamente qualquer material gerado por IA para incorporar um pensamento original e uma análise contextual específica.
O Turnitin consegue detectar tanto o ChatGPT quanto o QuillBot?
Sim, o Turnitin pode identificar conteúdos gerados tanto pelo ChatGPT quanto pelo QuillBot, pois seus algoritmos reconhecem os padrões de texto característicos dessas ferramentas de IA.
É possível verificar trabalhos submetidos anteriormente para identificar escrita por IA?
Sim, trabalhos antigos podem ser reavaliados em busca de conteúdo gerado por IA se forem reenviados para análise no Turnitin, desde que a detecção de escrita por IA esteja ativada em sua conta.
Quais idiomas são suportados pela detecção de IA do Turnitin?
Atualmente, as capacidades de detecção de IA do Turnitin suportam inglês e, a partir de setembro de 2024, também espanhol para documentos submetidos em formato extenso. Contudo, a detecção de parafraseamento por IA está disponível apenas para submissões em inglês.
Resumindo:
O Turnitin está preparado para identificar conteúdos provenientes do ChatGPT e de outras ferramentas de IA semelhantes, garantindo que a integridade acadêmica não seja comprometida por submissões geradas por IA.
Sempre confira as diretrizes específicas da sua instituição quanto às pontuações de similaridade aceitáveis e ao conteúdo criado por IA.
Obrigado por se aprofundar conosco nesta análise das capacidades de detecção do Turnitin—permaneça alerta e mantenha seu trabalho sempre original!