Turnitin identifica IA? - Notas, funcionamento e relatório
Olá! Já se perguntou como o Turnitin rastreia o conteúdo gerado por IA nos seus trabalhos?
Se você é um estudante preocupado com um trabalho semestral ou um professor buscando manter a integridade acadêmica, entender as ferramentas do Turnitin é fundamental.
Então, vamos explorar como este sistema inteligente funciona, o que ele consegue detectar e quem tem acesso a essas informações. Vamos lá!
O Turnitin Deteta AI?
Sim, o Turnitin pode detetar conteúdo gerado por AI e produzir um relatório. Esta capacidade foi integrada nos serviços do Turnitin a partir de 4 de abril de 2023, garantindo que todos os trabalhos submetidos através da plataforma não são apenas verificados quanto ao plágio, mas também rastreados quanto ao material gerado por AI.
Quem Pode Ver o Relatório de Deteção de AI?
A visibilidade dos relatórios de deteção de AI depende se a instituição ou o professor ativou este recurso. Normalmente, estes relatórios, que incluem uma pontuação de AI indicando a probabilidade de o conteúdo ser gerado por AI, não são visíveis para os alunos. Geralmente, são acessíveis apenas aos professores que podem, então, optar por usar as informações para orientar ações ou discussões adicionais sobre integridade académica.
Curioso sobre o que o seu professor vê quando verifica o seu trabalho no Turnitin?
Não se preocupe, existe uma solução alternativa se estiver ansioso para obter todos os detalhes sobre o seu trabalho. Serviços como "T-detector" estão aqui para o resgate! Ao usar dados oficiais do Turnitin, este serviço permite que veja exatamente o que o seu professor vê. Você recebe um relatório que inclui a porcentagem de similaridade e os resultados da deteção de AI. É uma ótima ferramenta para qualquer aluno que queira investigar a fundo, entender as suas pontuações e ajustar as suas tarefas antes da submissão final.
Quem Pode Acessar o Detector de IA da Turnitin?
Somente usuários com uma licença Turnitin Originality têm acesso à detecção de textos gerados por IA. Se você utiliza o Turnitin Similarity, Feedback Studio ou Originality Check, precisará conversar com seu gerente de contas da Turnitin para verificar as opções de acesso. Usuários do iThenticate 2.0 também podem adicionar essa funcionalidade entrando em contato com o gerente de contas.
A partir de 1º de janeiro de 2024, a detecção de textos gerados por IA estará disponível exclusivamente através da licença Originality. Sem essa licença, usuários não terão acesso a relatórios e pontuações de IA, mesmo em envios anteriores. No entanto, instituições com o complemento Originality podem visualizar dados de IA em todos os envios.
A detecção de IA está disponível nos Relatórios de Similaridade em plataformas LMS como Moodle, Blackboard e Canvas, mas é necessário acessar o relatório completo para visualizar os detalhes da IA.
Como Funciona o Indicador de IA do Turnitin
Visão Geral
Quando um trabalho é submetido ao Turnitin, o sistema inicia a análise dividindo o texto em segmentos de cerca de cinco a dez frases cada.
Esses segmentos são propositalmente sobrepostos para garantir que cada frase seja analisada dentro de um contexto mais amplo. O modelo de detecção de IA do Turnitin avalia, então, cada frase numa escala de 0 a 1, onde 0 indica que uma frase foi provavelmente escrita por um humano e 1 sugere que foi gerada por IA.
É calculada uma média dessas pontuações em todo o documento para fornecer uma estimativa geral de quanto o texto pode ter sido gerado por IA.
Modelos de IA Detetáveis
O que o sistema de detecção de IA do Turnitin identifica atualmente:
GPT-3 e GPT-3.5: Estes foram os modelos iniciais nos quais o Turnitin se concentrou, reconhecendo textos gerados por ferramentas baseadas nessas tecnologias, como o ChatGPT.
GPT-4: Após testes extensivos, o Turnitin confirmou que o seu sistema consegue, frequentemente, detectar textos produzidos pelo GPT-4, também conhecido como ChatGPT Plus.
Planos de Expansão: O Turnitin está trabalhando ativamente para incluir outros modelos, como o GPT-4o e o LLaMA, nas suas capacidades de detecção, refletindo a contínua evolução e desenvolvimento de Modelos de Linguagem Grandes (LLMs).
Capacidades de Detecção
O detector de IA do Turnitin foi especificamente projetado para identificar:
Conteúdo Gerado por IA: Inclui a geração direta de texto por IA, onde o texto é inteiramente produzido por uma IA.
Conteúdo Parafraseado por IA: Envolve texto que foi inicialmente gerado por IA e, em seguida, modificado por ferramentas de paráfrase de IA, como Quillbot, a ferramenta de paráfrase do Grammarly e Scribbr. Esta capacidade melhora a aptidão do sistema para detectar textos que foram sutilmente alterados para evitar a detecção.
Indicadores e Relatórios
No relatório de redação de IA, o Turnitin usa um código de cores para destacar diferentes tipos de uso de IA, ajudando os instrutores a interpretar os resultados de forma eficaz.
O modelo do Turnitin é calibrado para garantir uma elevada taxa de precisão, sinalizando o conteúdo como gerado por IA apenas quando existe uma certeza de, pelo menos, 98%. Este limite rigoroso ajuda a minimizar falsos positivos, embora se reconheça que até 15% do texto escrito por IA pode não ser detectado.
Integração LMS
As capacidades de detecção de IA do Turnitin estão integradas em Sistemas de Gerenciamento de Aprendizagem (LMS), como Moodle, Blackboard e Canvas, através do Relatório de Similaridade. No entanto, os indicadores específicos de redação de IA não estão diretamente incorporados nas interfaces do LMS; em vez disso, os utilizadores precisam de acessar o relatório detalhado para visualizar a pontuação de IA.
Considerações sobre Viés
Reconhecendo o potencial de viés, especialmente contra alunos de segunda língua ou áreas de estudo menos comuns, o Turnitin projetou o seu modelo de detecção de IA com ênfase na imparcialidade. O desenvolvimento do modelo teve em consideração a necessidade de minimizar qualquer desvantagem para grupos sub-representados, visando uma aplicação equitativa em vários contextos académicos.
Relatório de IA do Turnitin: Pontuação, Indicadores Visuais e Porcentagem
Dentro do relatório de similaridade do Turnitin, a seção de Relatório de IA detalha duas pontuações específicas:
Texto Gerado por IA: Esta pontuação identifica o texto que provavelmente foi criado por uma ferramenta de IA, como um Modelo de Linguagem Grande (LLM).
Texto Parafraseado por IA: Esta pontuação identifica o texto que parece ter sido gerado por IA e, em seguida, modificado por ferramentas de paráfrase de IA, como o Quillbot.
Indicadores Visuais no Relatório
O Turnitin usa cores diferentes em seus relatórios para indicar os tipos de uso de IA:
Destaque Ciano: Indica texto que provavelmente foi gerado por IA.
Destaque Roxo: Indica texto gerado e parafraseado por IA.
Azul com uma Porcentagem (0-100): Mostra a porcentagem do texto do documento que provavelmente foi gerado por IA, com foco na prosa.
Cinza (Sem Porcentagem): Indica que o documento não pode ser processado para detecção de IA, possivelmente devido ao tipo ou tamanho do arquivo.
Erro (!): Indica uma falha no processamento, exigindo nova tentativa ou outras ações caso o documento esteja dentro dos padrões.
Para evitar falsos positivos, a detecção de IA com pontuação abaixo de 20% é tratada com cautela:
0%-19% (*%): Essas porcentagens são marcadas com um asterisco e o símbolo de porcentagem (*%), e não são quantificadas no relatório. Essa medida visa minimizar erros ao identificar erroneamente textos escritos por humanos como gerados por IA.
Quanta IA é Permitida no Turnitin?
O Turnitin não define um limite máximo para conteúdo gerado por IA; ele apenas identifica e sinaliza o uso significativo de IA. A aceitação de conteúdo gerado por IA depende das políticas de integridade acadêmica de cada instituição. Alunos e professores devem consultar as diretrizes específicas de sua instituição para entender as regras sobre o uso de IA em trabalhos acadêmicos.
Diferença entre Pontuação de Similaridade e Detecção de IA
Pontuação de Similaridade: Mede a porcentagem de texto igual a fontes no banco de dados do Turnitin.
Porcentagem de Detecção de IA: Avalia a quantidade de texto que pode ter sido gerado por ferramentas de IA. Essa pontuação é independente da pontuação de similaridade e se concentra apenas no conteúdo gerado por IA.
Lidar com Erros na Detecção de IA do Turnitin
A detecção de escrita por IA do Turnitin busca alta precisão, mas pode cometer erros, especialmente em textos com variação estrutural mínima ou paráfrase excessiva. Se você acredita que um trabalho foi marcado incorretamente:
Fornecer Feedback: Use o botão de feedback no relatório de escrita por IA para informar o Turnitin. Isso ajuda a melhorar a precisão com o tempo.
Revisão Contextual: Para documentos longos, considere a combinação de escrita gerada por IA e original. Em textos curtos, a abordagem "tudo ou nada" do sistema pode marcar conteúdo híbrido como totalmente gerado por IA.
Discrição do Educador: Os educadores devem usar os resultados da detecção de IA junto com outras avaliações e discussões com os alunos para garantir uma avaliação justa do trabalho deles, reconhecendo as limitações do modelo em distinguir texto gerado por IA de texto humano.
Perguntas Frequentes
A Detecção de IA do Turnitin é Gratuita?
Não, o Turnitin começará a cobrar pelos seus serviços de detecção de escrita de IA a partir de janeiro de 2024.
A Detecção de IA Pode Analisar Trabalhos Submetidos Anteriormente?
Sim, você pode verificar a escrita de IA em trabalhos submetidos anteriormente se eles forem reenviados para análise e a detecção de IA estiver habilitada na sua conta.
Quais Idiomas o Turnitin Suporta?
A detecção de IA do Turnitin atualmente suporta documentos em inglês e, a partir de setembro de 2024, espanhol para conteúdo de formato longo. No entanto, as capacidades de detecção de paráfrase de IA estão disponíveis apenas para envios em inglês.
Como Ocultar o Relatório de IA?
Os administradores têm a opção de desabilitar o recurso de detecção de IA nas configurações da conta do Turnitin, ocultando efetivamente o relatório de IA dos resultados.
A Tecnologia de Detecção de IA Evoluirá com o Tempo?
Sim, à medida que o Turnitin continua a desenvolver e refinar o seu modelo, as capacidades de detecção e, consequentemente, as percentagens de IA podem mudar. No entanto, a percentagem de IA para um documento específico permanecerá estática, a menos que seja reenviado para processamento.
O Turnitin Sinaliza Texto Modificado pelo Grammarly como IA?
O detector do Turnitin normalmente não sinaliza texto modificado pelas ferramentas básicas de ortografia, gramática e pontuação do Grammarly como gerado por IA. No entanto, o conteúdo produzido usando os recursos generativos alimentados por IA do Grammarly (como rascunho e paráfrase) provavelmente será identificado como gerado por IA.
Conclusão
Resumidamente, o Turnitin possui recursos robustos para detectar conteúdo gerado por IA, oferecendo ferramentas essenciais para manter a integridade acadêmica.
Enquanto os professores podem examinar todos os detalhes nos relatórios, os alunos talvez precisem buscar informações semelhantes em outras fontes.
Lembre-se, a eficácia do Turnitin depende muito de como sua instituição o utiliza. Espero que tenham achado esta análise útil. Obrigado por assistir!