Sempre pensei que os detectores de IA eram um acerto e um fracasso, e casos da vida actual comprovam isso. Durante o último ano, cada vez mais casos de estudantes que receberam sanções por falsos positivos têm surgido em toda a mídia.
Com o futuro dos alunos em jogo, como podemos garantir o uso responsável da IA na sala de aula e, ao mesmo tempo, limitar os casos de falsos positivos?
A IA indetectável está à altura do desafio com seu próprio verificador de plágio de IA. Neste artigo, revisarei seu próprio detector de IA, testarei e direi o que exatamente o torna mais preciso do que o resto.
O que é IA indetectável?
IA indetectável é uma plataforma well-liked de bypass de IA cujo objetivo é humanizar o texto gerado por máquina. É composto por três recursos principais: o humanizador de texto AI, o digitador humano AI e o verificador de plágio AI. Nós revisamos os dois primeiros extensivamente no passado, então certifique-se de verificá-los aqui e aqui, ou em alguns de nossos artigos de comparação como este.
O que é o detector de plágio da IA indetectável?
Dizer que a IA indetectável tem seu próprio detector de plágio é um pouco hipócrita, mas o que eles oferecem é igualmente bom, se não melhor. O que a IA indetectável faz é agregar pontuações de probabilidade de IA de oito detectores de IA populares para obter uma imagem melhor se o seu texto estiver vulnerável a ser sinalizado como gerado por máquina.
Classificamos alguns dos detectores de IA que a IA indetectável usa altamente em nosso último lote de testes de precisão. Esta é a lista completa de ferramentas que eles usam:
Apenas nesta lista, estou um pouco hesitante em usar IA indetectável como meu detector primário de IA porque eles ainda incluem OpenAI, cujo detector foi desligado há mais de um ano devido à falta de confiabilidade.
Mas, no last das contas, o que mais importa é se a IA indetectável pode detectar texto de LLMs com precisão. Então, vamos descobrir.
Quão preciso é isso?
Testes Verdadeiros Positivos
Este primeiro conjunto de testes medirá a precisão da IA indetectável na detecção de texto gerado por máquina e, também, gerado por máquina. Veja como foi o desempenho:
Teste nº 1
Teste bem-sucedido! Máquina detecta texto como IA.
Teste #2
Teste bem-sucedido! Máquina detecta texto como IA.
Teste #3
Teste falhou. Máquina detecta texto como humano.
Teste #4
Teste bem-sucedido! Máquina detecta texto como IA.
Teste #5
Teste bem-sucedido! Máquina detecta texto como IA.
Teste #6
Teste bem-sucedido! Máquina detecta texto como IA.
Teste #7
Teste bem-sucedido! Máquina detecta texto como IA.
Testes falsos positivos
Agora, vamos tentar se a IA indetectável pode detectar texto escrito por humanos como não sendo IA.
Teste #8
Teste bem-sucedido! Máquina detecta texto como humano.
Teste #9
Teste bem-sucedido! Máquina detecta texto como humano.
Teste #10
Teste bem-sucedido! Máquina detecta texto como humano.
Pontuação geral
A IA indetectável mostra resultados reais?
Como mencionei anteriormente, estou um pouco hesitante em usar o Undetectable AI como meu detector principal porque ele ainda lista o OpenAI como uma das ferramentas de detecção que eles usam. Então, isso me fez pensar: se o OpenAI ainda estiver lá, podemos confiar que os resultados dos outros sete detectores serão os mesmos quando eu usar suas respectivas plataformas?
É isso que vou verificar agora e vou usar o texto de teste #5. Para referência, foi detectado como IA usando GPTZero, CopyLeaks, Sapling, Content material at Scale e ZeroGPT de acordo com Undetectable AI.
Isso é verdade? Vamos descobrir.
Teste nº 1: GPTZero
Resultado esperado alcançado!
GPTZero detecta texto como gerado por IA.
Teste nº 2: CopyLeaks
Resultado esperado alcançado!
CopyLeaks detecta texto como gerado por IA.
Teste #3: Muda
Resultado esperado alcançado!
Sapling detecta texto como gerado por IA.
Teste nº 4: Conteúdo em escala
Resultado esperado alcançado!
O conteúdo em escala detecta texto como gerado por IA.
Teste nº 5: ZeroGPT
Resultado esperado alcançado!
ZeroGPT detecta texto como gerado por IA.
A essência disso
Apesar das minhas reservas, agora estou convencido. A IA indetectável não é apenas um bypasser de IA eficaz, mas também uma ótima ferramenta de detecção de IA.
“Não confiável” é um termo muito utilizado em termos de detecção de IA. Na verdade, uma das primeiras entidades a usar este termo para detectores de IA é a própria OpenAI. É também por isso que eles derrubaram sua própria ferramenta de detecção de IA.
O que a IA indetectável faz aqui é mitigar o risco de falsos positivos agregando pontuações de oito (tecnicamente, sete) detectores diferentes. Esta é uma jogada engenhosa e que está valendo a pena.
Se você estiver interessado em ler mais sobre IA indetectável, estou com você. Aqui estão alguns dos meus artigos recomendados em nosso catálogo. Divirta-se lendo!
