Quão preciso é o detector de IA indetectável? Nós testamos sozinho

A IA indetectável tornou-se standard nos círculos acadêmicos e de blogs como uma forma de contornar a falsa detecção de IA. É uma maneira rápida e fácil de se proteger contra falsos positivos que já conquistaram a reputação de mais de um aluno.

No entanto, aqui está um dilema interessante. Se o objetivo é ocultar a gravação de IA usando IA, como você pode garantir que suas saídas não serão sinalizadas como geradas por máquina? Essa é a razão pela qual devemos testar seu resultado com os melhores detectores de IA disponíveis.

Agora, já testamos a IA indetectável em outros detectores. Mas e quanto ao seu próprio detector? Será que ele passará no seu próprio teste? É hora de descobrir.

Uma breve discussão sobre detector de IA indetectável

Já tivemos muitos artigos sobre IA indetectável antes, como este, e este, e este, ah, e aqui está outro. A lista continua. Um recurso que ainda não destacamos é o detector de IA, ou para ser mais específico, detectores.

A IA indetectável não possui realmente seu próprio detector. Em vez disso, agrega as pontuações de probabilidade de IA de oito detectores diferentes, a saber:

A IA indetectável também promete (e oferece) reescrita gratuita se sua saída for marcada como IA por um ou mais desses oito.

Se você estiver interessado em saber mais sobre a precisão de cada detector particular person, recomendo fortemente a leitura de nosso artigo, onde testamos a maior parte de sua precisão. Eu sei que é uma frase clichê, mas prometo que a resposta pode surpreendê-lo.

IA indetectável versus seu próprio detector

Então, chega de preliminares, vamos ao que interessa. Para este teste, pediremos ao ChatGPT para escrever sete textos exclusivos e, em seguida, inseri-los no Undetectable AI. Depois de gerar a saída, verificaremos se os detectores do Undetectable AI sinalizam sua própria saída como AI.

Vamos começar.

Teste nº 1

Texto GPT authentic

Screenshot 2024 03 07 214132Screenshot 2024 03 07 214132

Saída ajustada de IA indetectável

Pontuação de detecção de IA indetectável

Isso passou? Sim!
Pontuação do detector de IA: 75% (6 de 8)

Teste #2

Texto GPT authentic

Saída ajustada de IA indetectável

Pontuação de detecção de IA indetectável

Isso passou? Sim!
Pontuação do detector de IA: 100% (8 de 8)

Teste #3

Texto GPT authentic

Saída ajustada de IA indetectável

Pontuação de detecção de IA indetectável

Isso passou? Sim!
Pontuação do detector de IA: 100% (8 de 8)

Teste #4

Texto GPT authentic

Saída ajustada de IA indetectável

Pontuação de detecção de IA indetectável

Isso passou? Sim!
Pontuação do detector de IA: 100% (8 de 8)

Teste #5

Texto authentic da GPT

Saída ajustada de IA indetectável

Pontuação de detecção de IA indetectável

Isso passou? Sim!
Pontuação do detector de IA: 100% (8 de 8)

Teste #6

Texto authentic da GPT

Saída ajustada de IA indetectável

Pontuação de detecção de IA indetectável

Isso passou? Sim!
Pontuação do detector de IA: 100% (8 de 8)

Teste #7

Texto GPT authentic

Saída ajustada de IA indetectável

Pontuação de detecção de IA indetectável

Isso passou? Sim!
Pontuação do detector de IA: 100% (8 de 8)

Contagem de resultados

O que aprendemos?

Se considerarmos essas pontuações como valor nominal, é seguro dizer que os ajustes da IA ​​indetectável são incrivelmente eficazes contra detectores. No entanto, você deve sempre verificar mais detalhadamente o resultado, pois eles usam erros gramaticais para imitar a escrita humana.

E também há outro elefante na sala que ainda não mencionei. Position para cima e veja os oito detectores que a IA indetectável usa. Notou algo fora do lugar?

Se você dissesse “OpenAI”, estaria correto. A OpenAI descontinuou seu detector de IA meses atrás e desconsiderou a detecção como imprecisa. Pessoalmente, não sei de onde a IA indetectável obtém sua pontuação de probabilidade OpenAI, mas como ela sempre produz “humano”, é seguro assumir que o padrão é humano, independentemente da entrada.

Na verdade, esta é apenas uma das inconsistências que noto neste detector. Outra é que quando eu insiro a saída da IA ​​Indetectável em um dos websites oficiais de seus detectores, às vezes isso me dá um resultado diferente do que vejo na UI Indetectável.

Além disso, podemos concluir que a IA Indetectável funciona notavelmente bem mesmo contra o seu próprio detector. Se estiver interessado em aprender mais sobre esta ferramenta, você pode ler mais sobre ela em nossa análise oficial. Boa sorte!

Exit mobile version