8 dos melhores detectores de conteúdo de IA comparados
Publicados: 2023-05-24As ferramentas de Inteligência Artificial (IA) deram grandes saltos nos últimos anos. Muitos proprietários e escritores de sites estão experimentando geradores de conteúdo de IA. Como resultado, os detectores de conteúdo de IA também se tornaram populares, praticamente da noite para o dia.
O objetivo dessas ferramentas é ajudá-lo a descobrir qual conteúdo vem de humanos e qual é gerado por máquina. Em muitos casos, isso não é mais evidente à primeira vista, portanto, esses tipos de ferramentas podem oferecer grande valor se você quiser manter o conteúdo publicado por IA gratuito.
Neste artigo, vamos comparar oito dos detectores de conteúdo AI mais populares do mercado usando o mesmo texto. Veremos quais detectores se saem melhor e discutiremos se vale a pena usá-los. Vamos lá!
Índice :
A OpenAI tornou-se uma das empresas mais conhecidas do mundo com o lançamento do ChatGPT 3. O Large Language Model (LLM) está muito à frente da maioria das ferramentas de IA anteriores quando se trata de gerar conteúdo, responder perguntas, criar sites, e resolução de problemas em geral.
Desde então, a OpenAI lançou o ChatGPT 4, que é uma versão muito melhorada. A mesma empresa também oferece uma ferramenta gratuita chamada AI Text Classifier. Este é o primeiro dos detectores de conteúdo de IA que veremos. Ele permite que você determine se um texto específico foi criado usando uma ferramenta AI.
Para testar o AI Text Classifier, usamos o ChatGPT 4 para gerar dois resumos de eventos aleatórios interessantes. Segue parte de um desses textos, para você ter uma noção do que a ferramenta pode fazer (caso ainda não tenha usado):
A comunidade internacional tem acompanhado de perto a recente erupção vulcânica na pequena ilha de Montserrat, localizada no Caribe. A erupção ocorreu no final de abril, forçando milhares de residentes a evacuar suas casas enquanto a lava e as cinzas cobriam a ilha. Os cientistas acreditam que a erupção é resultado do aumento da atividade sísmica na região, observada nos últimos meses. Equipes de resposta a emergências de países vizinhos, juntamente com organizações de ajuda internacional, têm trabalhado incansavelmente para fornecer apoio aos moradores afetados, oferecendo abrigo temporário, alimentação e assistência médica.
Isso poderia facilmente passar como uma atualização criada por humanos sobre um evento de notícias. Não é o conteúdo mais envolvente, mas é gramaticalmente correto e fácil de entender. Em nossa experiência testando a geração de conteúdo de IA, isso já diz muito.
Você pode usar o AI Text Classifier visitando a página inicial da ferramenta e inserindo o texto que deseja testar. Nesse caso, a ferramenta classificou um de nossos textos de teste como “Muito improvável de ser gerado por IA” e o segundo como “Improvável de ser gerado por IA”:
Este resultado em particular é surpreendente, porque estamos usando uma ferramenta OpenAI para verificar o texto que o ChatGPT produziu. Vale a pena notar que usamos vários exemplos de textos com tamanhos diferentes, para dar ao detector mais dados para trabalhar.
O classificador de texto AI funciona? ️
Nossos testes mostraram que o AI Text Classifier do OpenAI não fornece resultados precisos de detecção de IA. Cada texto que geramos usando o ChatGPT 4 foi marcado como improvável ou muito improvável de ser criado por uma IA.
O aplicativo Writer permite gerar conteúdo de texto e resumir arquivos de áudio. Juntamente com suas ferramentas de geração de conteúdo, o Writer também oferece um recurso que deve ajudá-lo a identificar conteúdo escrito por IA.
O detector Writer AI é fácil de usar. Você pode colar um texto de até 1.500 palavras ou inserir um URL, e o Writer informará a probabilidade de um humano ter escrito esse texto. Durante nosso teste, o Writer classificou um texto como 96% de conteúdo gerado por humanos e o outro como 83% de conteúdo gerado por humanos:
Todo o texto enviado durante os dois testes foi 100% gerado por IA. O uso de porcentagens faz com que esta ferramenta pareça mais precisa do que alguns de seus concorrentes, mas os resultados falam por si. Na maioria dos casos, o Writer não é páreo para as ferramentas modernas de geração de conteúdo, como o ChatGPT.
Escritor funciona? ️
Em geral, o Writer não consegue detectar conteúdo moderno gerado por IA. A ferramenta às vezes sugere a edição do texto para que fique mais “humano”, mas não fornece notas específicas sobre o que modificar.
Copyleaks é uma empresa que fornece ferramentas de detecção de plágio, classificação e detecção de conteúdo de IA. O serviço oferece uma extensão do Chrome que permite testar o conteúdo em qualquer lugar da web para ver se ele foi gerado por IA. Ele também inclui uma integração de API, para que você possa usar suas ferramentas de teste diretamente em seu site ou em qualquer plataforma com a qual esteja trabalhando.
Em termos de precisão, a ferramenta Copyleaks obtém notas bastante altas. Os mesmos textos gerados por IA que atrapalharam tanto o AI Text Classifier quanto o Writer foram marcados como 92,6% e 82,3% de probabilidade de serem escritos por um AI:
Isso não quer dizer que a ferramenta de detecção de conteúdo Copyleaks AI esteja sem problemas. Durante nossos testes, seu detector de IA sinalizou um texto totalmente gerado por humanos como “improvável de ser escrito por um humano”.
Uma vantagem é que esta ferramenta permite marcar manualmente seus resultados como precisos ou imprecisos. Se os desenvolvedores usarem essas informações para melhorar sua precisão, o Copyleaks pode se tornar mais eficaz com o tempo.
Copyleaks funciona? ️
Copyleaks é mais preciso quando se trata de detectar conteúdo de IA. Não é totalmente preciso, mas todo texto que criamos usando o ChatGPT foi sinalizado como escrito principalmente por IA.
GPTZero é talvez a opção mais popular entre os detectores de conteúdo AI no momento. Ele foi construído como uma resposta ao ChatGPT e pontua o texto que você envia em “perplexidade” e “explosão”. A perplexidade mede a aleatoriedade das palavras usadas, enquanto a rajada mede a variação na perplexidade.
Os humanos tendem a escrever de uma maneira muito mais aleatória do que uma IA ou LLM, o que era de se esperar. Durante nossos testes, o GPTZero avaliou corretamente que ambos os textos foram criados inteiramente usando IA:
O GPTZero também destaca frases específicas que considera mais prováveis de serem escritas por uma IA. Para ser justo, a ferramenta às vezes retorna resultados falsos. Por exemplo, sinalizou parte da Declaração de Independência Americana como IA gerada durante nossos testes.
Apesar disso, o GPTZero fornece resultados geralmente precisos e é a única ferramenta que verificamos até agora que avisa que pode retornar falsos positivos. Esta é uma informação essencial porque, à medida que a geração de conteúdo de IA continua a melhorar, os detectores de conteúdo de IA lutarão cada vez mais para recuperar o atraso e retornar avaliações precisas.
GPTZero funciona? ️
O GPTZero faz um ótimo trabalho ao detectar o conteúdo criado pelo ChatGPT. Ele também avisa aos usuários que eles não devem confiar cegamente nos detectores de conteúdo de IA, o que o torna uma recomendação fácil.
O Content at Scale se comercializa como uma ferramenta de escrita assistida por IA que leva em consideração a Otimização de Mecanismos de Busca (SEO). No entanto, não estamos aqui para testar seus recursos de geração de conteúdo hoje.
Além de seu serviço principal, o Content at Scale oferece uma ferramenta gratuita que verifica o conteúdo gerado por IA. Durante nossos testes, ele sinalizou ambos os exemplos como altamente prováveis de serem gerados por IA:
O Content at Scale mede o texto usando várias métricas, incluindo o quão previsível é a escolha da palavra e se ela segue padrões “conhecidos”. Isso é semelhante ao modelo que o GPTZero usa, apenas com um algoritmo diferente.
Este detector de conteúdo AI também sinaliza parágrafos e frases específicos, se for possível que eles possam ser gerados por AI. Em teoria, isso pode ajudá-lo a identificar a escrita assistida por IA. No entanto, durante nossos testes, o detector de IA também sinalizou parte da Declaração de Independência Americana como escrita por uma IA (o que temos certeza de que não é).
O conteúdo em escala funciona? ️
O conteúdo em escala é bastante preciso na detecção de texto gerado por IA. Ele pontua textos em várias métricas (embora não explique o que essas métricas medem) e sinaliza parágrafos e frases específicas se os considerar “suspeitos”. Apesar dos resultados positivos gerais, no entanto, alguns de seus sinalizadores podem ser imprecisos.
Sapling oferece um conjunto de ferramentas de preenchimento automático para sites, bem como produtos de correção gramatical. Uma de suas ofertas é um detector de conteúdo AI com planos gratuitos e premium. A opção gratuita não exige que você se inscreva em uma conta, mas limita o tamanho do texto que você pode verificar.
A própria ferramenta é treinada para detectar texto criado com os modelos GPT mais recentes. Durante nossos testes, ele retornou pontuações “falsas” de 100% e 98,8%:
Esses resultados são incrivelmente precisos, considerando que ambos os textos são totalmente gerados por IA, sem alterações. Sapling também fornece uma análise dos resultados e destaca as partes do texto que acredita terem sido criadas por uma IA.
Sapling oferece uma extensão gratuita que você pode usar para testar trechos de texto em qualquer lugar da web. Este serviço também fornece acesso à API com seus planos premium, que você pode usar para automatizar os testes.
Sapling funciona? ️
A muda teve um desempenho quase perfeito durante o teste. A única desvantagem deste serviço é que ele limita o tamanho do texto que você pode testar, pelo menos na versão gratuita. No entanto, está longe de ser a única plataforma a fazer isso, e a versão gratuita não exige que você se inscreva em uma conta.
Crossplag oferece ferramentas de detecção de plágio para pequenas empresas e instituições educacionais. Ele também fornece uma ferramenta gratuita que você pode usar em seu site para verificar o conteúdo escrito por IA. Essa ferramenta pega o texto e fornece uma porcentagem indicando a probabilidade de ser gerada por IA.
Durante nosso teste, o Crossplag sinalizou um dos exemplos como 84% provável de ser IA. No entanto, o segundo exemplo retornou 4%. Isso se traduz em um resultado de “Este texto foi escrito principalmente por um humano”:
Para testar ainda mais o Crossplag, nos voltamos mais uma vez para a Declaração de Independência Americana. A ferramenta sinalizou parte de seu texto como 50% escrito por uma IA.
Por fim, vale a pena notar que o Crossplag limita a quantidade de texto que você pode testar sem uma conta. Durante nossos experimentos, só pudemos executar dois testes antes de sermos forçados a criar uma conta gratuita.
Crossplag funciona? ️
Com base em nossos testes, o Crossplag às vezes pode detectar texto gerado por IA com precisão. No entanto, ele retorna consistentemente resultados imprecisos com texto totalmente humano e gerado por IA.
Apesar do nome semelhante, o ZeroGPT é uma ferramenta completamente diferente do GPTZero. Este é um serviço gratuito de detecção de IA de uma empresa que oferece outros produtos no espaço de IA, incluindo um que permite conversar com o ChatGPT por WhatsApp ou Telegram.
Quando testamos esta opção final em nossa lista de detectores de conteúdo AI, nossos dois snippets gerados pelo ChatGPT foram sinalizados como 100% criados por AI:
Apesar de sua precisão inicial, essa ferramenta às vezes sinaliza falsamente conteúdo humano regular como gerado por IA. Mais uma vez, a Declaração de Independência acertou em cheio, marcando um resultado de 68,1% de IA gerada.
O ZeroGPT funciona? ️
De um modo geral, o ZeroGPT pode detectar com precisão o texto gerado pela IA. No entanto, ele também sinaliza conteúdo gerado por humanos regularmente e pode dar a ele uma alta porcentagem de criação por uma IA. Isso torna difícil confiar nos resultados em geral.
Conclusão
Os detectores de conteúdo de IA estão travando uma batalha difícil. À medida que ferramentas como o ChatGPT continuam a melhorar, esses serviços precisam se adaptar e descobrir maneiras melhores de detectar se o texto foi gerado por uma IA ou não.
É importante entender que a maioria dos detectores de conteúdo de IA não são totalmente precisos e podem retornar falsos positivos com frequência. Dito isto, GPTZero e Copyleaks foram as ferramentas mais precisas que testamos quando se trata de detectar conteúdo totalmente gerado por IA (criado usando ChatGPT). Se você precisar usar um detector de IA, recomendamos usar um desses dois (ou ambos para melhorar suas chances de resultados confiáveis).
Você tem alguma dúvida sobre os detectores de conteúdo de IA? Vamos falar sobre eles na seção de comentários abaixo!