Vivemos em uma época em que as tecnologias de IA estão crescendo e o mundo foi tomado pela tempestade com a introdução do ChatGPT .
O ChatGPT é capaz de realizar uma ampla gama de tarefas, mas uma que faz muito bem é escrever artigos. E embora haja muitos benefícios óbvios nisso, também apresenta uma série de desafios.
Na minha opinião, o maior obstáculo que o conteúdo escrito gerado por IA representa para a indústria editorial é a disseminação de desinformação .
O ChatGPT, ou qualquer outra ferramenta de IA, pode gerar artigos que podem conter erros factuais ou simplesmente incorretos.
Imagine alguém que não tem experiência em medicina iniciando um blog médico e usando o ChatGPT para escrever conteúdo para seus artigos.
Seu conteúdo pode conter erros que só podem ser identificados por profissionais médicos. E se o conteúdo do blog começar a se espalhar pelas mídias sociais, ou talvez até mesmo classificar na Pesquisa, isso pode causar danos às pessoas que o leem e seguem conselhos médicos errôneos.
Outro desafio potencial que o ChatGPT representa é como os alunos podem aproveitá-lo em seu trabalho escrito.
Se alguém pode escrever uma redação apenas executando um prompt (e sem ter que fazer nenhum trabalho real), isso diminui muito a qualidade da educação – pois aprender sobre um assunto e expressar suas próprias ideias é a chave para a redação.
Mesmo antes da introdução do ChatGPT, muitos editores já geravam conteúdo usando IA. E embora alguns o divulguem honestamente, outros não .
Além disso, o Google mudou recentemente sua redação em relação ao conteúdo gerado por IA , para não ser necessariamente contra as diretrizes da empresa.
É por isso que decidi experimentar as ferramentas existentes para entender onde está a indústria de tecnologia quando se trata de detectar conteúdo gerado pelo ChatGPT, ou IA em geral.
Executei os seguintes prompts no ChatGPT para gerar conteúdo escrito e, em seguida, executei essas respostas por meio de diferentes ferramentas de detecção.
- “O que é SEO local? Por que é importante? Melhores práticas de SEO local.”
- “Escreva um ensaio sobre a invasão do Egito por Napoleão Bonaparte.”
- “Quais são as principais diferenças entre o iPhone e o Samsung Galaxy?”
Tópicos
Aqui está o desempenho de cada ferramenta.
1. Writer.com
Para a primeira resposta do prompt, o Writer.com falha, identificando o conteúdo do ChatGPT como 100% gerado por humanos.
Para o segundo prompt, outra falha, 100% de novo!
Para o terceiro prompt, falhou novamente.
Quando testei um texto real escrito por humanos, o Writer.com também identificou como 100% gerado por humanos.
2. Copyleaks
O Copyleaks assim como o Writer errou nos três resultados,a ferramenta indica que a propabilidade do texto ter sido escrita por humanos é de 99.9% 🤭.
3. Contentatscale.ai
Contentatscale.ai fez um ótimo trabalho. Brincadeira também falhou nos 3 textos, todos com probabilidade de 100% de terem sido escritos por humanos.
4. GPTZero
Esta ferramenta não comercial foi criada por Edward Tian e projetada especificamente para detectar artigos gerados pelo ChatGPT., Mas infelizmente falhou em todos os 3 testes.
Ao contrário de outras ferramentas, oferece uma análise mais detalhada dos problemas detectados, como análises de frase por frase.
Classificador de texto AI da OpenAI
E, finalmente, vamos ver como o OpenAi detecta suas próprias respostas geradas.
Para o 1º e 3º prompts, detectou que há uma IA envolvida, classificando-a como “possivelmente gerada por IA”.
Mas, surpreendentemente, falhou no segundo prompt e classificou-o como “improvável gerado por IA”. Eu joguei com diferentes prompts e descobri que, no momento, ao verificar, poucas das ferramentas acima detectam o conteúdo de IA com maior precisão do que a própria ferramenta do OpenAi.
Classificador de texto AI. Improvável gerado por IA
No momento desta verificação, a ferramenta tem poucos dias desde que foi lançada. Acho que no futuro eles vão ajustá-lo e funcionará muito melhor.
Conclusão
Por mais incrível que as ferramentas de geração de conteudo possam ser, já é possível identificar conteudo gerado pelo ChatGPT (com vários graus de sucesso).
Outro ponto a se considerar é que algumas das ferramentas que falharam nesse teste, quando o conteudo esta em inglês, tem um grau de acuracidade bem mais alto. Então, imagino que seja uma questão de tempo, até que essas ferramentas de detecção fiquem melhores para identificar conteudo gerado com o ChatGPT em português.
Ainda é possível para alguém gerar uma cópia via ChatGPT e depois parafrasear para torná-la indetectável, mas isso pode exigir quase tanto trabalho quanto escrever do zero – portanto, os benefícios não são tão imediatos.
Se você pensa em classificar um artigo no Google escrito pelo ChatGPT, considere por um momento: se as ferramentas que vimos acima conseguiram reconhecê-los como gerados por IA, então, para o Google, detectá-los deve ser moleza.
Além disso, o Google tem avaliadores de qualidade que treinarão seu sistema para reconhecer artigos escritos por IA ainda melhor, marcando-os manualmente à medida que os encontram.
Portanto, meu conselho seria não construir sua estratégia de conteúdo no conteúdo gerado pelo ChatGPT, mas usá-lo apenas como uma ferramenta auxiliar.