Qual é a precisão dos verificadores de IA? Com exemplos práticos

Recentemente, a Apple entrou no jogo da IA ao integrar a OpenAI no seu sistema com o anúncio do iOS 18.

O gigante da tecnologia é apenas uma das muitas outras empresas que já aderiram à tendência.

A forma como realizamos as nossas vida quotidiana mudou para sempre desde o aparecimento da IA.

Aspectos das nossas rotinas - desde receber recomendações personalizadas nos nossos serviços de streaming favoritos até às funcionalidades avançadas na palma das nossas mãos - a tecnologia melhora realmente a nossa forma de viver.

No entanto, a IA é também uma faca de dois gumes que tanto pode ser útil como potencialmente mal utilizada.

Quer sejas um criador de conteúdos ou um professorPor isso, é importante certificares-te de que o conteúdo que recebes é autêntico.

É aqui que entram os verificadores - mas será que os detectores de IA são precisos? Nós testámo-los.

Com centenas de verificadores de IA no mercado, sabemos que escolher o mais adequado pode ser uma tarefa difícil.

Por isso, escolhemos os melhores verificadores de IA e testámos a sua precisão.

Aqui está a tua visão definitiva sobre a precisão dos detectores de IA.

Qual é a precisão dos verificadores de IA? Uma resposta baseada em dados

Sem que te apercebas, Conteúdo gerado por IA está em todo o lado - desde artigos a relatórios, escrita criativa e muito mais.

As ferramentas de IA também alteraram a forma como a educação funciona, ajudando tanto os estudantes como as instituições.

Mas com um grande poder vem uma grande responsabilidade. A utilização da IA na escola levanta algumas questões muito importantes sobre autenticidade e originalidade. É aqui que entram os verificadores de IA.

Os professores, por exemplo, utilizam software de deteção de IA para ver se os alunos utilizaram IA nos seus trabalhos.

Os verificadores de IA analisam o texto que lhe dás em busca de padrões, estruturas e outros elementos que normalmente indicam conteúdo de IA.

Quando o texto tiver sido analisado, ser-te-á fornecida a pontuação de probabilidade da IA.

É tão fácil quanto isso. Mas embora estas ferramentas possam ajudar, estão longe de ser perfeitas e têm as suas próprias limitações.

Os testes mostram que os verificadores de IA varia em precisão.

Os testes mostram que os verificadores de IA variam em termos de precisão.


Em geral, saem-se melhor com modelos de IA mais antigos, como o GPT-3.5, mas têm mais dificuldades com modelos avançados, como o GPT-4, apenas porque o modelo mais recente se assemelha muito mais à escrita humana.

Isto pode levar a falsos positivos ocasionais, em que o trabalho de alguém que é inteiramente feito por ele é incorretamente assinalado como conteúdo de IA.

É uma preocupação que já se faz sentir há algum tempo, os professores continuam cautelosos quando utilizares estas ferramentas.

Os verificadores de IA não são uma garantia, pelo que o melhor que os utilizadores podem fazer é tratá-los como ferramentas e não como veredictos finais.

Continua a ser incrivelmente útil o facto de estes detectores poderem assinalar potenciais problemas em segundos, o que pode demorar muito mais tempo a olho nu, mas segue sempre com uma análise humana real para verificar os resultados.

Tem consciência das limitações do teu verificador de IA para que possas maximizar os teus esforços.

Exemplos de verificadores de IA e respectiva precisão

Testámos a precisão de alguns dos verificadores de IA mais fiáveis atualmente disponíveis.

Há tantos por aí, mas nós reduzimos a lista para IA indetetável, IA de originalidade, Turnitine Escritor.

Para realizar o nosso teste, utilizámos conteúdos puramente humanos e gerados por IA, criados com o ChatGPT.

Repara que é um caso diferente do Turnitin, em que tivemos de adaptar uma abordagem diferente porque é um serviço pago pelas instituições.

Mas mesmo assim conseguimos obter alguns resultados semelhantes.

Cada um destes verificadores tem o seu próprio método de deteção e sistema de pontuação para detetar conteúdos de IA.

No entanto, o nosso objetivo continua a ser o mesmo: queremos que o trabalho de IA seja detectado como 100% IA e que o conteúdo humano seja visto como 100% humano.

Eis o desempenho destas ferramentas nos nossos testes para que possas decidir qual é a mais adequada para ti.

IA indetetável

Classificado como o #1 melhor detetor de IA pela Forbes e com a confiança de mais de sete milhões de utilizadores, IA indetetável não te deixará ficar mal.

É considerado o principal detetor de IA que também vem com uma funcionalidade de humanização que corresponde aos estilos de escrita humanos.

O Undetectable foi atualizado para detetar até o texto ChatGPT-4 como IA, tornando-o muito fiável - e os resultados demonstram-no.

Detetar conteúdos de IA com IA não detetável


Com uma taxa de precisão de 85-95% em testes externosMas, se não te importares, continua a ser uma das melhores ferramentas em 2024.

No nosso teste, o Undetectable foi capaz de identificar conteúdos gerados por IA e por humanos. O seu sistema de pontuação avalia a "Probabilidade de deteção de IA" para cada modelo de linguagem de IA.

Detetar conteúdos humanos com a IA indetetável

No que diz respeito à deteção humana e por IA, assinala tudo com uma precisão de 100%.

Embora os resultados para o conteúdo humano só tenham sido considerados 50% prováveis em alguns modelos, não deixa de ser impressionante o facto de o conteúdo ter sido aprovado como seguramente humano.

Isto mostra que o Undetectable continua a ser útil para contornar os detectores de IA, combinando velocidade e qualidade na sua análise de texto.

Assegura que o conteúdo da IA é devidamente assinalado e, ao mesmo tempo, tem a opção de humanizar o texto da IA quando necessário.

Utiliza o widget abaixo para descobrir como a IA indetetável pode elevar a qualidade dos teus textos (apenas em inglês). Não percas tempo - usa o widget agora e sente a diferença!

Classificado como Detetor de IA #1 pela Forbes

Originalidade IA

Página inicial do Originality.ai para professores

Provavelmente, um dos detectores de IA mais populares no mercado é o Originality AI.

Funcionando como uma ferramenta de deteção de plágio e de conteúdo de IA, permite que os utilizadores comparem o texto com qualquer conteúdo da Web disponível publicamente e o submetam à IA.

De acordo com a Originality AI, o seu verificador ChatGPT apresenta uma precisão de 83-93% com uma taxa de falsos positivos de ~2%.

Independentemente do tipo de texto que testares com Originalidade, a ferramenta apresentará uma classificação percentual.

Indica a probabilidade de o texto ter sido escrito por IA. Também fornece ligações para páginas onde encontra potenciais violações de plágio.

Detetar conteúdos de IA com Originality AI

A IA de originalidade mostrou definitivamente a sua precisão na sinalização de conteúdo de IA com uma pontuação de 100%. Para o conteúdo humano, devolveu uma pontuação humana de 82%.

Detetar conteúdo humano com a IA de Originalidade

Embora seja menos exato do que esperávamos, continua a fornecer uma quantidade razoável de confiança de que o conteúdo foi puramente escrito por humanos.

Turnitin

turnitin ai detetor preciso

Se estudas ou trabalhas numa escola, é muito provável que já tenhas ouvido falar do Turnitin. Trata-se de um popular detetor de plágio mais utilizado em ambientes académicos.

Para além das suas capacidades de deteção de plágio, o Turnitin também tem um detetor de IA que ajuda os educadores e outros utilizadores a identificar texto gerado por IA nos trabalhos apresentados.

A Turnitin afirma que a sua ferramenta é 98% precisa na deteção de conteúdos gerados por IA.

Mas como o Turnitin é um serviço pago feito à medida das instituições, não pudemos realizar o nosso próprio teste.

Encontrámos alguns resultados fiáveis de um teste realizado por Melhores colégiosque utilizou um método semelhante ao nosso - testando tanto conteúdos puramente de IA como conteúdos escritos por humanos.

Detetar conteúdo humano com Turnitin por BestColleges

A sua avaliação mostra que o Turnitin foi capaz de identificar com precisão o conteúdo gerado por IA e o conteúdo escrito por humanos com uma precisão de 100%.

A ferramenta foi capaz de reconhecer uma versão híbrida e destacar as partes que precisavam de ser corrigidas.

O Turnitin é uma excelente ferramenta para os professores, especialmente para aqueles que têm acesso a ela através do sistema de aprendizagem da sua instituição.

No entanto, também pode ser bastante difícil de aprender e pode exigir alguma formação para o dominar. Além disso, é dispendioso e, normalmente, está limitado apenas ao sistema escolar, pelo que não é acessível a utilizadores individuais.

Escritor

página inicial do escritor ai checker accurate

O Writer é conhecido pela sua vasta gama de ferramentas de assistente de escrita que estão disponíveis através de uma subscrição mensal paga.

Mas o que é fantástico na plataforma é que oferece a sua ferramenta de deteção de IA gratuitamente.

Não precisas de te inscrever ou pagar taxas. Basta copiar e colar o teu conteúdo e deixá-lo correr na plataforma.

A plataforma fornecerá então uma pontuação percentual de conteúdo gerado por humanos, com 100% a indicar que algo é inteiramente feito por um humano sem envolvimento de IA.

No nosso teste, o Writer foi capaz de identificar conteúdo gerado por IA, mas com uma confiança muito menor, quase passando para uma pontuação 50%.

Detetar conteúdo de IA com o Writer

Embora fornecesse uma pontuação mais segura para o conteúdo humano, ainda não tinha a precisão que procurávamos.

Detetar conteúdo humano com o Writer

O A writer fica aquém em termos de precisão quando comparado com os outros verificadores de IA da nossa lista, mas os escritores casuais que apenas pretendem verificar rapidamente alguns trabalhos podem beneficiar da sua funcionalidade de verificação gratuita.

FAQs

Qual é o melhor verificador de IA?

O melhor verificador de IA depende, em última análise, das necessidades e preferências do utilizador. Mas não podes errar com um detetor fiável como o Undetectable AI, que já foi experimentado e testado como uma escolha de topo pela sua elevada precisão.

Como é que os professores verificam a IA?

Já não são só os alunos. Atualmente, os professores também utilizam ferramentas de deteção de IA (como o Turnitin, se já fizer parte do sistema da escola) para verificar se os trabalhos dos alunos estão envolvidos em IA. Estas ferramentas são muito boas a analisar padrões e estruturas de texto para identificar conteúdos de IA.

Os verificadores de IA necessitam de verificação humana?

Embora os verificadores de IA possam assinalar conteúdos gerados por IA com bastante precisão, continua a ser necessária alguma verificação humana para garantir a exatidão e evitar falsos positivos. Sinais como um tom inconsistente e a utilização de linguagem demasiado sofisticada são alguns sinais de alerta típicos da IA.

Que factores afectam a precisão dos verificadores de IA?

Vários factores podem afetar a precisão dos verificadores de IA, como o grau de sofisticação do modelo de IA utilizado para criar o conteúdo ou os algoritmos utilizados pelo próprio verificador. Existem também conteúdos híbridos que combinam conteúdos com IA e conteúdos escritos por humanos. Isto pode dificultar a medição da exatidão destas ferramentas.

Conclusão

Então, qual é a precisão de um verificador de IA? Não temos uma resposta definitiva. Alguns funcionam bem e outros têm um desempenho fraco.

Os algoritmos utilizados para medir as pontuações desempenham um papel importante, a par de outros factores.

Mas embora os verificadores de IA tenham certamente as suas limitações, continuam a ser considerados ferramentas essenciais.

Sejamos realistas: alguns alunos vão utilizar a IA nos seus trabalhos, por isso é melhor estares preparado.

Se és um estudante ou criador de conteúdos, um Verificador de IA é uma excelente forma de maximizar o potencial do teu trabalho através de uma utilização responsável da IA.

Para tua tranquilidade, considera a utilização do Undetectable. As suas capacidades avançadas facilitam a deteção de conteúdos gerados por IA, com um humanizador para manter sempre a autenticidade.

Mantém a integridade de qualquer trabalho escrito nesta plataforma tudo-em-um.

IA indetetável (TM)