Em agosto de 2024, a Grammarly lançou o seu detetor de conteúdos com IA depois de ter chamado verificadores com IA "não fiável".
O Grammarly tem a confiança de mais de 30 milhões de pessoas em todo o mundo.
É conhecido por ajudar a melhorar a ortografia, a gramática, o estilo e o tom em muitos dispositivos e plataformas.
Por este motivo, as pessoas ficaram entusiasmadas quando o Grammarly adicionou uma ferramenta para detetar conteúdo escrito por IA.
Agora temos de verificar se o AI Checker da Grammarly resolve os problemas que outrora criticaram.
O verificador de IA Grammarly é preciso?
Ou seremos específicos.
O Grammarly AI checker é fiável?
Neste blogue, vamos testar o verificador de IA do Grammarly em seis tipos de conteúdo diferentes para ver se funciona realmente bem.
Mostraremos exatamente onde é bem sucedido, onde falha e se pode confiar nele para as suas necessidades de verificação de conteúdos.
Principais conclusões
- O verificador de IA da Grammarly obteve apenas 33% de precisão nos nossos testes em 6 tipos de conteúdo.
- A ferramenta identificou corretamente o conteúdo humano do 100%, mas não conseguiu detetar o texto totalmente gerado por IA.
- O verificador de IA Grammarly é preciso? Com base nos nossos testes, o detetor tem dificuldade em lidar com conteúdo de IA parafraseado e com escrita mista de humano e IA.
- Os utilizadores gratuitos têm um limite de 1.000 palavras por envio, enquanto os utilizadores premium têm limites mais elevados.
- Ferramentas mais especializadas como Detetor de IA indetetável (100% accuracy) são muito mais fiáveis do que a versão gratuita do verificador de IA Grammarly.
O que é o Grammarly AI Checker?
O Grammarly AI Checker foi concebido para o ajudar a detetar se um texto escrito pode ter sido gerado por IA.
O detetor está integrado no A plataforma existente da Grammarlypara que funcione em conjunto com as suas ferramentas de gramática, ortografia e estilo.
Eis como correu a implementação do verificador de IA da Grammarly:
Nunca mais se preocupe com o facto de a IA detetar os seus textos. Undetectable AI Pode ajudar-vos:
- Faça aparecer a sua escrita assistida por IA de tipo humano.
- Bypass todas as principais ferramentas de deteção de IA com apenas um clique.
- Utilização IA com segurança e com confiança na escola e no trabalho.
- agosto de 2024: Lançamento oficial do detetor de IA
- setembro de 2024: Versão beta lançada para o Google Docs
- Início de 2025: Mais funcionalidades a caminho, especialmente para os educadores
Esta funcionalidade faz parte do esforço mais alargado do Grammarly para "Grammarly Authorship." IÉ a sua forma de defender uma escrita autêntica e humana numa época em que a IA está em todo o lado.
A quem se destina esta ferramenta?
- Estudantes e professores.
- Criadores de conteúdos e profissionais de marketing.
- Escritores profissionais.
Uma vez que o detetor faz parte da plataforma principal do Grammarly, é muito mais fácil de utilizar do que um detetor separado. Ferramentas de controlo da IA.
Se já estiver a utilizar o Grammarly, esta funcionalidade encaixa perfeitamente no seu fluxo de trabalho - não é necessário copiar e colar noutro sítio Web.
Principais caraterísticas do Detetor de IA do Grammarly
Eis as caraterísticas de destaque do verificador de IA Grammarly:
- Verificador de IA Grammarly gratuito O plano analisa até 1.000 palavras. O plano Premium oferece limites mais elevados e mais ferramentas.
- Totalmente incorporado nas aplicações Web, desktop e móveis do Grammarly - não são necessárias ferramentas adicionais.
- Mostra uma percentagem de probabilidade de conteúdo gerado por IA.
- Funciona em extensões de browser, aplicações de ambiente de trabalho e dispositivos móveis.
- Detecta conteúdos de IA instantaneamente à medida que escreve.
Como funciona o verificador de IA da Grammarly
O verificador de IA da Grammarly funciona detectando padrões que são comuns em conteúdo escrito por IA.
Analisa aspectos como a forma como as frases são construídas, o estilo de escrita e as estruturas linguísticas repetidas.
A ferramenta utiliza a aprendizagem automática.
Isto significa que foi treinado com muitos exemplos para reconhecer o aspeto habitual da escrita de IA.
A Grammarly afirma que utiliza "testes rigorosos" para se certificar de que a ferramenta é direcionalmente precisa - boa na deteção de IA provável, mesmo que não seja perfeita.
Mas até que ponto o desempenho do verificador de IA Grammarly é fiável na prática? Funciona melhor com textos mais longos.
As passagens curtas não lhe dão dados suficientes para analisar, pelo que os resultados podem ser menos exactos.
Como está integrado na plataforma do Grammarly, também utiliza os mesmos sistemas que verificam a gramática e o estilo.
Isto ajuda-o a compreender o fluxo geral da sua escrita.
Mas há uma desvantagem: como não é um detetor de IA dedicado, pode não detetar coisas que as ferramentas especializadas conseguem detetar melhor.
O verificador de IA Grammarly é exato?
Para avaliar se o verificador de IA Grammarly é exato ou não, utilizámos Quadro da ZDNet.
Esta metodologia analisa seis categorias de conteúdo distintas para medir o desempenho no mundo real.
O teste: 6 categorias de conteúdo
Testámos o verificador de IA que a Grammarly fornece contra seis tipos de conteúdo:
| Categoria | Tipo de conteúdo |
| 1 | 100% AI |
| 2 | 100% Humano |
| 3 | IA ligeiramente editada |
| 4 | IA parafraseada |
| 5 | Misto humano + IA |
| 6 | IA com Plágio |
Vejamos o desempenho do verificador de IA Grammarly em cada categoria:
Categoria 1: 100% AI
A realidade: Totalmente gerado por IA
Resultado do Grammarly: 50% AI
Veredicto: Deteção incorrecta
Este conteúdo foi gerado inteiramente pelo ChatGPT, sem qualquer edição humana.
O verificador gramatical da IA deveria ter assinalado este facto como altamente gerado pela IA, mas apenas detectou a probabilidade de IA 50%.
Categoria 2: 100% Human (Anúncio clássico)
A realidade: Escrita humana
Resultado do Grammarly: 0% AI (100% Humano)
Veredicto: Deteção correta
O conteúdo foi escrito décadas antes de existirem ferramentas de IA. O verificador de IA Grammarly identificou corretamente este conteúdo como sendo inteiramente escrito por humanos.
Categoria 3: IA ligeiramente editada
A realidade: Principalmente IA com um mínimo de edições humanas
Resultado do Grammarly: 25% AI
Veredicto: Deteção incorrecta
Apenas 20-25% deste conteúdo foi objeto de edição humana. O verificador de IA Grammarly subestimou significativamente o envolvimento da IA.
Categoria 4: Conteúdo de IA parafraseado
A realidade: Origem da IA, parafraseada para parecer humana
Resultado do Grammarly: 33% AI
Veredicto: Deteção correta
Este conteúdo foi originalmente gerado por IA e depois parafraseado utilizando ferramentas de humanização. O verificador de IA Grammarly detectou alguns vestígios de IA.
Categoria 5: Conteúdo misto humano + IA
A realidade: 50% escrita humana + 50% frases geradas por IA
Resultado do Grammarly: 20% AI
Veredicto: Deteção incorrecta
Com partes iguais de conteúdo humano e de IA, o verificador de IA da Grammarly deveria ter detectado cerca de 50% de envolvimento de IA, e não 20%.
Categoria 6: IA com Plágio
A realidade: Escrito em IA com sobreposição histórica factual
Resultado do Grammarly: 25% AI
Veredicto: Deteção incorrecta
Tratava-se de um conteúdo totalmente gerado por IA que, por acaso, incluía algumas informações historicamente exactas. O verificador de IA da Grammarly não detectou totalmente a geração de IA.
Quadro de resultados final
De um total de 6 casos de teste:
- Detecções corretas: 2 (Categorias 2 e parcialmente 4)
- Falsos positivos/negativos: 4 (Categorias 1, 3, 5, 6)
Precisão de deteção: 33%
O verificador de IA Grammarly mostra uma fiabilidade limitada, identificando com precisão o conteúdo apenas um terço das vezes.
Embora seja excelente no reconhecimento de conteúdo puramente humano, subestima consistentemente o envolvimento da IA em todas as outras categorias.
Este desempenho realça uma questão crítica: o verificador de IA Grammarly não é apenas pouco fiável - é perigosamente enganador para os utilizadores que necessitam de uma deteção de IA precisa.
Portanto, para a verificação do seu próprio conteúdo...
Utilização Detetor de IA indetetável para obter resultados 100% exactos. Nos testes efectuados pela ZDNet, este detetor de IA identificou corretamente as seis categorias sem falsos positivos ou negativos.
Também pode aplicar o nosso Humanizador de IA indetetável para reescrever as secções assinaladas até que pareçam genuinamente humanas.
Testar novamente com vários detectores para confirmar que o seu conteúdo é aprovado em diferentes plataformas
Pontos fracos e limitações do Grammarly AI Checker
Aqui estão as principais formas em que o verificador de IA da Grammarly não acerta no alvo:
Problemas de exatidão
- Por vezes, ignora conteúdos que são claramente escritos por IA.
- Quando atribui pontuações de IA baixas, pode fazer-nos pensar que o conteúdo é mais original do que é na realidade.
- Os resultados não são consistentes - a precisão varia consoante o tipo de conteúdo e o modelo de IA que o criou.
Limitações técnicas
- Os utilizadores gratuitos só podem digitalizar até 1.000 palavras de cada vez.
- Está optimizado para o inglês e não lida bem com outros idiomas.
- A escrita casual, criativa ou informal pode confundi-lo.
- Tem tendência para abrandar quando analisa textos mais longos.
Desvantagens práticas
- Não é possível carregar ou verificar vários documentos de uma só vez.
- Não faz distinção entre conteúdo editado e escrito por IA.
Principais desafios
- A ferramenta está a ter dificuldades em acompanhar a rapidez com que a IA está a evoluir.
- Os modelos de IA mais recentes podem facilmente escapar à sua deteção.
- Os conteúdos mistos - em que os humanos editam ou expandem os resultados da IA - passam muitas vezes despercebidos.
Verificador de IA da Grammarly vs. Outros Detectores de IA
No que diz respeito à precisão da deteção de IA, o verificador de IA do Grammarly tem dificuldade em acompanhar as ferramentas especificamente concebidas para esta tarefa.
Eis o desempenho dos melhores detectores nos nossos testes:
| Ferramenta | Exatidão | Caraterística de destaque | Fraqueza | Preço/Mês |
| Gramática | 33% | Integração perfeita com a plataforma de escrita | Taxas de precisão perigosamente baixas | $12 |
| IA indetetável | 100% | Humanizador de IA para contornar os detectores | Utilização gratuita limitada | $19 |
| Copyleaks | 50-80% | Suporte multilingue (mais de 30 idiomas) | Menos preciso com os modelos de IA mais recentes | $17 |
| GPT Zero | 100% | Pontuação de probabilidade de IA frase a frase | Escalão gratuito limitado | $15 |
| IA do StealthWriter | 50% | Reescreve o texto da IA para parecer escrito por humanos | Pode alterar o significado original | $20 |
Nota: Efectuámos análises exaustivas de ambos Copyleaks e IA do StealthWriter utilizando a mesma metodologia de ensaio.
A Grammarly consegue detetar textos editados por IA ou parafraseados?
É aqui que o verificador de IA Grammarly mostra as suas maiores fraquezas.
Desempenho do conteúdo de IA parafraseado
Nos nossos testes, o Grammarly AI Checker detectou apenas 33% AI em conteúdos que foram originalmente gerados por 100% AI mas parafraseados utilizando ferramentas de humanização.
Isto significa que qualquer pessoa que utilize ferramentas de parafraseamento de IA ou software humanizador de IA pode facilmente contornar a deteção do Grammarly AI Checker.
Desafios do conteúdo editado por IA
O verificador gramatical de IA tem ainda mais dificuldades com conteúdos editados por IA - texto que começa por ser humano mas recebe melhorias ou expansão de IA.
O nosso "IA ligeiramente editada" A categoria mostrou apenas 25% de deteção de IA quando a realidade era de 75-80% de envolvimento de IA.
Ferramentas como Humanizador da IA indetetável e Parafraseador de IA são especificamente concebidos para evitar a deteção. Em a nossa última revisãoNo entanto, testámos a precisão das ferramentas do humanizador e os nossos testes mostraram que:
IA do StealthWriter: Redução da deteção de IA de 100% para 5% em vários detectores.
IA indetetável: Deteção de IA 1% após humanização
Parafraseando o Quillbot: Ainda mostrava a deteção de IA 76% (menos eficaz)
O resultado final: Se alguém quiser contornar o Grammarly AI Checker, as ferramentas disponíveis tornam-no trivialmente fácil.
Aceda ao nosso Detetor de IA e Humanizador diretamente através do widget abaixo.
Perguntas frequentes sobre o Grammarly AI Checker
O Grammarly pode assinalar conteúdos GPT-4?
Não de forma fiável. O verificador de IA Grammarly diz frequentemente que o conteúdo GPT-4 é menos IA quando, na realidade, é totalmente IA.
Tem dificuldade em detetar texto de ferramentas avançadas como o GPT-4.
Como é que o Grammarly se compara ao Turnitin ou ao GPTZero?
O Grammarly é mais fácil de utilizar, mas muito menos preciso. Nos nossos testes, o Grammarly obteve apenas 33%.
O GPTZero apresentou uma precisão de 99,8%, enquanto o Turnitin obteve uma pontuação entre 87-90% noutros testes independentes. Se a precisão for a sua prioridade, o Grammarly fica aquém.
Os resultados da deteção da Grammarly podem estar errados?
Sim - frequentemente. O verificador de IA da Grammarly não detecta corretamente o conteúdo da IA e pode tranquilizar falsamente os utilizadores quanto ao facto de o texto gerado pela IA ser original.
Também assinala incorretamente alguns conteúdos técnicos escritos por humanos.
Conclusão
O verificador de IA do Grammarly é fácil de utilizar porque está integrado na plataforma do Grammarly, mas os nossos testes mostram que não é muito exato.
Foi exato em 33% das vezes. Isto significa que falha frequentemente o conteúdo gerado pela IA ou apresenta resultados incorrectos.
Então, o verificador de IA do Grammarly é suficientemente preciso?
Se precisar apenas de uma verificação rápida e simples dentro do Grammarly, poderá funcionar.
Se precisar mesmo de determinar se algo foi escrito por IA, esta ferramenta por si só não é suficiente - existem outras opções com um desempenho muito melhor.
A versão gratuita do verificador de IA Grammarly permite-lhe verificar textos curtos e a versão paga oferece mais funcionalidades, mas nenhuma delas resolve o problema da precisão.
Se precisar de confiar nos resultados, é melhor utilizar ferramentas fiáveis como Detetor de IA indetetável para uma precisão de 100%.