Обзор программы Grammarly AI Checker: Является ли он точным?

В августе 2024 года компания Grammarly запустила свой детектор контента с искусственным интеллектом после того, как назвала ИИ-проверяющие устройства "Ненадежный".

Grammarly доверяют более 30 миллионов человек по всему миру. 

Она хорошо известна тем, что помогает исправить орфографию, грамматику, стиль и тон на многих устройствах и платформах. 

Поэтому люди обрадовались, когда Grammarly добавила инструмент для обнаружения контента, написанного искусственным интеллектом.

Теперь нам нужно проверить, решает ли AI Checker от Grammarly те проблемы, которые они когда-то критиковали?

Является ли Grammarly AI checker точным?

Или мы уточним.

Надежна ли программа проверки искусственного интеллекта Grammarly?

В этом блоге мы протестируем ИИ-проверку Grammarly на шести различных типах контента, чтобы понять, насколько хорошо она работает на самом деле.

Мы покажем вам, в чем он преуспел, в чем потерпел неудачу и можно ли доверять ему в вопросах проверки контента. 


Основные выводы

  • ИИ-проверка Grammarly достигла лишь 33% точности в наших тестах по 6 типам контента.

  • Инструмент правильно определил человеческий контент 100%, но не смог обнаружить полностью сгенерированный ИИ текст.

  • Является ли Grammarly AI checker точным? По результатам нашего тестирования, детектор с трудом справляется с перефразированным контентом ИИ и смешанным текстом, написанным человеком и ИИ.

  • У бесплатных пользователей есть ограничение в 1 000 слов на одно сообщение, в то время как у премиум-пользователей лимит выше.


Что представляет собой Grammarly AI Checker?

Программа проверки грамматики AI Checker создана для того, чтобы помочь вам определить, мог ли тот или иной текст быть создан искусственным интеллектом. 

Детектор встроен прямо в Существующая платформа GrammarlyПоэтому он работает вместе с инструментами для грамматики, орфографии и стилистики. 

Вот как проходило внедрение ИИ-проверки Grammarly:

Никогда больше не беспокойтесь о том, что ИИ обнаружит ваши сообщения. Undetectable AI Мы можем помочь вам:

  • Сделайте так, чтобы ваши записи с помощью искусственного интеллекта появились человекоподобный.
  • Байпас все основные инструменты обнаружения ИИ одним щелчком мыши.
  • Используйте AI безопасно и уверенно в школе и на работе.
Попробуй бесплатно
  • Август 2024 года: Официальный запуск детектора искусственного интеллекта
  • Сентябрь 2024 года: Выпущена бета-версия для Google Docs
  • Начало 2025 года: Еще больше возможностей, особенно для преподавателей

Эта функция является частью более широкой программы Grammarly, направленной на "Grammarly Authorship". IЭто их способ отстаивать подлинное, человеческое письмо в эпоху, когда повсюду царит искусственный интеллект.

Для кого предназначен этот инструмент?

  • Студенты и преподаватели.
  • Создатели контента и маркетологи.
  • Профессиональные писатели.

Поскольку детектор является частью основной платформы Grammarly, пользоваться им гораздо проще, чем отдельным. Инструменты для проверки искусственного интеллекта. 

Если вы уже пользуетесь Grammarly, эта функция впишется в ваш рабочий процесс - вам не придется копировать и вставлять текст на другом сайте.

Ключевые особенности детектора искусственного интеллекта Grammarly

Вот основные возможности программы Grammarly AI checker:

  • Grammarly AI checker free план анализирует до 1 000 слов. Премиум предлагает более высокие лимиты и больше инструментов.
  • Полностью встроен в веб-приложения Grammarly, настольные и мобильные приложения - никаких дополнительных инструментов не требуется.
  • Показывает процентную вероятность использования контента, созданного искусственным интеллектом.
  • Работает в расширениях для браузеров, приложениях для настольных компьютеров и мобильных устройств.
  • Обнаруживает содержимое искусственного интеллекта мгновенно, пока вы пишете.

Как работает искусственный интеллект Grammarly

ИИ-проверка Grammarly работает, обнаруживая шаблоны, которые часто встречаются в контенте, написанном ИИ. 

Он обращает внимание на такие вещи, как построение предложений, стиль письма и повторяющиеся языковые структуры.

Инструмент использует машинное обучение. 

Это означает, что он был обучен на большом количестве примеров, чтобы распознать, как обычно выглядит письмо ИИ. 

В Grammarly утверждают, что используют "строгое тестирование", чтобы убедиться, что инструмент направленно точен - хорошо выявляет вероятный ИИ, даже если он не идеален.

Но насколько надежна работа ИИ-проверки Grammarly на практике? Лучше всего он работает с длинными текстами.

Короткие отрывки не дают ему достаточно данных для анализа, поэтому результаты могут быть менее точными.

Поскольку он встроен в платформу Grammarly, он также использует те же системы, которые проверяют грамматику и стиль. 

Это поможет ему понять общий ход вашего письма. 

Но есть и обратная сторона - поскольку это не специализированный детектор ИИ, он может пропустить то, что лучше улавливают специализированные инструменты.

Точна ли программа проверки искусственного интеллекта Grammarly?

Чтобы оценить, насколько точна или нет программа проверки искусственного интеллекта Grammarly, мы использовали Рамки ZDNet.

Эта методология анализирует шесть отдельных категорий контента для измерения реальной производительности.

Тест: 6 категорий контента

Мы протестировали ИИ-проверку Grammarly на шести типах контента:

КатегорияТип содержимого
1100% AI
2100% Человек
3Слегка отредактированный AI
4Перефразированный искусственный интеллект
5Смешанный человек + ИИ
6ИИ с плагиатом

Давайте посмотрим, какие результаты показала программа проверки Grammarly AI в каждой категории:

Категория 1: 100% AI

Реальность: Полностью создан искусственным интеллектом
Grammarly Результат: 50% AI
Вердикт: Неправильное обнаружение

Этот контент был полностью создан ChatGPT без какого-либо редактирования человеком.

Проверка ИИ Grammarly должна была бы отметить это как сгенерированное ИИ, но она обнаружила только 50% вероятности ИИ.

Категория 2: 100% Человек (Классическая реклама)

Реальность: Написанные человеком
Grammarly Результат: 0% AI (100% Human)
Вердикт: Правильное обнаружение

Этот контент был написан за несколько десятилетий до появления инструментов искусственного интеллекта. ИИ-проверка Grammarly правильно определила, что это полностью человеческий текст.

Категория 3: Слегка отредактированный AI

Реальность: Преимущественно искусственный интеллект с минимальными человеческими правками
Grammarly Результат: 25% AI
Вердикт: Неправильное обнаружение

Только 20-25% этого контента было отредактировано человеком. Программа проверки ИИ Grammarly значительно занизила степень участия ИИ.

Категория 4: Перефразированный контент ИИ

Реальность: Происхождение ИИ, перефразированное, чтобы звучать по-человечески
Grammarly Результат: 33% AI
Вердикт: Правильное обнаружение

Этот контент был изначально сгенерирован ИИ, а затем перефразирован с помощью инструментов гуманизации. Проверка Grammarly AI обнаружила некоторые следы ИИ.

Категория 5: Смешанный человеческий контент + контент ИИ

Реальность: 50% человеческих фраз + 50% фраз, сгенерированных искусственным интеллектом
Grammarly Результат: 20% AI
Вердикт: Неправильное обнаружение

При равных долях человеческого и искусственного интеллекта проверка ИИ Grammarly должна была обнаружить около 50% нарушений ИИ, а не 20%.

Категория 6: ИИ с плагиатом

Реальность: Написанные искусственным интеллектом, с фактическим историческим наложением
Grammarly Результат: 25% AI
Вердикт: Неправильное обнаружение

Это был полностью сгенерированный искусственным интеллектом контент, в который случайно попала исторически достоверная информация. Проверка Grammarly AI пропустила генерацию ИИ полностью.

Итоговый оценочный лист

Из 6 общих тестовых случаев:

  • Правильные обнаружения: 2 (категории 2 и частично 4)
  • Ложные положительные/отрицательные результаты: 4 (Категории 1, 3, 5, 6)

Точность обнаружения: 33%

ИИ-проверка Grammarly демонстрирует ограниченную надежность, точно определяя содержание лишь в трети случаев.

Несмотря на то, что он отлично справляется с распознаванием чисто человеческого контента, он постоянно недооценивает участие ИИ во всех остальных категориях.

Эти результаты подчеркивают важную проблему: программа проверки ИИ Grammarly не просто ненадежна - она опасно вводит в заблуждение пользователей, которым необходимо точное определение ИИ.

Поэтому для проверки содержимого... 

Используйте Необнаруживаемый детектор искусственного интеллекта чтобы получить 100% точных результатов. В ходе собственного тестирования ZDNet этот ИИ-детектор правильно определил все шесть категорий без ложных срабатываний и отрицательных результатов.

Вы также можете применить наши Необнаруживаемый ИИ-гуманизатор переписывать все отмеченные разделы до тех пор, пока они не будут выглядеть по-настоящему человеческими.

Повторное тестирование с помощью нескольких детекторов, чтобы убедиться, что ваш контент проходит на разных платформах.

Слабые стороны и ограничения Grammarly AI Checker

Вот основные способы, с помощью которых ИИ-чекер Grammarly не совсем справляется с поставленной задачей:

Проблемы с точностью

  • Иногда он не замечает контент, который явно написан искусственным интеллектом.
  • Когда он выставляет низкие оценки AI, это может заставить вас думать, что контент более оригинален, чем на самом деле.
  • Результаты не одинаковы - точность зависит от типа контента и от того, какая модель ИИ его создала.

Технические ограничения

  • Бесплатные пользователи могут сканировать только до 1 000 слов за раз.
  • Он оптимизирован для английского языка и не очень хорошо справляется с другими языками.
  • Непринужденное, творческое или неформальное письмо может сбить его с толку.
  • Он замедляется при анализе длинных текстов.

Практические недостатки

  • Вы не можете загрузить или проверить несколько документов за один раз.
  • Он не делает различий между контентом, отредактированным ИИ и написанным ИИ.

Основные задачи

  • Инструментарий с трудом поспевает за тем, как быстро развивается ИИ.
  • Новые модели ИИ могут легко проскользнуть мимо его обнаружения.
  • Смешанный контент - когда человек редактирует или дополняет результаты работы ИИ - часто остается за кадром.

Grammarly AI Checker в сравнении с другими детекторами искусственного интеллекта

Когда речь заходит о точности обнаружения ИИ, программа проверки ИИ Grammarly не может сравниться с инструментами, специально разработанными для этой задачи.

Вот как показали себя лучшие детекторы в нашем тестировании:

ИнструментТочностьВыделяющаяся особенностьСлабостьЦена/месяц
Grammarly33%Бесшовная интеграция с платформой для письмаОпасно низкие показатели точности$12
Необнаруживаемый ИИ100%ИИ-гуманизатор для обхода детекторовОграниченное бесплатное использование$19
Copyleaks50-80%Многоязычная поддержка (30+ языков)Менее точные в новых моделях ИИ$17
GPT Zero100%Оценка вероятности ИИ от предложения к предложениюОграниченный бесплатный уровень$15
StealthWriter AI50%Переписывает текст ИИ так, чтобы он выглядел написанным человекомМожет изменить первоначальное значение$20

Примечание: Мы провели всесторонний обзор обоих Copyleaks и StealthWriter AI с использованием той же методологии тестирования.

Может ли Grammarly обнаружить отредактированный или перефразированный ИИ текст?

Именно здесь ИИ-проверка Grammarly показывает свои самые слабые стороны.

Перефразированный контент ИИ Производительность

В ходе нашего тестирования Grammarly AI Checker обнаружила только 33% AI в контенте, который изначально был 100% AI-генерирован, но перефразирован с помощью инструментов гуманизации.

Это означает, что любой человек, использующий инструменты для перефразирования с помощью искусственного интеллекта или программы для гуманизации с помощью искусственного интеллекта, может легко обойти обнаружение Grammarly AI Checker.

Проблемы с контентом, отредактированным искусственным интеллектом

ИИ-проверка Grammarly испытывает еще большие трудности с отредактированным ИИ контентом - текстом, который изначально был написан человеком, но был улучшен или дополнен ИИ.

Наш сайт "Слегка отредактированный AI" Категория показала только 25% AI обнаружения, когда реальность была 75-80% AI участия.

Такие инструменты, как Необнаруживаемый гуманизатор ИИ и Перефразировщик ИИ специально разработаны для того, чтобы уклоняться от обнаружения. На сайте наш последний обзорМы проверили точность инструментов гуманизатора, и наше тестирование показало:

StealthWriter AI: Снижение обнаружения AI с 100% до 5% в нескольких детекторах.
Необнаруженный искусственный интеллект: Достигнуто обнаружение ИИ 1% после гуманизации
Quillbot Paraphrasing: По-прежнему показывает 76% обнаружение AI (менее эффективно)

Итог: Если кто-то захочет обойти Grammarly AI Checker, то легкодоступные инструменты сделают это проще простого.

Получите доступ к нашему детектору ИИ и гуманизатору непосредственно через виджет ниже.

Вопросы и ответы о Grammarly AI Checker

Может ли Grammarly отмечать содержание GPT-4?

Не совсем надежно. Программа проверки ИИ Grammarly часто говорит, что контент GPT-4 менее ИИ, когда на самом деле он полностью ИИ.

Он с трудом распознает текст от таких продвинутых инструментов, как GPT-4.

Как Grammarly сравнивается с Turnitin или GPTZero?

Grammarly более удобен в использовании, но гораздо менее точен. В наших тестах Grammarly набрал всего 33%.

GPTZero показал точность 99,8%, в то время как Turnitin в других независимых тестах набрал 87-90%. Если точность - ваш приоритет, Grammarly не справится.

Могут ли результаты определения Grammarly быть ошибочными?

Да, часто. Проверка искусственного интеллекта Grammarly недоопределяет содержимое, созданное искусственным интеллектом, и может ошибочно уверить пользователей в том, что текст, созданный искусственным интеллектом, является оригинальным.

Кроме того, он неправильно помечает некоторые технические материалы, написанные человеком.

Заключение

Проверяющий ИИ Grammarly прост в использовании, поскольку он встроен в платформу Grammarly, но наши тесты показали, что он не очень точен. 

Он был точен 33% раз. Это означает, что он часто пропускает контент, созданный искусственным интеллектом, или выдает неверные результаты.

Так достаточно ли точна проверка Grammarly AI? 

Если вам нужна простая и быстрая проверка Grammarly, она может подойти. 

Если вам действительно нужно определить, было ли что-то написано искусственным интеллектом, одного этого инструмента будет недостаточно - есть и другие варианты, которые работают гораздо лучше.

Бесплатная версия Grammarly AI checker позволяет проверять короткие тексты, а платная версия дает больше возможностей, но ни одна из них не решает проблему точности. 

Если вам нужно доверять результатам, лучше использовать надежные инструменты, такие как Необнаруживаемый детектор искусственного интеллекта для точности 100%. 

Undetectable AI (TM)