Как распознать текст, написанный нейросетью ChatGPT

Зачем проверять текст в Нейропомощнике Детекторе ИИ

Самый обсуждаемый IT-прорыв последнего года – это нейросети. Особенно быстро популярность получили генераторы текстов, что привело к многочисленным вопросам. Можно ли полностью доверять ИИ создание текстов? Насколько правомерно использовать его в работе копирайтеру? И как узнать, что текст написан нейросетью?

Нейросеть может противоречить сама себе. Поскольку она генерирует текст на основе паттернов и статистики, а не глубокого понимания темы, в разных частях текста могут встречаться противоречащие друг другу утверждения. Особенно это заметно в длинных текстах, где нейросеть может «забыть», о чем писала ранее.

В моем случае нейросеть отлично справилась с материалом, который сама же и сгенерировала. Заодно рассказала, что в тексте приведена слишком базовая и распространенная в сети информация. А вот сгенерированный текст на русском языке ChatGPT принял за человеческий.

При этом новая версия языковой модели гораздо лучше работает с контекстом, чем ее предшественники. Поэтому теоретически уже после генерации можно попросить ChatGPT подредактировать текст и сделать его «более человеческим». Но от этого он не станет выглядеть полностью живым. Добиться хорошего результата можно, только если редактурой займется человек.

Нейросеть опускает контекст и персонализацию текста. ChatGPT не сможет передать опыт конкретного человека — только попытаться имитировать опыт миллионов людей, на чьих текстах обучена модель. Но таким материалам обычно не хватает глубины и авторского ощущения: одно дело — написать шаблонное сочинение по литературному произведению, и другое — рассказать, как ты провел лето.

Проверка текста на нейросеть требуется для того, чтобы убедиться в добросовестности автора. Многие начинающие исполнители злоупотребляют помощью нейросетей, но ожидают оплаты, как авторы, которые делают хорошие тексты самостоятельно. Наш сервис поможет это проверить. Авторство особенно важно знать, если работа представляет собой научную статью или исследование.

Кроме того, нейросетевой контент подходит не для всех целей. Конечно, если требуется очень быстро создать большие объемы текстов, а их качество не столь важно, ИИ может помочь. Но если нужен хороший экспертный контент, с описанием личного опыта или эмоциями, SEO-оптимизацией под поисковые системы, нейросеть уступает авторам. В конечном итоге такой материал может негативно сказаться на показателях ресурса, где он публикуется.

Нейросеть не допускает грамматических ошибок. В Google Brain отмечают: люди чаще указывают, что логичный текст без ошибок написал человек. Хотя идеальная грамотность как раз больше присуща ИИ : люди не там ставят запятые, опечатываются, используют сленг и сокращения. Такого уровня имитации нейросети пока не достигли.

Результаты моего тестирования сервисов

Writer AI Content Detector — коммерческий проект, который сделали разработчики ИИ для создания текстов. Он позволяет вставить ссылку на текст или скопировать до 1500 символов в поле на сайте. Затем выдает процент, определяющий, с какой вероятностью текст сгенерирован или написан человеком.

Если же понять, кто написал текст, не удается – воспользуйтесь Нейропомощником Детектором ИИ. Новый инструмент от Text.ru определяет, какой процент текста написан искусственным интеллектом. Работает сервис за виртуальную внутреннюю валюту – нейросимволы (чтобы их получить, нужно конвертировать средства с основного счёта, который пополняется с карты).

Нейросеть пишет слишком конкретно. Например, исследователи из Google Brain еще в 2019 году пришли к выводу, что ИИ слишком часто использует артикль the , потому что работает на предсказание следующего слова в предложении. Но понятно, что этот признак присущ только англоязычным текстам.

Стиль текста безэмоциональный. Нейросетям сложно передавать эмоции, сарказм, иронию, юмор. Поэтому их тексты часто выглядят сухими и формальными по стилю. Еще нейросети обучены быть нейтральными и объективными, поэтому они стараются избегать резких, категоричных суждений. В их текстах мало критики, негативных оценок, субъективных мнений.

ChatGPT — это вариант победить врага его же оружием. Скиньте самой продвинутой нейросети кусок текста и спросите, написал ли его ИИ . Учитывая, что ChatGPT запоминает предыдущие сообщения и остается в контексте диалога, задайте дополнительные вопросы, как чат-бот пришел к своему выводу.

Если вы хотите научиться их распознавать, главный совет — практикуйтесь. Пользуйтесь генераторами текстов, экспериментируйте с разными моделями, параметрами, стилями. Чем больше вы будете работать с ИИ , тем скорее научитесь видеть характерные особенности и «артефакты» сгенерированных текстов.

В практическом тесте сервис полностью провалился. Он определил, что сгенерированный текст на русском с вероятностью 97% написан человеком, а на английском — с вероятностью 91%. Текст от моего коллеги он тоже отнес к человеческим. Сложилось впечатление, что цифры выдаются абсолютно случайно. Тем более что сервис никак не комментирует свое решение.

Нейросеть пишет большинство текстов по одинаковой структуре. Обычно они состоят из вступления, основной части и вывода. Во вступлении нейросеть представляет тему, дает общий контекст. Основная часть текста состоит из нескольких абзацев, каждый раскрывает отдельный аспект темы. Но переходы могут быть нелогичными, а связь между абзацами — не очень четкой. В заключении нейросеть старается подвести итог, сделать выводы из сказанного. Но они общие и предсказуемые.