Как определить текст, написанный нейросетью
Сервисы проверки текста на генерацию ИИ могут быть полезны многим организациям и группам пользователей: от маркетологов и контент-менеджеров до редакций журналов и газет. Использование текстовых online-анализаторов помогает выявить сгенерированный контент, написанный не человеком, а нейросетью. Ниже мы протестируем наиболее популярные сервисы проверки текста на ИИ.
Для чего нужна проверка на ИИ?
Отношение читателей к сгенерированному контенту не однозначно. Причины, почему нейроконтент может не понравиться пользователям:
- пресный, неинтересный текст,содержащий много «воды»;
- мало полезной информации;
- стилистически неоднородный;
- некомпетентный по части терминологий, сленга;
- неубедительный сторителлинг;
- не обращается к целевой аудитории.
Как определить текст, написанный искусственным интеллектом?
Есть два способа найти ИИ в тексте: живой анализ и машинная проверка. Первый научит зрительно определять подозрительные тексты, чтобы не тратить время на проверку всего контента. Второй — укажет точный процент «проблемности» на выбранном количестве килознаков.
Как определить нейросеть «на глаз»
5 признаков «искусственного» происхождения:
- смысловые повторы, тавтологии;
- штампы, клише;
- недостоверные факты;
- рваная структура;
- неуместные метафоры.
Из живого примера (карточки товара, написанной chat GPT):
Внутри коробки находятся не просто наушники, а приглашение шагнуть в мир непревзойденного совершенства звука. Изготовленный с высочайшей точностью, сверкающий алюминиевый корпус демонстрирует оттенок «атмосферно-голубой», а прочная рама из нержавеющей стали добавляет продукту дополнительную надежность.
Сервисы определения текста искусственного интеллекта (ИИ)
В интернете можно найти сайты, которые определяют, сгенерирован ли текст нейросетью онлайн, или написан человеком. Создадим с помощью ChatGPT текст и проверим эффективность самых популярных AI-детекторов.
GPTZero
Придуман для разоблачения чересчур продвинутых школьников и студентов. Разработчик декларирует корректность результата с точностью до 99%. Авторитетный Hi-Tech ресурс TechCrunch дал ему первое место в собственном рейтинге AI-детекторов.
Скормив GPTZero русскоязычный текст, констатируем, что качеством проверки он не блещет. Творчество chat GPT названо авторским с вероятностью 97%. Проверки бесплатные.
Сервис проверки contentatscale.ai
AI-детектор, обученный на «творчестве» ChatGPT, Claude и Gemini. Должен формировать результат по 3 показателям — шаблонность, предсказуемость и вероятность. Должен определить общее качество, подсветить фрагменты, которые нужно «очеловечить».
Результаты нашего тестирования:
Программа сочла писанину сносной, не найдя признаков искусственности.
Проверка текста в AI Content Detector (crossplag.com)
Изначально генератор ИИ контента, который позже оброс дополнительным функционалом. Результативность работы с русским языком одна из лучших в рейтинге. Уверенно вывел chat GPT на чистую воду.
Проверки платные, но новичкам после регистрации выдают 10 пробных кредитов.
Детектор ИИ detecting-ai.com
Условно бесплатный ИИ-детектор. По словам разработчика, натаскан на алгоритмы написания топовых нейросетей — ChatGPT 3.5, GPT4, Gemini, Jasper и Claude. Нейронки, использующие схожие модели тоже засекает.
Актуальность для рунета пока околонулевая. Проверочный образец оценен как 100% авторский.
Aibusted
Программный инструмент для проверки на предмет нейрогенерации топовыми LLM вроде ChatGPT, GPT-4 и Gemini — всего около десятка.
Результат тестирования проверочной статьи нас сперва порадовал, однако далее мы решили проверить еще один текст, который был точно написан человеком:
Онлайн-сервис засек признаки искусственности в обоих случаях.
PR-CY content-detector
Инструментарий для распознания ИИ от платформы PR-CY. Условно бесплатный. После регистрации дает несколько пробных попыток. Проверим, сгенерирован ли нейросетью наш проверочный образец.
PR-CY нашел в сгенерированном тексте всего 13% искусственности.
Copyleaks
Самый раскрученный в западной медийке детектор искусственного интеллекта. В списке именитых партнеров Medium, Semrush и другие известные названия. Без долгих предисловий проверим, написан ли текст нейросетью.
Инструмент обнаружил присутствие chat GPT в сгенерированном тексте и указал текст, написанный человеком. Пожалуй пока это самый толковый сервис из тех, что мы проверили, который смог определить сгенерирован ли текст нейросетью онлайн. Пользоваться можно, но проверки платные. Есть пробный демо-режим.
Нейропомощник text.ru
На вопрос, выявляет ли антиплагиат текст нейросети, отвечаем отрицательно. Но популярный сервис проверки уникальности недавно запустил собственный AI-checker. Пробных попыток нет — только за оплату. Ради чистоты эксперимента, пополним баланс и проверим.
Обмануть «Нейропомощника» в первом тексте не получилось, он определил ИИ в тексте на 100%. Однако, со вторым текстом вышел прокол. Его сервис тоже забраковал, хотя мы точно знаем, что писал его человек.
Так ли ужасен AI-контент на самом деле?
Тренд на нейросети молниеносно и прочно укрепился уже во многих сферах нашей жизни. Согласно отчету SiegeMedia, в прошлом году около 35% компаний в США и Европе использовали контент, сгенерированный нейросетью. В 2024 таких станет на 42% больше. Журналисты с копирайтерами бьют тревогу — опасаются, что ИИ отберет рабочие места. Мы считаем, что людей пока рано списывать со счетов. Машинописный сгенерированный контент без доработки и тщательной проверки человеком может нанести непоправимый вред. Он может не только не решить проблем читателя, но и спровоцировать недоверие к ресурсу, снизить конверсию и лояльность к бренду.
При здравом подходе LLM оптимизируют творческий процесс, повышают продуктивность, снижают издержки. Но относиться к ИИ-контенту и использовать его на своем ресурсе нужно с осторожностью. Риск снижения интереса читателей к полученной таким образом информации реален. Помимо этого, тексты, сгенерированные ИИ, могут содержать фактические ошибки, неточности или искаженные формулировки. Не исключены также санкции со стороны поисковых систем и жалобы на плагиат. Поисковики относятся к ИИ-текстам настороженно. Не пессимизируют напрямую, но выдвигают более строгие требования на соответствие стандарту EEAT.
Умение вычислять текст, написанный нейросетью, вам точно пригодится, однако онлайн-сервисы с таким функционалом пока справляются с очень большими погрешностями.