Специализированные сервисы для определения AI-сгенерированного текста постепенно уступают место обычным чат-ботам. Последние тесты показывают, что ChatGPT и аналогичные инструменты справляются с этой задачей не хуже, а иногда даже лучше узкоспециализированных решений.
Эволюция детекторов: от 66% к совершенству и обратно
За два года тестирования AI-детекторов автор исследования наблюдал интересную динамику: если в начале 2023 года лучший результат составлял 66% точности, то к февралю 2025-го три детектора показывали стопроцентный результат. Однако к октябрю качество снова снизилось — лишь три инструмента сохранили идеальные показатели.
Одновременно с ухудшением качества многие сервисы ввели ограничения на бесплатное использование, что делает их менее доступными для широкой аудитории.
Методология тестирования
Для объективной оценки использовались пять текстовых блоков: два написанных человеком и три сгенерированных ChatGPT. Каждый детектор анализировал блоки отдельно, при этом результат выше 70% считался уверенным определением авторства.
Тестирование охватило 11 различных детекторов, включая BrandWell, Copyleaks и другие популярные решения. Всего было проведено 55 отдельных проверок.
Сами AI-системы становятся лучшими детекторами собственных творений. Это напоминает историю с антивирусами, которые десятилетиями боролись с вирусами, созданными теми же программистами. Кажется, индустрия детектирования AI-контента повторяет этот путь — сначала появляются специализированные решения, а затем оказывается, что базовые инструменты справляются не хуже.
Ключевые выводы исследования
- Использование AI для написания текстов без указания авторства соответствует определению плагиата
- Специализированные детекторы демонстрируют нестабильное качество работы
- Обычные чат-боты показывают сравнимую или лучшую эффективность
- Качество детекторов ухудшилось за последние полгода
Почему чат-боты эффективнее
Чат-боты, обученные на огромных массивах текстов, включая AI-генерированный контент, обладают более глубоким пониманием языковых паттернов. Они могут анализировать стилистические особенности, структуру предложений и другие тонкие признаки, которые ускользают от специализированных детекторов.
Более того, многие пользователи уже имеют доступ к ChatGPT и другим подобным инструментам, что делает их удобной альтернативой платным сервисам детектирования.
Будущее детекции AI-контента
Тенденция указывает на то, что специализированные детекторы могут стать нишевым продуктом, в то время как основные платформы AI будут включать функции проверки авторства в свои базовые возможности. Это соответствует общей логике развития технологий, когда узкоспециализированные инструменты поглощаются более универсальными платформами.
Сообщает ZDNet.