Поскольку языковые модели, такие как GPT, продолжают совершенствоваться, становится все труднее различать текст, созданный ИИ, и текст, написанный человеком. Но в некоторых случаях, например в академических кругах, необходимо убедиться, что текст не написан ИИ.
Здесь в игру вступают детекторы текста AI. Хотя ни один из доступных в настоящее время инструментов не обнаруживает с полной уверенностью (и они не заявляют об этом), некоторые из этих инструментов обеспечивают довольно точные результаты. Итак, здесь мы перечисляем восемь самых точных детекторов текста AI, которые вы можете попробовать.
GPTZero был создан, чтобы помочь учителям выяснить, была ли работа, представленная их учениками, создана с использованием ИИ. Но поскольку GPTZero точно определяет контент, созданный ChatGPT, вам не обязательно быть учителем, чтобы извлечь из этого пользу.
GPTZero анализирует текст и сообщает, был ли текст написан людьми или искусственным интеллектом, выделяя конкретные предложения, которые, по его мнению, были сгенерированы искусственным интеллектом. Он также обеспечивает оценку недоумения и всплеска, которые являются мерами случайности и вариации случайности. Как правило, эти оценки высоки для текста, написанного человеком, и низки для ИИ.
Чтобы протестировать инструмент, мы сначала вставили отрывок из «Солдатского дома» Эрнеста Хемингуэя. GPTZero выделил несколько предложений как потенциально сгенерированный искусственным интеллектом текст. Однако он смог правильно идентифицировать текст, сгенерированный ChatGPT, как «полностью написанный ИИ».
Наконец, мы ввели отрывок из текста, написанного искусственным интеллектом, смешанного с человеческим содержанием. Удивительно, но GPTZero правильно определил все предложения, написанные ИИ. Но он отметил и несколько написанных человеком.
В целом, GPTZero хорошо распознает текст AI, но также дает ложноположительные результаты. Инструмент бесплатный и имеет API.
OpenAI имеет создал классификатор текста AI для противодействия собственной модели GPT. Хотя этот классификатор далек от абсолютной точности, он все же может идентифицировать текст AI. В отличие от других инструментов, классификатор OpenAI не дает оценок и не выделяет предложения, сгенерированные ИИ.
Вместо этого он сообщает вероятность того, что контент будет создан с помощью ИИ, с использованием пяти категорий от очень маловероятной до вероятной. Классификатор OpenAI смог распознать историю Хемингуэя и пометил ее как «маловероятно написанную ИИ».
Точно так же он правильно идентифицировал отрывок из чата ChatGPT и пометил его как «вероятно сгенерированный ИИ». Наконец, он пометил сочетание человеческого текста и текста ИИ как «неразборчивый», что является наиболее подходящим вариантом среди пяти используемых им ярлыков.
Content at Scale сам по себе является генератором текста AI, который фокусируется на создании длинного контента с помощью нескольких кликов. Он также имеет впечатляющий инструмент обнаружения ИИ.
Content at Scale AI Detector предоставляет оценки вероятности, закономерности и предсказуемости, а также общую оценку. Они выражаются в процентах. Чем выше процент, тем больше вероятность того, что текст был написан человеком. Инструмент также выделяет предложения, которые, по его мнению, написаны искусственным интеллектом.
В наших тестах он дал 96% баллов написанному человеком контенту, 22% тексту ChatGPT и 61% их комбинации. Говоря о конкретных предложениях, он почти идентифицировал все предложения, написанные ИИ. Но, как и GPTZero, он ошибочно пометил несколько предложений, написанных человеком, как сгенерированные ИИ.
Этот инструмент также бесплатен и дает такие же результаты, как и GPTZero.
Originality AI — популярный детектор текста с искусственным интеллектом, который утверждает, что точно обнаруживает текст, созданный GPT 3, GPT 3.5 и ChatGPT. Он дает процент вероятности того, что текст был сгенерирован людьми или искусственным интеллектом.
Оригинальность ИИ отметил, что текст, написанный человеком, с вероятностью 71% написан человеком, что не идеально. Но Originality AI точно определил ответ ChatGPT, пометив его как 100% AI. Когда Originality попросили проанализировать смесь человеческого текста и текста ИИ, она отметила, что на 94 % это человеческий текст.
Таким образом, хотя он и смог обнаружить содержимое GPT, его смешивание с человеческим текстом озадачило его. В отличие от большинства других инструментов, Originality AI является платным детектором. Тем не менее, он предоставляет несколько кредитов для пробной версии, если вы загружаете его расширение для Chrome.
Writefull стремится упростить академическое письмо. Для этого у него есть ряд инструментов искусственного интеллекта, в том числе детектор GPT. Инструмент является бесплатным для использования и шифрует данные для обеспечения конфиденциальности.
Writefull GPT Detector может идентифицировать контент, написанный GPT-3, а также ChatGPT. После анализа он предоставляет оценку, указывающую на вероятность того, что контент был написан ИИ.
В наших тестах Writefull правильно обнаружил написанный человеком текст, дав ему оценку 1% (т. е. вероятность того, что текст был создан ИИ, составляет 1%). Точно так же он дал 100% балла тексту ChatGPT. Однако, когда мы объединили контент, сгенерированный ИИ, с человеческим текстом, Writefull пометил его как «вероятность 1%, что это исходит от GPT-3 или ChatGPT».
Поэтому, хотя он и распознавал ИИ и человеческие тексты по отдельности, Writefull ошибся, когда мы смешали их. Инструмент предлагает интеграцию с Word и Overleaf, а также имеет API для GPT Detector.
У Hive Moderation есть инструмент не только для обнаружения текста AI, но и для обнаружения изображений, созданных AI.
Инструмент обнаружения текста точно проанализировал текст, написанный человеком, как «вероятно содержащий 0% текста AI». Точно так же текст, сгенерированный ИИ, был идентифицирован как таковой. Но, как и большинство других, он не смог точно определить комбинацию обоих текстов.
На его сайте вы можете бесплатно использовать демо-инструмент, даже не регистрируясь. Но вам придется связаться с ними для получения полного доступа. Точно так же детектор изображений может помочь вам точечные изображения, созданные инструментами ИИ например, DALL-E 2 или Midjourney.
Paraphrasingtool.ai имеет детектор контента AI с двумя вариантами: «Обнаружение Джарвисом» и «Обнаружение Вероникой». Джарвис выделяет предложения, потенциально сгенерированные ИИ, а Вероника назначает процент вероятности.
В нашем первом тесте Detect by Jarvis неправильно пометил несколько предложений как написанные ИИ, в то время как Detect by Veronica правильно показал, что контент на 100% написан человеком. Однако текст, написанный ChatGPT, был правильно обнаружен обоими.
Detect by Jarvis работал лучше, когда его просили проанализировать объединенный текст, выделяя большинство предложений AI. Но Вероника показала это как стопроцентное человеческое содержание. Бесплатный инструмент AI Content Detector от Paraphrasingtool.ai в целом дал неплохие результаты.
Copyleaks, один из самых популярные инструменты обнаружения плагиата, есть еще один инструмент для обнаружения ChatGPT, GPT-3 и других подобных языковых моделей. Что делает его выдающимся, так это то, что он может обнаруживать контент, написанный на других языках, таких как испанский и французский.
Инструмент смог правильно определить рассказ Эрнеста как написанный человеком с вероятностью около 85%. Точно так же он обнаружил текст AI с вероятностью 99,99%. Где он действительно ошибся, так это в сочетании ИИ и человеческого контента, поскольку он отметил, что с вероятностью 96% это человеческий текст.
AI Content Detector от Copyleaks имеет расширение для Chrome. Лучше всего то, что он предлагает интеграцию API и LMS.
Найдите текст, сгенерированный AI, одним щелчком мыши
Благодаря вышеупомянутым инструментам вы можете легко обнаружить текст, написанный AI. Однако они все еще далеки от полной точности. Просто изменив несколько предложений, можно обмануть эти детекторы. И более серьезная проблема с этими инструментами — ложные срабатывания.
Даже если вы не хотите полностью полагаться на эти детекторы, текст ИИ содержит несколько контрольных признаков, которые вы можете обнаружить, если обратите немного внимания.
