Замена тире и кавычек меняет вердикт ИИ-детекторов
Обычная замена длинных тире на дефисы или ё на е может превратить текст из сгенерированного в полностью человеческий. Исследование показывает, что типографика сильно влияет на точность работы систем проверки авторства.
Детекторы могут принимать специфическое оформление текста за признаки работы нейросети. В одном из экспериментов при использовании текста объёмом 150 слов замена всего четырёх длинных тире на дефисы изменила оценку DuMeet со 100% ИИ до 0%. Похожий эффект наблюдается и с другими символами.
Использование буквы «ё» вместо «е» или кавычек-елочек вместо лапок также меняет результат. Техподдержка DuMeet подтвердила, что компания сталкивалась с ситуациями, когда длинное тире влияет на вердикт, но публичных исследований на эту тему не было.
Проблема затрагивает и вузовские системы проверки. При тестировании студенческих работ использование типографики (замена 33 букв «ё» на «е», 54 кавычек-елочек и четырёх тире) радикально изменило показатели.
Для DuMeet оценка упала с 70,12% до 28,17%, а Антиплагиат изменил вердикт с 63,86% до 0%. Это происходит потому, что системы могут считать использование стандартных типографических знаков признаком человеческого письма, а их отсутствие, маркером ИИ.
Что поменялось
Изменение типографики (тире, кавычек, буквы ё) может кардинально изменить процентное соотношение ИИ-генерации в отчётах детекторов при неизменном содержании текста.
Текст подготовила языковая модель по материалам источников.
