Самое подозрительное место в аккуратной работе иногда состоит из одного слова: «поэтому». До него перечислены факты, после него стоит вывод, которого эти факты ещё не подтверждают. Проверка документа на нейросеть не объяснит за автора этот переход. Мне как преподавателю полезнее сначала найти конкретный вопрос к рассуждению, а затем отдельно разбираться, как текст появился и какие инструменты при этом использовались.
Раньше я тоже задерживался на слишком гладких фразах. Собирал их на полях, словно узнаваемый оборот мог заменить сведения об истории работы. Потом попросил объяснить совершенно обычный абзац о дворовой площадке. Сложность оказалась в связи между двумя числами. Стиль был ни при чём.
Миф: проверка документа на нейросеть устанавливает автора
Начну с того, что показывает инструмент. В его описании нужно найти определение результата: это может быть категория, оценка классификатора или доля отмеченного текста. Сам вид процента не превращает показатель в вероятность того, что конкретный человек использовал чат. Без определения числа я не понимаю, какое утверждение вообще предлагается проверить.
Я бы уточнил и состав отправленного материала. Инструмент получил весь документ, только основной текст или отдельный абзац? Попали ли туда цитаты и стандартная формулировка задания? Результаты относятся к обработанному содержимому в определённых условиях. Не к невидимой полной истории автора.
Если показатель получен на коротком русском фрагменте с цитатами, а описание инструмента предлагает оценивать связный английский текст определённого объёма, сначала нужно выяснить, применим ли вообще результат к этой работе.
Есть показательный исторический факт: 20 июля 2023 года OpenAI прекратила предоставлять свой текстовый классификатор из-за недостаточной точности. В его описании компания предупреждала, что он не должен быть основным основанием для решения. Это история одного инструмента. Она не позволяет выставить одинаковую оценку всем сегодняшним сервисам, зато напоминает прочитать ограничения перед выводом.
Исследование Liang и соавторов, опубликованное в 2023 году, обнаружило ошибки нескольких детекторов на англоязычных текстах людей, для которых английский не родной. Я не переношу этот результат автоматически на любой русский документ. Мне он важен как напоминание: язык и набор проверяемых текстов влияют на то, что именно удалось установить исследователям.