На полях гладкого ответа о реформе 1861 года я однажды написал: «Откуда взялся этот вывод?» Рука тянулась написать другое: «Это писала нейросеть?» Проверка работы на нейросеть легко превращается в спор об авторстве, хотя учителю нужно понять, что ученик знает и где ошибся. Ни процент из детектора, ни необычно ровный стиль не ответят на этот вопрос вместо разговора и сверки источника.
Покажу четыре соблазнительных вывода, которые я бы не стал делать по одной работе. В конце останется короткая процедура для проверки знаний. Её можно применить и тогда, когда правила класса разрешают ИИ, и тогда, когда для конкретного задания требуется самостоятельный текст.
Миф 1. Проверка работы на нейросеть даёт доказательство
Детектор выдаёт оценку по признакам текста. Историю черновика он не видит. Ему неизвестно, как ученик собирал материал, кому задавал вопросы и кто переписывал работу. Сам разработчик Turnitin предупреждает в руководстве к своему отчёту: система может ошибочно классифицировать человеческий текст, а её результат нельзя использовать как единственное основание для неблагоприятного решения. Cornell Center for Teaching Innovation тоже не считает такие отчёты доказательством авторства при разборе учебных нарушений.
Сигнал я не выбрасываю. Если в работе появились источники, которых нет, или даты не совпадают с документом, у меня есть предмет для проверки. Но он касается качества ответа. Прежде чем обсуждать способ написания, я отделяю ошибку в факте от догадки об авторе. Процент тут не ответ.
Я бы не произносил перед классом: «У тебя 90% ИИ», даже если такое число появилось на экране. Число звучит как приговор. У детекторов различаются методы и ограничения, а школьник в такой беседе уже защищается от обвинения вместо того, чтобы показать понимание темы. Обсудить допустимое применение нейросети в школе лучше до сдачи работы, когда правила ещё можно объяснить спокойно.
Миф 2. Необычный стиль выдаёт автора
Школьник может написать ровнее обычного после моей правки, помощи дома или нескольких собственных черновиков. И наоборот: текст с ошибками тоже может быть составлен с ИИ. Стиль меняется. Я раньше смотрел на длину предложений и был уверен, что вижу чужую руку. Потом пересмотрел подход. Вопрос «почему здесь другой стиль?» полезен как начало разговора, а не как итоговая оценка.