Антиплагиат на нейросеть: что ответил чат и почему это не проверка
Антиплагиат на нейросеть: проверил абзац курсовой в чате. Почему вердикт «похоже на ИИ» ничего не доказывает и какой запрос готовит к защите.
Андрей
Преподаватель, научный редактор
6 мин чтения
Проверить работу на антиплагиат через нейросеть кажется простым ходом. Желание понятное: перед сдачей хочется знать, не будет ли сюрпризов. Вставил текст в чат, спросил, есть ли там заимствования и не писал ли его ИИ. Бесплатно и сразу.
Я проверил этот ход на одном абзаце в духе студенческой курсовой по педагогике: три предложения про клиповое мышление школьников и одна эффектная цифра. Как научный редактор, я заранее знал, к чему придрался бы сам.
Нейросеть придралась к другому. И очень уверенно.
Вердикт пришёл первой же строкой
Запрос был самым обычным, таким его и пишут студенты перед сдачей:
Проверь абзац из моей курсовой на антиплагиат и скажи, похоже ли, что его написала нейросеть:
Ответ начался с приговора.
Абзац выглядит так, будто его написала нейросеть.
Дальше шли доказательства. Главное из них звучало так.
Фраза «По данным исследований» — классический нейросетевой маркер.
Тут я бы поспорил. «По данным исследований» без ссылки пишут и люди, это обычная ошибка курсовых. Гладкий слог тоже не подпись: старательный студент пишет гладко, а учебник ещё глаже. Признаки стиля говорят о стиле, авторство они не доказывают.
Обратный ход тоже не работает. Скажи ответ «написано человеком», я бы не поверил и этому. Такой вердикт не проверишь ни в одну сторону.
Тогда что из этого ответа вообще можно считать проверкой?
Процент в чате — это догадка
Следом в ответе стояли цифры: какую уникальность «скорее всего» покажут системы проверки. Я их сюда не переношу. Процент считает система, к которой подключён вуз, по своей базе текстов. Угадать его со стороны нельзя, и уверенный тон тут ничего не добавляет.
Сам отчёт системы, кстати, устроен честнее, чем кажется студентам. В нём видно не только число, но и куски, совпавшие с источниками. Цитата в кавычках со ссылкой — законное заимствование. Без кавычек — уже нет. Вдумчивый проверяющий смотрит именно на это, а не на одну цифру сверху.
С детекторами ИИ так же. Такой вывод всегда вероятность, посчитанная по стилю текста. Если система отметила твой собственный текст, спорить процентами бесполезно. Помогают черновики, заметки, найденные источники и умение пересказать любой абзац своими словами.
Потом LibraChat предложил переписать абзац так, чтобы он выглядел написанным человеком. Вот кусок нового варианта.
Согласно ряду исследований, устойчивое внимание у подростков в среднем не превышает 8–12 секунд, после чего происходит естественное переключение.
Здесь я остановился. Чуть выше в том же ответе цифру про восемь секунд назвали мифом. В новой версии она осталась, только расплылась в диапазон. Ссылки по-прежнему нет.
У такого переписывания есть и вторая беда. Если текст твой, после правки он перестаёт быть твоим. Слова чужие, а отвечать за них на защите тебе.
Абзац стал звучать иначе, а ошибка, которую заметит любой рецензент, никуда не делась. Это и есть главный изъян идеи «прогнать через нейросеть»: она чинит впечатление, а не содержание.
Но одна полезная находка в этом ответе всё-таки была.
Слабое место нейросеть нашла верно
Цифру про восемь секунд она заметила сама. Это и есть настоящая беда абзаца: не стиль, а утверждение без источника. Я переписал запрос и убрал из него вопрос про ИИ совсем:
Я студент педагогического вуза, это абзац из моей курсовой: «Клиповое мышление характерно для современных школьников: они хуже удерживают внимание на длинных текстах и предпочитают короткие видео. По данным исследований, средняя продолжительность концентрации внимания у подростков сократилась до восьми секунд. Поэтому учителю важно дробить материал на короткие блоки и чаще менять виды деятельности.» Покажи, какие утверждения здесь требуют ссылки на источник, и задай три вопроса, которые мне могут задать по этому абзацу на защите.
Абзац в кавычках замени своим, вуз и предмет тоже. Второй ответ разобрал все три предложения по очереди. Про цифру он написал так:
Самое критичное место. Цифра «восемь секунд» (часто приписывается Microsoft, 2015) очень популярна в СМИ, но научная ценность спорная.
Это я засчитал бы без оговорок. Дальше работа уже студента: найти первоисточник по названию и году, а не по пересказу в новостях. Не нашёлся — цифру честнее убрать, чем оставить её с «рядом исследований». Ответ отделил утверждения, где ссылка обязательна, от тех, где она желательна, и объяснил разницу. Так рукопись и размечают при научном редактировании.
Ещё одну деталь из этого ответа легко пропустить:
Первое и второе утверждение — обязательно со ссылками. Третье — желательно.
Третье предложение абзаца — вывод для учителя. Кажется, что свой вывод ссылки не требует. Требует, если он подан как научно обоснованный. Иначе это мнение автора, и так его и надо назвать в тексте. Найденные источники потом остаётся оформить, с этим помогает список литературы с нейросетью.
Одно место я бы вернул. Автором понятия «клиповое мышление» ответ называет «Марка Принса». Похоже, это искажённый Марк Пренски, а у него другое понятие, «цифровые аборигены». Фамилии из ответа нейросети проверяются по каталогу библиотеки, а не на веру.
Оставался вопрос: что из этого пригодится на самой защите?
Вопросы с защиты полезнее любого процента
Первый вопрос из ответа я задал бы студенту и сам:
Откуда взята цифра «восемь секунд»? Какое именно исследование это подтверждает, кто автор, в каком году проводилось и на какой выборке?
На него не ответишь, если цифра попала в работу из чужого пересказа. А попадает она обычно так. Второй вопрос глубже:
Можно ли напрямую переносить понятие «клиповое мышление» из медиа-культуры в педагогический контекст школьников?
Он про логику работы, а не про оформление. Студент, который готов на него ответить, защищает работу, а не процент.
Третий вопрос самый практичный.
Какие конкретные приёмы дробления материала и смены видов деятельности вы предлагаете для урока?
В абзаце этой конкретики нет. Её стоит дописать в работу заранее, а не придумывать у доски. Как вести всю курсовую с нейросетью так, чтобы на такие вопросы находились ответы, разобрано отдельно.
Что я теперь спросил бы вместо «это писал ИИ?»
Чего я на самом деле хотел от первого запроса? Узнать, не придерутся ли. Только придираются не к гладкости, а к тому, что автор не может подтвердить и объяснить.
Поэтому вопрос «похоже ли на ИИ» я бы больше не задавал: на него приходит уверенный ответ без доказательств. Вопрос «где здесь нужен источник и о чём меня спросят» даёт работу, зато честную. Ответ на него читается как список дел перед сдачей: найти первоисточник, решить судьбу вывода, дописать конкретику, которой не хватает.
Возьми из своей работы абзац с цифрой или чужой мыслью и отправь его со вторым запросом в LibraChat. Если работа целиком лежит в Word или PDF, файл можно прикрепить к сообщению.
Перед тем как снова вставлять текст в чат с вопросом про антиплагиат, спроси себя: на какой из трёх вопросов защиты по своему абзацу ты сегодня не ответишь?
