Проверка научной статьи на нейросеть: четыре следа
Проверка научной статьи на нейросеть перед подачей в журнал: что узнать об источниках, методе и раскрытии ИИ, если гладкий текст вызывает подозрение.
Андрей
Преподаватель, научный редактор
8 мин чтения
«Различие между группами было значимым». Фраза звучит как готовый вывод из исследования. Я положил её в учебный черновик о прорастании семян, а рядом оставил пустую графу: какой именно показатель сравнили и где результат расчёта? По гладкому языку можно заподозрить генератор. По пустой графе можно задать вопрос, на который автор обязан ответить независимо от того, кто набирал предложение. С этого я начинаю проверку научной статьи на нейросеть перед отправкой в журнал.
Черновик, семена и фраза здесь придуманы мной для упражнения; никаких реальных результатов опыта за ними нет. Но редакторская проблема вполне рабочая: одно и то же подозрение «текст похож на ИИ» смешивает происхождение слов с проверкой научного утверждения. Для рукописи важны оба вопроса, а доказательства для них разные.
Проверка научной статьи на нейросеть: четыре следа
Я делаю для собственного текста короткую карточку. В неё попадают только проверяемые места, а не общее впечатление от академического тона:
Исходные данные. Какой файл, журнал наблюдений или протокол поддерживает число и вывод? Для учебной фразы про «значимое различие» я не могу назвать такой файл. Значит, вывод пока не должен стоять в резюме.
Метод. Из описания понятно, что сравнивали, как собирали данные и каким способом получили показатель? Одного слова «значимый» недостаточно, чтобы читатель повторил расчёт или оценил его уместность.
Ссылки. Каждая ссылка в тексте ведёт к существующей работе, а приведённая рядом мысль действительно в ней есть? Запись «по данным обзора 2024 года» без названия и страницы не превращается в источник от того, что предложение выглядит научным.
История работы с ИИ. Каким инструментом пользовались и для чего: исправляли язык, строили рисунок, анализировали данные? Это лучше восстановить по записям автора, а затем сверить с правилами выбранного журнала.
У этих пунктов разные исходы. Отсутствующий показатель можно убрать до расчёта. Неполный метод — дописать по настоящему протоколу, не сочиняя задним числом. Непроверенную ссылку — найти и прочитать или удалить. Применение ИИ — описать в нужном месте. Ни один пункт не просит угадать происхождение текста по ритму предложений.
Место в учебной мини-рукописи · Что я должен открыть · Решение до подачи
«Различие было значимым» — Таблицу результатов и запись расчёта — Пока их нет, не оставлять вывод
«Методика стандартная» — Протокол: объекты, измерение, условия, обработка — Назвать реальные действия вместо ярлыка
«Как показано в обзоре 2024 года» — Полную библиографию и саму публикацию — Проверить точный тезис или снять ссылку
«Текст подготовлен с помощью ИИ» — Записи о конкретном инструменте и его роли — Описать область применения по правилам журнала
Таблица — мой учебный макет, не акт проверки настоящей статьи. Ценность у неё другая: я вижу, для какой фразы у меня ещё нет подтверждения. Обычная проверка на совпадения текста не даст мне пропущенный протокол, а процент «вероятности ИИ» не подставит правильную ссылку.
Я бы не заполнял графу «исходные данные» словами «таблица есть у коллеги». Нужна точная привязка: название файла, столбец, версия и решение о том, какие строки вошли в расчёт. Если в абзаце сказано «среднее значение выросло», нужно найти две сравниваемые величины и единицы измерения. Если автор поменял определение показателя между черновиками, итоговое предложение приходится проверять заново. В моём упражнении этих файлов нет, поэтому честная запись в карточке — «вывода пока нет», а не придуманное значение.
С источниками бывает более тихая ошибка. Библиографическая запись может существовать, но ссылка всё равно не подтверждать фразу рядом с ней. Я открываю саму работу и отделяю её результат от вводного обзора чужих исследований. Затем проверяю, нет ли в собственной фразе слов «всегда», «доказано» и «у всех», которых авторы источника не писали. Это не тест на ИИ-авторство. Это способ не отправить в журнал утверждение с чужим именем, но без чужого доказательства.
Что означает сигнал детектора
Вопрос «написала ли это нейросеть?» не исчезает. Я бы только не превращал один балл программы в обвинение автора. В исследовании Liang и соавторов 2023 года несколько тогдашних детекторов ошибочно отмечали человеческие английские тексты людей, для которых английский не родной. Это результат для тех инструментов и набора текстов, а не испытание каждого современного сервиса и тем более не готовая цифра ошибки для русской научной статьи.
Подозрение в рукописи я записал бы как вопрос, который можно проверить: «Где первичная запись для этого вывода?» или «Почему ссылка поддерживает именно это утверждение?». Автор может показать исходный анализ, историю исправлений и точную роль инструмента. Если ответа нет, это редакторская проблема даже при нулевом сигнале детектора. Если ответ есть, один сигнал не отменяет документы.
История версий тоже не волшебная справка об авторстве. В ней можно увидеть, как менялись формулировки и кто внёс правку, если редактор хранит такие сведения. Но открытый файл могли переслать, а текст могли набрать в другом месте. Я смотрю на историю как на один из следов работы, вместе с данными и пояснением автора. У меня нет основания объявить рукопись написанной ИИ только потому, что первая сохранённая версия выглядит аккуратно.
Здесь есть неприятный поворот. Самый ровный абзац моего учебного резюме выглядит подозрительно, но его настоящая слабость не в гладкости: я не оставил данных для вывода. Исправление начинается с таблицы результатов, а не с просьбы переписать текст более «человечно». Последняя просьба сделала бы происхождение слов ещё менее ясным и не создала бы пропавшие наблюдения.
Как сообщить о роли ИИ при подаче
Для медицинских журналов рекомендации ICMJE требуют раскрывать использование ИИ при подготовке работы: описать его в сопроводительном письме и, где применимо, в самой рукописи. Чатбот не становится соавтором; за точность, оригинальность, ссылки и итоговые материалы отвечает человек. Это конкретные рекомендации для сферы ICMJE, а не одинаковое правило оформления для любого журнала. Перед подачей я открыл бы раздел выбранного издания об ИИ и сохранил его требования рядом с файлом рукописи.
Мне помогла бы запись без тумана: «Инструмент X использован для языковой правки раздела обсуждения; сбор данных, анализ и проверка ссылок выполнены авторами». Но такую фразу можно писать только тогда, когда это соответствует реальной работе. Если инструмент строил изображение или помогал с анализом, его роль другая и замалчивать её за словами «редактирование текста» нельзя. ICMJE отдельно требует, чтобы авторы проверяли созданный ИИ материал и корректно указывали первоисточники.
Проверяющему тоже приходится соблюдать границу. Поданная рукопись и рецензия могут быть конфиденциальными. ICMJE предупреждает редакторов и рецензентов об опасности загрузки такой работы в ИИ-систему без обеспеченной конфиденциальности и разрешения. Я не отправляю чужой неопубликованный текст в открытый чат ради красивого списка замечаний. Для своей статьи сначала проверяю права на материалы и правила журнала.
Как использовать LibraChat для разрешённого фрагмента
Если мне нужна помощь с формулировкой вопросов, я могу взять собственный учебный фрагмент, вроде фразы о семенах, и предложить LibraChat текстовую задачу. Вот запрос для такой пробы, а не полученный вердикт сервиса:
Перед тобой вымышленное резюме исследования: «Мы сравнили два режима освещения при прорастании семян. Различие между группами было значимым. Методика стандартная». Не определяй, написано ли оно ИИ. Составь таблицу «дословная фраза — какой исходный документ нужен автору — какой вопрос задать до подачи». Не придумывай данные, название журнала, библиографию или результат расчёта.
Такой ответ может помочь составить список вопросов, но он не проверит то, чего в фрагменте нет. Данные, реальная публикация и журнал остаются за пределами чата. Я бы прошёл список сам:
открыл исходную таблицу и убрал выводы, для которых нет записи;
сопоставил каждую цитату с работой, на которую ссылаюсь;
уточнил метод по фактическому протоколу;
записал роли людей и инструментов так, как требует конкретное издание.
Если нужна сама схема разделов рукописи, есть отдельный материал про структуру научной статьи. Перед текстовой пробой проверь доступные возможности на странице тарифов. Обе ссылки не заменяют проверку источников и правил подачи.
Прямо сейчас возьми одно предложение из собственного разрешённого резюме, за которое готов отвечать перед редактором. Подчеркни число, ссылку или вывод и положи рядом документ, который его подтверждает. В моём учебном примере возле «значимого различия» пока лежит пустая клетка. Именно её нужно заполнить честным результатом либо убрать фразу до отправки статьи.
