Вторник, 17 ноября 2026

Telegram-канал Мои подписки

Срочно

  1. Главная
  2. Наука

Детектор нашёл следы ИИ в 21% рецензий на конференцию ICLR 2026

Компания Pangram Labs прогнала через свои модели около 19 тысяч статей и более 70 тысяч рецензий, поданных на International Conference on Learning Representations. Каждую пятую рецензию детектор счёл полностью сгенерированной.

Детектор нашёл следы ИИ в 21% рецензий на конференцию ICLR 2026
Фото: StockSnap / Pixabay

Поводом для проверки стала символическая награда в 50 долларов, которую в ноябре 2025 года предложил исследователь Университета Карнеги — Меллона Грэм Нойбиг. Он готов был заплатить тому, кто прогонит через детектор ИИ научные работы и отзывы, поданные на ICLR 2026. Исследователи жаловались на пространные, малосодержательные замечания, на просьбы о необычных для конкретной области экспериментах и на ссылки на несуществующие работы.

На призыв откликнулась Pangram Labs. С платформы OpenReview она собрала около 19 тысяч статей и свыше 70 тысяч рецензий. К отзывам применили технологию EditLens, представленную 3 октября 2025 года и встроенную в коммерческий детектор только в декабре (arXiv:2510.03154). Она отличает человеческий текст от отредактированного ИИ и от полностью сгенерированного.

По оценке Pangram, 15 899 рецензий, то есть 21%, написаны машиной целиком. Ещё более половины содержали следы ИИ — от лёгкой правки до полной генерации. На следующий день после публикации поста в блоге компании организаторы ICLR 2026 объявили об усилении проверки статей и отзывов.

Рецензенты ICLR — это преподаватели, аспиранты и сотрудники лабораторий, которые обычно работают над отзывами без оплаты.

Похожую картину фиксировали и раньше. На ICML 2024 авторы работы (arXiv:2403.07183) сравнили рецензии крупных конференций с отзывами времён до появления ChatGPT. Доля предложений, заметно переработанных языковыми моделями, в отзывах ICLR выросла с 1,6% до 10,6% в 2024 году. Для NeurIPS — с 1,9% в 2022-м до 9,1% в 2023-м, для CoRL — с 2,4% до 6,5%. Максимум, 16,9%, пришёлся на EMNLP 2023, но данных до ChatGPT по этой конференции не было.

В журналах Nature Portfolio такого всплеска не нашли: там изучили более 25 тысяч рецензий из 15 журналов за 2019–2023 годы. В отзывах ICLR 2024 прилагательные commendable, meticulous и intricate встречались в 9,8, 34,7 и 11,2 раза чаще, чем в прежние годы. Чем ниже рецензент ставил свою уверенность в выводах и чем меньше участвовал в обсуждении, тем больше в его тексте было машинных признаков.

Источник: Хабр

Читайте также

{# одна на страницу, открывается любой кнопкой [data-subscribe-open data-story-id data-story-title]; data-story-id — «42» (сюжет) или «p15» (обещания человека); data-subscribe-heading/-intro/-icon меняют надписи окна #}