Маркетинговая компания Graphite провела масштабное исследование того, как пишут современные ИИ-модели, и нашла около 13 000 слов и фраз, которые выдают машинный текст. «Маркером» считалось выражение, которое встречается в текстах ИИ как минимум вдвое чаще, чем в человеческих. Gizmodo справедливо советует относиться к результатам маркетинговой компании с долей скепсиса, но выводы любопытные.

Как проводили исследование

Graphite взяла 10 000 статей, опубликованных до выхода ChatGPT, — это гарантированно человеческие тексты. Затем разные ИИ-модели переписывали эти статьи по их кратким пересказам, чтобы исключить влияние исходника. Получились пары «человек — модель» на одни и те же темы, которые сравнивали по частоте слов, фраз и типов предложений.

Главные «маркеры» Claude Opus 5.5

  • «this matters» («это важно») — в 116 раз чаще, чем у людей;
  • «why … matters» («почему … важно») — в 92 раза чаще;
  • «looking ahead the» («заглядывая вперёд») — в 40 раз чаще;
  • слово «dependable» («надёжный») — в 23–26 раз чаще;
  • конструкция «это больше, чем X, это Y» — модель отказалась от «это не X, а Y», но заменила её похожей.

Маркеры моделей OpenAI

У флагманской модели OpenAI Astra свои привычки. Например, фраза «does not establish» («не доказывает») встречается у неё в 275 раз чаще, чем у Claude. В целом Astra чаще делает оговорки, а Opus 5.5 чаще использует превосходные степени.

Главный вывод: Claude становится «человечнее»

Самое интересное — тренд. «Оказалось, что модели Claude со временем приближаются к человеческому распределению слов. А у GPT-моделей — удаляются от него», — сказал TechCrunch главный специалист Graphite по ИИ Грег Друк. Opus 5.5 использует длинные тире на 99% реже, чем Opus 5, — похоже, модель исправляет или даже «перекорректирует» старые признаки. Но это игра в «прихлопни крота»: стоит убрать один маркер, появляются другие.

Что это значит для русскоязычных текстов

Исследование касается английского языка, но принцип универсален: у каждой модели есть любимые слова и обороты. В русских ИИ-текстах часто встречаются шаблонные вводные («Важно отметить», «В современном мире»), одинаковая длина предложений, обилие списков и итоговых фраз. Но надёжно отличить ИИ по отдельным словам уже нельзя, а детекторы ошибаются. Подробнее о распознавании — в нашем материале о признаках ИИ-контента.

Источники: TechCrunch, Gizmodo.