Time предоставляет ИИ специальную версию сайта с рекламой и без графики

Издание Time запустило специальную версию своего сайта, предназначенную для работы с нейросетями. В отличие от стандартных HTML-страниц, некоторые ИИ-сервисы теперь получают упрощенные материалы в формате Markdown, которые содержат встроенные рекламные блоки.

Разработчик с сайта Vroni.com заметил различия в ответах сервера Time в зависимости от используемого User-Agent. При запросах от популярных браузеров, таких как Chrome и Safari, сервер возвращает стандартные HTML-страницы объемом около 303 Кбайт. В то же время, запросы от ИИ-ботов, таких как ClaudeBot и PerplexityBot, приводят к выдаче упрощенной версии размером около 13 Кбайт, лишенной оформления, изображений и скриптов, что упрощает обработку ИИ.

Анализ упрощенной версии сайта показал, что она создается с использованием технологий рекламной платформы Mobian. Каждому запросу присваивается уникальный идентификатор, а заголовки ответа содержат параметры для подсчета токенов. Например, заголовок cache-control: no-store предотвращает кэширование, требуя повторного обращения к серверу, в то время как параметр x-mobian-tokens указывает на то, что монетизация происходит не за счет просмотров, а за счет использованных токенов.

Содержимое Markdown-версии также отличается от стандартной версии. Например, в ней можно найти спонсорский раздел Ally Bank с вопросами и ответами, который не отображается в обычной HTML-версии, где аналогичная информация представлена от организации Project Management Institute (PMI). Все подобные материалы отмечены как спонсорские и доступны только для ИИ-ботов.

Time уже зафиксировало, что в некоторые дни количество обращений ИИ-ботов превышает количество посещений обычными пользователями. При этом поисковые роботы, такие как Google, продолжают получать стандартные HTML-страницы, в то время как специализированные ИИ-боты обслуживаются по отдельному алгоритму.