Активность краулеров OpenAI утроилась после запуска GPT-5
Резкий рост активности после GPT-5
Согласно новому исследованию от Botify и эксперта Криса Лонга, автоматизированная активность краулеров OpenAI значительно возросла после запуска GPT-5. Анализ около 7 миллиардов событий от ботов OpenAI показал впечатляющие изменения в паттернах сканирования веб-сайтов. OAI-SearchBot, отвечающий за поиск контента для веб-запросов ChatGPT, зафиксировал увеличение активности в 3,5 раза, что составляет примерно 2,2 миллиарда дополнительных событий. GPTBot, собирающий данные для обучения, показал рост в 2,9 раза с 1,8 миллиарда новых событий. Интересно, что ChatGPT-User продемонстрировал противоположную тенденцию с падением на 28%. Эксперты предполагают, что OpenAI стала больше полагаться на сохраненные ресурсы, снижая потребность в реальном времени получения страниц. Такой подход может указывать на оптимизацию работы AI Content Aggregator систем.
Изменение баланса между поиском и обучением
До запуска GPT-5 соотношение между поисковыми и обучающими ботами составляло примерно 0,95 к 1. После обновления это соотношение изменилось до 1,14, показывая преобладание поисковой активности. Такая тенденция согласуется с наблюдениями экспертов о том, что GPT-5 больше опирается на живой поиск, чем на обученную память. Различные отрасли показали разную динамику роста: здравоохранение зафиксировало увеличение активности OAI-SearchBot на 740%, медиа и издательство – на 702%, а туризм показал наименьший рост в 30%. Эти данные указывают на то, что OpenAI направляет разные типы запросов по-разному: новостные запросы активируют живой поиск, а медицинские и продуктовые запросы полагаются на обученные знания. Такая дифференциация особенно важна для Auto Backlinks Builder технологий, которые должны учитывать специфику различных типов контента.
Сравнение с активностью Google и будущие перспективы
Несмотря на впечатляющий рост, активность краулеров OpenAI остается значительно меньше Google. В последнем 30-дневном окне Googlebot зарегистрировал 18,2 миллиарда событий против 887 миллионов от всех краулеров OpenAI, что составляет около 4% от объема Google. Год назад этот показатель был всего 1,38%, что демонстрирует быстрое сокращение разрыва. По сравнению с Bing, активность OpenAI составляет около 14% от объема Bingbot. Эти изменения имеют важные последствия для веб-мастеров и SEO-специалистов. Сайты, которые блокируют только GPTBot, не защищены от OAI-SearchBot, который теперь генерирует больше событий. Рост активности ИИ-краулеров создает новые возможности для AI Post Images Generator и других инструментов оптимизации контента. Понимание этих тенденций становится критически важным для разработки эффективных стратегий управления контентом в эпоху ИИ.
Source: OpenAI Crawl Activity Tripled Since GPT-5, Data Shows
