Краулер Meta пришёл 16 547 раз и не привёл никого Снял два отчёта по своим сайтам и положил рядом. Первый — кто забирает страницы. Второй — кто присылает людей. Логи nginx, 64 сайта, 31 октября — 5 ноября meta-externalagent — 16 547 запросов, 7 сайтов ClaudeBot — 1 401, 12 сайтов PerplexityBot — 1 078, 7 сайтов Applebot — 984, 15 сайтов OAI-SearchBot — 576, 22 сайта Amazonbot — 555, 11 сайтов Bytespider — 453, 17 сайтов Claude-SearchBot — 358, 8 сайтов GPTBot — 244, 13 сайтов Claude-User — 136, 8 сайтов ChatGPT-User — 131, 7 сайтов DuckAssistBot — 84, 6 сайтов CCBot — 67, 10 сайтов Всего 22 614 запросов за шесть суток, почти три четверти из них сделала Meta. Ловушка в самом подсчёте. Панель хостинга пишет каждый запрос в два файла: сайт-ssl.access.log и сайт-backend.access.log. Если грепнуть всё разом, любой агент удвоится — мой первый прогон дал Meta 32 950. Считайте по одному семейству логов. Трёх агентов не нашёл ни разу: MistralAI-User, YandexAdditional и Google-Extended. Последний и не мог появиться: это директива для robots.txt, а не бот. Если он у вас в отчёте стоит источником трафика, отчёт писали не по логам. А вот Bytespider, которого принято считать ушедшим, ходит исправно. Искать его по слову «bot» бесполезно: он представляется поддельным мобильным браузером, имя стоит в самом хвосте строки. Метрика, переходы по хосту, 43 счётчика, январь — ноябрь chatgpt.com — 518 визитов perplexity.ai — 483 gemini.google.com — 114 claude.ai — 55 copilot.microsoft.com — 4 1 174 визита за десять месяцев на десяти сайтах из сорока трёх, 85 процентов дали ChatGPT и Perplexity. DeepSeek не прислал никого. Meta — тоже. Окна у таблиц разные, делить одно на другое нельзя. Порядок виден и так: боты ходят тысячами, люди приходят десятками. Дальше цифра, которую не ставят на слайды. На самом крупном проекте ассистенты дали 507 визитов против 608 831 из поиска — 0,083 процента. На втором: 640 против 256 458, это 0,250 процента. Этот канал я сам весь год и строил. Как источник сессий он пока не окупается. Работает он иначе: ассистент называет два-три имени, и если вы среди них, человек придёт позже брендовым запросом. Отследить такую передачу честно я не умею и не выдаю переходы из ассистентов за весь эффект. Что проверить у себя за вечер: грепнуть логи по GPTBot, OAI-SearchBot, PerplexityBot и ClaudeBot — по одному семейству файлов; собрать в аналитике отчёт по переходам с разбивкой по хосту; открыть три самые денежные страницы с выключенным JavaScript и посмотреть, что исчезло. Разбор целиком, с методикой и обеими таблицами: https://divitio.ru/blog/ii-kraulery-i-trafik-iz-neyrosetey-zamery-po-31-saytu/