Топ-100 по Google собирается втрое дольше, чем по Яндексу

Задача обычная, а вопрос упирается в цифры, которые каждый называет свои.

Сравнивал с панелью вебмастера за тот же день, расхождение стабильное. Снимаю 200 проектов ежедневно, в среднем по 600 запросов на проект. Держу 60 адресов, потоков ставлю 120, глубина топ-50.

Как считаете вы? Интересует порядок, а не общие слова.

Тут легко перепутать два разных момента.

Держите время съёма постоянным. Прогон в семь утра и прогон в час дня дают разные картины, а разговор с заказчиком идёт про динамику.

Логи в помощь, без них это гадание.

На другой машине воспроизводится?

Полгода назад ловил то же самое.

Глубину топ-100 берите только там, где она нужна. Топ-20 собирается втрое быстрее и закрывает большинство отчётов.

Тема нужная, подписался.

Это на всех площадках или на одной?

Уточните пару моментов, иначе гадаем.

Проверял это на своей задаче, вывод такой же.

Регион проверяется просто: снимите одну и ту же выдачу с двух адресов и сравните блок с организациями. Если он одинаковый, регион не подставился.

На 40 тысячах запросов за четыре часа общий темп около 167 запросов в минуту. При восьми запросах в минуту на адрес нужен 21 адрес, и это без запаса. Запас закладываю двойной, потому что часть адресов отваливается на ровном ходу.

Если поможет, напишите здесь же, пригодится следующим.

У меня картина совпадает почти полностью.

Считать надо от темпа, а не от числа потоков. Потоки это ваша сторона, а площадка считает запросы с адреса за минуту. Берёте допустимый темп на адрес, делите на него общий темп прогона, получаете нижнюю границу по адресам.

Расхождение с панелью вебмастера почти всегда объясняется тремя вещами: разное время съёма, разная привязка к региону и разное устройство выборки. Панель усредняет за сутки, вы снимаете точку.

Отпишитесь, чем закончится, тема полезная.

Почти так, но одна деталь меняет вывод.

Позиции по коммерческим запросам живут своей жизнью в течение дня. Если снимать утром и вечером, разница в десять пунктов норма, и это не сбой.

Уменьшите потоки вдвое и замерьте заново.

Начинал с того же, потом переделал.

Глубину топ-100 берите только там, где она нужна. Топ-20 собирается втрое быстрее и закрывает большинство отчётов.

Полгода назад ловил то же самое.

Глубину топ-100 берите только там, где она нужна. Топ-20 собирается втрое быстрее и закрывает большинство отчётов.

Подтверждаю, у нас было ровно то же самое.

Считать надо от темпа, а не от числа потоков. Потоки это ваша сторона, а площадка считает запросы с адреса за минуту. Берёте допустимый темп на адрес, делите на него общий темп прогона, получаете нижнюю границу по адресам.

Глубину топ-100 берите только там, где она нужна. Топ-20 собирается втрое быстрее и закрывает большинство отчётов.

Тут ничего нового не скажу, только подтвержу.

Глубину топ-100 берите только там, где она нужна. Топ-20 собирается втрое быстрее и закрывает большинство отчётов.

На 40 тысячах запросов за четыре часа общий темп около 167 запросов в минуту. При восьми запросах в минуту на адрес нужен 21 адрес, и это без запаса. Запас закладываю двойной, потому что часть адресов отваливается на ровном ходу.

Смотрите подсети, а не только число адресов.

Поправлю: дело не в объёме, а в темпе.

Позиции по коммерческим запросам живут своей жизнью в течение дня. Если снимать утром и вечером, разница в десять пунктов норма, и это не сбой.

Тема нужная, подписался.