Региональная выдача: как проверить, что регион реально подставился

Сижу над этим второй день, свежий взгляд не помешает.

Ниже вводные, дальше сам вопрос.

Сравнивал с панелью вебмастера за тот же день, расхождение стабильное. Держу два набора адресов, один под съём, второй под проверки. На узких регионах данных мало, и это отдельная головная боль.

curl -s -x socks5://user:pass@10.0.0.5:1080 \
  "https://example.org/search?text=запрос&lr=213" | head -c 300

Ткните носом, если очевидное пропустил.

Тот же вывод, только я шёл к нему дольше.

Считать надо от темпа. Потоки это ваша сторона, площадка считает запросы с адреса за минуту. Берёте допустимый темп на адрес, делите на него общий темп прогона, получаете нижнюю границу по адресам.

Пишите, если понадобится уточнить.

Тут есть тонкость, о которой обычно забывают.

На 40 тысячах запросов за четыре часа общий темп около 167 запросов в минуту. При восьми запросах в минуту на адрес нужен 21 адрес, и это без запаса. Запас закладываю двойной, потому что часть адресов отваливается на ровном ходу.

curl -s -x socks5://user:pass@10.0.0.5:1080 \
  "https://example.org/search?text=запрос&lr=213" | head -c 300

Данные теряются равномерно или кусками?

Добавлю то, что обычно выясняется поздно.

Персонализация выдачи работает и без входа в аккаунт: учитывается регион, устройство и прошлые заходы с адреса. Свежий адрес даёт более чистую картину.

Съём для магазина на сотни тысяч страниц ведите по выборке. Полный охват тут не нужен: динамику показывает репрезентативная группа запросов.

Пишите состояние построчно.

Проверял на четырёх проектах, вывод один.

Регион проверяется просто: снимите одну и ту же выдачу с двух адресов и сравните блок с организациями. Если он одинаковый, регион не подставился.

Ночной прогон удобен тем, что данные лежат в таблице к началу рабочего дня. Тишина на площадке тут ни при чём. Это единственная его настоящая польза.

Отпишитесь, чем закончится, тема полезная.

С выводом соглашусь, с обоснованием нет.

Расхождение между сервисами объясняется устройством выборки: кто-то берёт первую страницу, кто-то склеивает несколько, кто-то чистит рекламные блоки. Сравнивать их напрямую бессмысленно.

Расхождение с панелью вебмастера почти всегда объясняется тремя вещами: разное время съёма, разная привязка к региону и разное устройство выборки. Панель усредняет за сутки, вы снимаете точку.

Будет результат, напишите сюда.

Согласен с предыдущим ответом, но с одной оговоркой.

Расхождение с панелью вебмастера почти всегда объясняется тремя вещами: разное время съёма, разная привязка к региону и разное устройство выборки. Панель усредняет за сутки, вы снимаете точку.

Замерьте и сравните, догадки тут не помогут.

Замерьте и сравните, догадки тут не помогут.

Держите запас, впритык не работает.

Проверял на четырёх проектах, вывод один.

Регион проверяется просто: снимите одну и ту же выдачу с двух адресов и сравните блок с организациями. Если он одинаковый, регион не подставился.

Глубину топ-100 берите только там, где она нужна. Топ-20 собирается втрое быстрее и закрывает большинство отчётов.

Это на всех площадках или на одной?

Сколько это длится и с какой частотой повторяется?

Пробовали на другой машине?

У меня это вскрылось только на сверке данных.

Расхождение с панелью вебмастера почти всегда объясняется тремя вещами: разное время съёма, разная привязка к региону и разное устройство выборки. Панель усредняет за сутки, вы снимаете точку.

Считать надо от темпа. Потоки это ваша сторона, площадка считает запросы с адреса за минуту. Берёте допустимый темп на адрес, делите на него общий темп прогона, получаете нижнюю границу по адресам.

Сохранил, пригодится в следующем проекте.

Уточню, иначе можно уйти не в ту сторону.

Снимайте с одного и того же набора адресов, если сравниваете динамику. Смена пула между съёмами добавляет разброс, который потом принимают за движение позиций.

Персонализация выдачи работает и без входа в аккаунт: учитывается регион, устройство и прошлые заходы с адреса. Свежий адрес даёт более чистую картину.