Wordstat отдаёт капчу после 300 запросов

Ядро большое, времени мало, хочется понять правильный порядок.

Расскажу по порядку.

Проверял на выборке в тысячу фраз, там всё гладко. Частотности снимаю по двум регионам, дальше сравниваю.

$ kc-cli --masks masks.txt --depth 3 --threads 40
собрано фраз: 214 880
отказов: 1 204

Хочется услышать цифры от практиков.

Ловил это дважды, оба раза по разным причинам.

Чистку делаю в два прохода: сначала стоп-слова и явный мусор, потом ручной просмотр верхушки по частотности. Низ списка руками не трогаю.

Внутренний поиск конкурента даёт живые формулировки, которых нет в подсказках. Источник недооценённый.

Считаю так же, и цифры у меня близкие.

По узким регионам данных мало всегда. Смотрите на порядок величины и на наличие спроса как такового. Точные числа там всё равно недостоверны.

Замерьте и сравните, догадки тут не помогут.

На другой машине воспроизводится?

Проверяли на маленькой выборке?

Так и есть, проходил через это в прошлом году.

Разделение коммерческих и информационных запросов надёжнее делать по выдаче. Слова-маркеры дают слишком много ошибок.

Наступал на это в прошлом сезоне.

Точная частотность в кавычках собирается медленнее обычной, потому что это отдельный запрос. Закладывайте на неё втрое больше времени.

$ kc-cli --masks masks.txt --depth 3 --threads 40
собрано фраз: 214 880
отказов: 1 204

Хороший вопрос, редко разбирают.

Добавлю то, что обычно выясняется поздно.

Пустые ответы при живых адресах почти всегда означают, что площадка отдаёт заглушку. Проверяйте размер ответа.

Приводите фразы к общему виду до сравнения, иначе дубли расползаются по всему ядру и всплывают на кластеризации.

На маленьких объёмах верно, на больших уже нет.

Внутренний поиск конкурента даёт живые формулировки, которых нет в подсказках. Источник недооценённый.

Пустые ответы при живых адресах почти всегда означают, что площадка отдаёт заглушку. Проверяйте размер ответа.

Пусть висит, такие вопросы всплывают постоянно.

Тут легко перепутать два разных момента.

Приводите фразы к общему виду до сравнения, иначе дубли расползаются по всему ядру и всплывают на кластеризации.

Не гоните с первого дня, дайте себе запас.

Есть возможность повторить прогон и сравнить?

Так и работает, проверено не один раз.

Пустые ответы при живых адресах почти всегда означают, что площадка отдаёт заглушку. Проверяйте размер ответа.

$ kc-cli --masks masks.txt --depth 3 --threads 40
собрано фраз: 214 880
отказов: 1 204

Был случай, когда всё сошлось только на третий день разбора.

Чистку делаю в два прохода: сначала стоп-слова и явный мусор, потом ручной просмотр верхушки по частотности. Низ списка руками не трогаю.

Осторожнее с этим выводом, он верен не всегда.

По узким регионам данных мало всегда. Смотрите на порядок величины и на наличие спроса как такового. Точные числа там всё равно недостоверны.

Маски проверяйте до запуска. Одна кривая маска даёт десятки тысяч мусорных фраз и съедает ночь.