позиции · сбор данных · отчёты
реклама IPrazon Network: приватные прокси IPv4 и SOCKS5, пул 12 000 адресов, безлимитный трафик, бесплатный тест до 2 часов

Разделы · Парсеры и сбор данных

Zenno и прокси: адреса подставляются, но трафик идёт мимо

4 ответов · 1 544 просмотров
знак участника Захаров Л.
Захаров Л.Участник
  • сообщений 1 310
  • на форуме 8 мес
Парсеры и сбор данных

Прогон большой, машина сильная, результат всё равно странный.

Ниже вводные, дальше сам вопрос.

Проверял на двух версиях программы, поведение одинаковое. Ставил 200 потоков, потом снижал до 80, разница по времени невелика. Логи ведутся, в них видно, что запросы уходят, а ответы приходят короткие.

Жду любых мыслей, даже сырых.

знак участника Барсов
БарсовУчастник
  • сообщений 1 420
  • на форуме 8 мес
полезный ответ
Захаров Л. писал: Zenno и прокси: адреса подставляются, но тра…

Сохраняйте сырое, пересчитать успеете.

знак участника Валерия Гонт
Валерия ГонтНовичок
  • сообщений 268
  • на форуме 1 года

Верно по сути, дальше нюансы.

Разметку разбирайте по устойчивым признакам. Классы оформления для этого не годятся. Классы меняют при каждом обновлении, смысловые атрибуты живут дольше.

знак участника Кравчук
КравчукЗнаток
  • сообщений 1 840
  • на форуме 4 мес
полезный ответ

Пул под такие объёмы держу постоянный. Беру приватные прокси IPv4 и SOCKS5, потому что там разброс по подсетям нормальный, а это на съёме важнее скорости.

знак участника Дёмин С.
Дёмин С.Участник
  • сообщений 1 190
  • на форуме 5 мес

Это следствие, а причина лежит глубже.

Потери записей чаще всего идут из-за коротких ответов, которые программа считает успешными. Заведите проверку на минимальный размер ответа и на наличие обязательного куска разметки.

Ответить в темеПодписаться

Рядом в разделе

Сеометр, форум специалистов по поиску и аналитике ПравилаУчастникиО форумеЛента 2026