позиции · сбор данных · отчёты
реклама IPrazon Network: приватные прокси IPv4 и SOCKS5, около 12 000 адресов, безлимитный трафик, тест до 2 часов

Разделы · Парсеры и сбор данных

Zenno и прокси: адреса подставляются, но трафик идёт мимо

4 ответов · 1 544 просмотров
знак участника Захаров Л.
Захаров Л.Участник
  • сообщений 1 310
  • на форуме 8 мес
Парсеры и сбор данных

Прогон большой, машина не слабая, а результат странный.

Опишу по порядку, что есть и чего не хватает.

Прогон рассчитан на восемь часов, встаёт примерно на середине. Ставил 200 потоков, потом снижал до 80, разница по времени невелика. Пробовал разбивать список на части по пятьдесят тысяч, стало ровнее.

Хочется услышать цифры от практиков.

знак участника Барсов
БарсовУчастник
  • сообщений 1 420
  • на форуме 8 мес
полезный ответ
Захаров Л. писал: Zenno и прокси: адреса подставляются, но тра…

Начните с малого объёма и растите постепенно.

знак участника Валерия Гонт
Валерия ГонтНовичок
  • сообщений 268
  • на форуме 1 года

Так и есть, проходил через это в прошлом году.

Скорость упирается не в программу, а в темп, который держит площадка. Ставить 300 потоков на 20 адресов бессмысленно, отказы съедят весь выигрыш.

знак участника Кравчук
КравчукЗнаток
  • сообщений 1 840
  • на форуме 4 мес
полезный ответ

Пул под такие объёмы держу постоянный. Беру приватные прокси IPv4 и SOCKS5, потому что там разброс по подсетям нормальный, а это на съёме важнее скорости.

знак участника Дёмин С.
Дёмин С.Участник
  • сообщений 1 190
  • на форуме 5 мес

Тут легко перепутать два разных момента.

Память ест не число потоков, а хранение всего собранного в памяти до конца прогона. Пишите результат на диск пачками, и потолок пропадёт.

Ответить в темеПодписаться

Рядом в разделе

Сеометр, форум специалистов по поиску и аналитике ПравилаУчастникиО форумеЛента 2026