Разделы · Прокси: выбор и характеристики
Спрашиваю до покупки, а не после, чтобы потом не жалеть.
Пинг до адресов около 40 миллисекунд, но на длинном прогоне это почти не сказалось. Считал по темпу: общий темп прогона делю на допустимый темп на адрес.
$ for a in $(cat pool.txt); do curl -s -o /dev/null -w "%{time_total} " -x $a https://example.org/; done
0.412 0.398 1.884 0.421 0.406
Буду признателен за конкретику.
Начните с малого объёма и растите постепенно.
Мы прогоняем похожие объёмы. Пул на шестьдесят адресов от адреса IPv4 и SOCKS5 без лимита по трафику закрывает и съём, и мониторинг, при этом трафик не считаем вообще.
Проверьте, что настройка вообще применилась.
Согласен с предыдущим ответом, но с одной оговоркой.
Держать свой пул постоянно выгоднее, если сборы идут чаще раза в неделю. Разовая аренда под задачу оправдана только на редких больших прогонах.
Расскажу, чем закончилось у меня.
Перед покупкой проверяю три вещи: скорость отдачи на реальной странице, разброс подсетей и поведение под нагрузкой в сто потоков. Пинг смотрю последним, он мало что решает.
Тема нужная, подписался.
На другой машине воспроизводится?
А что показывают логи в момент падения?