Скорость адреса и скорость прогона: почему это разные вещи

Вопрос простой на вид, а ответы у всех разные.

Чтобы было понятно, с чем работаю.

Проверял скорость до покупки, на прогоне цифры оказались другими. Адреса шли подряд одной подсетью, и это оказалось важнее их числа. При 300 потоках на 30 адресах проверки начались через двадцать минут.

Может, кто-то уже проходил это.

Начинал с готовых сервисов, потом ушёл на своё.

Считайте не только пул, но и запас на замену. Часть адресов выбывает по естественным причинам, и это надо закладывать.

Держать свой пул постоянно выгоднее, если сборы идут чаще раза в неделю. Разовая аренда под задачу оправдана только на редких больших прогонах.

Сколько потоков стоит на прогоне?

На маленьких объёмах верно, на больших уже нет.

Скорость канала важна там, где вы качаете тяжёлые страницы. На сборе выдачи она почти не влияет на общее время.

$ for a in $(cat pool.txt); do curl -s -o /dev/null -w "%{time_total} " -x $a https://example.org/; done
0.412 0.398 1.884 0.421 0.406

Наступал на это в прошлом сезоне.

Серверные адреса берут скоростью и стабильностью. Для съёма позиций, обхода каталогов и мониторинга цен этого хватает с запасом.

Если поставщик не говорит про подсети, это уже ответ. Спрашивайте прямо и просите разброс.