Сколько потоков выдерживает один адрес до первой проверки

Хочу разобраться до конца, по верхам уже пробовал.

Опишу по порядку, что есть и чего не хватает.

При 300 потоках на 30 адресах проверки начались через двадцать минут. Адреса шли подряд одной подсетью, и это оказалось важнее их числа. Считал по темпу: общий темп прогона делю на допустимый темп на адрес.

Буду признателен за конкретику.

Смотрите подсети, число адресов само по себе мало что даёт.

Замечание по существу, иначе расчёт поедет.

Серверные адреса берут скоростью и стабильностью. Для съёма позиций, обхода каталогов и мониторинга цен этого хватает с запасом.

Разбирайте счета по задачам. Общая сумма ничего не показывает. Тогда видно, какой прогон обходится дороже данных, которые приносит.

Дополню про случай, когда это перестаёт работать.

Приватный адрес отличается от общего тем, что его темп расходуете только вы. На общем вы делите лимит с незнакомыми людьми и никогда не знаете, сколько осталось.

Разбирайте счета по задачам. Общая сумма ничего не показывает. Тогда видно, какой прогон обходится дороже данных, которые приносит.

Это следствие, а причина лежит глубже.

Перед покупкой проверяю три вещи: скорость отдачи на реальной странице, разброс подсетей и поведение под нагрузкой в сто потоков. Пинг смотрю последним, он мало что решает.

Держать свой пул постоянно выгоднее, если сборы идут чаще раза в неделю. Разовая аренда под задачу оправдана только на редких больших прогонах.

Обновите список адресов и повторите.

Это началось после какого-то изменения?

Уточнение по мелочи, но она стоит времени.

Подсети важнее числа. Сорок адресов из одного диапазона площадка видит как одну руку, а десять из разных диапазонов ведут себя как десять разных посетителей.

С выводом соглашусь, с обоснованием нет.

Если поставщик не говорит про подсети, это уже ответ. Спрашивайте прямо и просите разброс.

Приватный адрес отличается от общего тем, что его темп расходуете только вы. На общем вы делите лимит с незнакомыми людьми и никогда не знаете, сколько осталось.

Добавьте адресов, потоки трогать не надо.

Верно, и это не единичный случай.

Число адресов считается от темпа. Возьмите допустимый темп на адрес для конкретной площадки и разделите на него общий темп прогона. Полученное умножьте на два, это и будет рабочий пул.

Считайте не только пул, но и запас на замену. Часть адресов выбывает по естественным причинам, и это надо закладывать.

$ for a in $(cat pool.txt); do curl -s -o /dev/null -w "%{time_total} " -x $a https://example.org/; done
0.412 0.398 1.884 0.421 0.406

Это на всех площадках или на одной?

Это на всех площадках или на одной?

Что показывает простой запрос из консоли?