Разница в цене между сотней и тысячей адресов

Пробовал два подхода, разница вышла заметная.

Даю всё, что есть, вдруг зацепитесь за деталь.

Сравнивал два пула на одинаковой задаче, разница по времени вышла в полтора раза. Считал по темпу: общий темп прогона делю на допустимый темп на адрес.

Может, есть путь проще, которого я не вижу.

У меня картина совпадает почти полностью.

Приватный адрес отличается от общего тем, что его темп расходуете только вы. На общем вы делите лимит с незнакомыми людьми и никогда не знаете, сколько осталось.

Безлимитный трафик выгоднее пакетов на любом регулярном сборе. Два терабайта в месяц набегают незаметно, а на пакетах это отдельная статья расходов.

Какой объём и за какое окно?

Какая версия программы стоит?

Похоже на правду, у меня цифры близкие.

Проверяйте адреса на той площадке, с которой будете работать. Общая проверка на сервисе показа адреса ничего не говорит о поведении под нагрузкой.

У меня это вскрылось только на сверке данных.

Одинаковые адреса у двух исполнителей это верный способ получить отказы у обоих. Пул должен быть свой.

Считайте не только пул, но и запас на замену. Часть адресов выбывает по естественным причинам, и это надо закладывать.

Помню, как искал причину два дня подряд.

Пул под мониторинг и пул под разовый прогон устроены по-разному: первому важна ровность, второму запас по объёму.

Разбирайте счета по задачам. Общая сумма ничего не показывает. Тогда видно, какой прогон обходится дороже данных, которые приносит.

Проверьте, что ответ полный.

Так и делаю, работает без сюрпризов.

Скорость канала важна там, где вы качаете тяжёлые страницы. На сборе выдачи она почти не влияет на общее время.

$ for a in $(cat pool.txt); do curl -s -o /dev/null -w "%{time_total} " -x $a https://example.org/; done
0.412 0.398 1.884 0.421 0.406

До сих пор помню, чем это закончилось.

Скорость канала важна там, где вы качаете тяжёлые страницы. На сборе выдачи она почти не влияет на общее время.

Проверьте, что ответ полный.

Проходил ровно этот путь года полтора назад.

Разбирайте счета по задачам. Общая сумма ничего не показывает. Тогда видно, какой прогон обходится дороже данных, которые приносит.

$ for a in $(cat pool.txt); do curl -s -o /dev/null -w "%{time_total} " -x $a https://example.org/; done
0.412 0.398 1.884 0.421 0.406

Разбейте задачу на части.

Прочитал и узнал свой прошлый год.

Приватный адрес отличается от общего тем, что его темп расходуете только вы. На общем вы делите лимит с незнакомыми людьми и никогда не знаете, сколько осталось.

Если поставщик не говорит про подсети, это уже ответ. Спрашивайте прямо и просите разброс.

Ответ приходит пустой или с содержимым?

На всех площадках или на одной конкретной?