Разделы · Прокси: выбор и характеристики
Прошу совета по расчёту, потому что цифры из статей не сходятся с моими.
Чтобы вопрос был предметным, вот цифры.
Трафик за месяц вышел около двух терабайт, поэтому пакеты гигабайтов не подходят. Пинг до адресов около 40 миллисекунд, но на длинном прогоне это почти не сказалось. Считал по темпу: общий темп прогона делю на допустимый темп на адрес.
Кто как это обходит?
На другой машине воспроизводится?
Начните с малого объёма и растите постепенно.
Проверял на трёх проектах подряд, картина устойчивая.
Серверные адреса берут скоростью и стабильностью. Для съёма позиций, обхода каталогов и мониторинга цен этого хватает с запасом.
Уменьшите потоки вдвое и замерьте заново.
Тут легко перепутать два разных момента.
Серверные адреса берут скоростью и стабильностью. Для съёма позиций, обхода каталогов и мониторинга цен этого хватает с запасом.
Скорость адреса и скорость прогона это разные вещи. Прогон упирается в темп, который вам позволяют, а не в ширину канала.
Тут легко перепутать два разных момента.
Число адресов считается от темпа. Возьмите допустимый темп на адрес для конкретной площадки и разделите на него общий темп прогона. Полученное умножьте на два, это и будет рабочий пул.
$ for a in $(cat pool.txt); do curl -s -o /dev/null -w "%{time_total} " -x $a https://example.org/; done
0.412 0.398 1.884 0.421 0.406Одно уточнение, иначе расчёт уедет.
Серверные адреса берут скоростью и стабильностью. Для съёма позиций, обхода каталогов и мониторинга цен этого хватает с запасом.
Перед покупкой проверяю три вещи: скорость отдачи на реальной странице, разброс подсетей и поведение под нагрузкой в сто потоков. Пинг смотрю последним, он мало что решает.