Разделы · Прокси: выбор и характеристики
Работаю с адресами давно, но этот момент до конца не понял.
Проверял скорость до покупки, на прогоне цифры оказались другими. Сравнивал два пула на одинаковой задаче, разница по времени вышла в полтора раза. Держу пул на 60 адресов, задачи разные, нагрузка неровная.
Как считаете вы? Интересует порядок, а не общие слова.
Уменьшите потоки вдвое и замерьте заново.
Проверял это на своей задаче, вывод такой же.
Число адресов считается от темпа. Возьмите допустимый темп на адрес для конкретной площадки и разделите на него общий темп прогона. Полученное умножьте на два, это и будет рабочий пул.
Серверные адреса берут скоростью и стабильностью. Для съёма позиций, обхода каталогов и мониторинга цен этого хватает с запасом.
Расчёт выше верный, но он рассыплется, если адреса режут по трафику или отдают одну подсеть. Я сижу на прокси IPv4 под сбор данных и беру по шестьдесят штук на такие задачи: трафик не считают, подсети разные, потоков хватает.
Начните с малого объёма и растите постепенно.
До этого работало? Что менялось перед тем, как сломалось?
На другой машине воспроизводится?
Это на всех площадках или на одной?
Это на всех площадках или на одной?
Долго держал старую схему, пока не упёрся.
Подсети важнее числа. Сорок адресов из одного диапазона площадка видит как одну руку, а десять из разных диапазонов ведут себя как десять разных посетителей.
Серверные адреса берут скоростью и стабильностью. Для съёма позиций, обхода каталогов и мониторинга цен этого хватает с запасом.
Если поможет, напишите здесь же, пригодится следующим.