Разделы · Мониторинг конкурентов и цен
Считаю нагрузку заранее и хочу сверить с чужим опытом.
Разложил проверки по часам, нагрузка стала ровнее. Оповещение настроено на изменение больше пяти процентов. Расход трафика около 700 гигабайт в месяц.
Кто как это обходит?
А что показывают логи в момент падения?
Проверьте, что настройка вообще применилась.
Уменьшите потоки вдвое и замерьте заново.
Уточните пару моментов, иначе гадаем.
Проверьте, что настройка вообще применилась.
Тут ничего нового не скажу, только подтвержу.
Если площадка отдаёт цену скриптом, ищите источник данных. Обычно рядом есть простой запрос, который отдаёт то же самое.
Хороший разбор, добавлю в закладки.
Начните с малого объёма и растите постепенно.
Полгода назад ловил то же самое.
Историю цен храните с отметкой времени и адресом, откуда снято. Без этого разбор расхождений превращается в спор.
Оповещение настраивайте на процент, а не на рубли. Иначе дешёвые позиции будут молчать, а дорогие звенеть постоянно.
$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt проверено: 198 402 изменилось: 4 118
Если поможет, напишите здесь же, пригодится следующим.
Поправлю: дело не в объёме, а в темпе.
Расход адресов на мониторинге ровнее, чем на разовых прогонах, поэтому пул проще считать: берите средний темп и умножайте на запас.
$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt проверено: 198 402 изменилось: 4 118
Хороший разбор, добавлю в закладки.