Разделы · Мониторинг конкурентов и цен
Держу слежение давно, вопрос назрел.
Разложил проверки по часам, нагрузка стала ровнее. Расход трафика около 700 гигабайт в месяц. Слежу за 40 конкурентами, съём раз в сутки, около 200 тысяч карточек.
$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt проверено: 198 402 изменилось: 4 118
Хочется услышать, чем это заканчивается на практике.
Пул под такие объёмы держу постоянный. Беру адреса с безлимитным трафиком, потому что там разброс по подсетям нормальный, а это на съёме важнее скорости.
Уточнение по мелочи, но она стоит времени.
Если площадка отдаёт цену скриптом, ищите источник данных. Обычно рядом есть простой запрос, который отдаёт то же самое.
Сначала логи, потом версии.
На одном проекте это стоило нам сорванного срока.
Суточного среза цен уже мало почти везде. Разложите проверки по часам и следите за важными позициями чаще, чем за остальными.
$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt проверено: 198 402 изменилось: 4 118
Разбор годный, спорить не буду.
Набор новых участников сейчас приостановлен. Читать форум можно без учётной записи, все темы открыты.
Когда набор откроют, объявление появится в разделе с короткими вопросами.
Форма работает в браузере и никуда ничего не отправляет.