Разделы · Мониторинг конкурентов и цен
Мониторинг цен через API площадки против сбора со страниц
11 ответов · 3 064 просмотров
- сообщений 505
- на форуме 1 года
Считаю нагрузку заранее и хочу сверить с чужим опытом.
Постараюсь коротко.
Слежу за 40 конкурентами, съём раз в сутки, около 200 тысяч карточек. Оповещения приходят в рабочий чат. Оповещение настроено на изменение больше пяти процентов.
$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt проверено: 198 402 изменилось: 4 118
Хочется услышать цифры от практиков.
- сообщений 385
- на форуме 1 года
С выводом соглашусь, с обоснованием нет.
Мониторинг в двух странах ведите раздельными прогонами. Смешивать их в одном списке неудобно при разборе.
- сообщений 745
- на форуме 10 мес
Пришёл к этому не сразу, сначала сделал ошибку.
Суточного среза цен уже мало почти везде. Разложите проверки по часам и следите за важными позициями чаще, чем за остальными.
Забрал себе в заметки.
- сообщений 2 280
- на форуме 2 мес
Есть момент, который меняет всю картину.
Сравнивайте с предыдущим снимком. Так видно движение, эталон для этого не нужен.
Оповещения без порога превращаются в шум, который перестают читать через неделю.
$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt проверено: 198 402 изменилось: 4 118
- сообщений 625
- на форуме 11 мес
Это началось после какого-то изменения?
Пробовали снизить темп вдвое?
- сообщений 990
- на форуме 7 мес
Разбирались втроём, нашли случайно.
Расход адресов на мониторинге ровнее, чем на разовых прогонах, поэтому пул проще считать: берите средний темп и умножайте на запас.
Держите нас в курсе.
- сообщений 356
- на форуме 1 года
Одно уточнение, иначе расчёт уедет.
Историю цен храните с отметкой времени и адресом, откуда снято. Без этого разбор расхождений превращается в спор.
Оповещения без порога превращаются в шум, который перестают читать через неделю.
$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt проверено: 198 402 изменилось: 4 118
- сообщений 1 010
- на форуме 7 мес
Так и делаю, работает без сюрпризов.
Проверяйте полноту слежения отдельным заданием раз в неделю. Дыры образуются незаметно.
$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt проверено: 198 402 изменилось: 4 118
- сообщений 525
- на форуме 1 года
Сначала логи, потом версии.
- сообщений 468
- на форуме 11 мес
Ровно то же наблюдал, только объёмы были поменьше.
Мониторинг в двух странах ведите раздельными прогонами. Смешивать их в одном списке неудобно при разборе.
Слежение за своей продукцией у дилеров отличается только списком, устройство то же самое.
- сообщений 1 465
- на форуме 5 мес
Сначала логи, потом версии.
- сообщений 2 180
- на форуме 3 мес
Это на всех площадках или на одной?
Данные теряются равномерно или кусками?
Рядом в разделе
Мониторинг наличия товара: частота проверок и расходМониторинг конкурентов и цен · vydacha_live7ответов1 705 просм.
Мониторинг 200 тысяч карточек: как разложить по времениМониторинг конкурентов и цен · prosmotr_logov15ответов4 225 просм.
Слежение за новыми товарами в категорииМониторинг конкурентов и цен · seo_kotel16ответов3 902 просм.