Как отличить настоящее изменение цены от сбоя сбора

Считаю нагрузку заранее и хочу сверить с чужим опытом.

Оповещения приходят в рабочий чат. Цены меняются в течение дня, суточного среза уже не хватает.

Кто сталкивался, поделитесь опытом.

Первый раз списал на случайность, второй раз уже нет.

Сравнивайте с предыдущим снимком. Так видно движение, эталон для этого не нужен.

Ловил это дважды, оба раза по разным причинам.

Проверяйте полноту слежения отдельным заданием раз в неделю. Дыры образуются незаметно.

Слежение за своей продукцией у дилеров отличается только списком, устройство то же самое.

Добавлю тему в закладки.

Проходил ровно этот путь года полтора назад.

Отмечайте не только цену, но и наличие. Товар без наличия с любой ценой в отчёте бесполезен.

Суточного среза цен уже мало почти везде. Разложите проверки по часам и следите за важными позициями чаще, чем за остальными.

Осторожнее с обобщением, случаи бывают разные.

Мониторинг в двух странах ведите раздельными прогонами. Смешивать их в одном списке неудобно при разборе.

Уточню, иначе можно уйти не в ту сторону.

Слежение за своей продукцией у дилеров отличается только списком, устройство то же самое.

Разбейте карточки на группы по важности. Дорогие позиции проверяйте часто, длинный хвост раз в сутки.

Хороший разбор, добавлю в закладки.

Проверял на трёх проектах подряд, картина устойчивая.

Сравнивайте с предыдущим снимком. Так видно движение, эталон для этого не нужен.

Полноту мониторинга проверяйте отдельным заданием: берите случайную выборку и сверяйте руками. Дыры находятся сразу.

Всё сходится с тем, что вижу у себя.

Суточного среза цен уже мало почти везде. Разложите проверки по часам и следите за важными позициями чаще, чем за остальными.

$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt
проверено: 198 402
изменилось: 4 118

Хороший разбор, добавлю в закладки.

Не гоните с первого дня, дайте себе запас.

Проверьте, что ответ полный.

У коллеги было то же самое, причина оказалась смешной.

Полноту мониторинга проверяйте отдельным заданием: берите случайную выборку и сверяйте руками. Дыры находятся сразу.

Именно так и есть, спорить не о чем.

Данные с площадки, где цена приходит скриптом, собирайте через тот же источник, что и сама страница.

Такие темы и держат форум.

Всё сходится с тем, что вижу у себя.

Проверяйте полноту слежения отдельным заданием раз в неделю. Дыры образуются незаметно.

Суточного среза цен уже мало почти везде. Разложите проверки по часам и следите за важными позициями чаще, чем за остальными.

$ ./ceny --spisok karty.txt --chasy 3 --proksi pool.txt
проверено: 198 402
изменилось: 4 118

Прогон падает всегда в одном месте?

Что в логах в этот момент?

Добавлю то, что обычно выясняется поздно.

Отмечайте не только цену, но и наличие. Товар без наличия с любой ценой в отчёте бесполезен.