Проверка на робота: какие признаки её вызывают чаще всего

Ловлю это регулярно, хочу понять устройство.

Площадка ведёт себя по-разному в будни и выходные. В ответе приходит код 200, но вместо содержимого короткая заглушка. До этого месяц работало ровно, ничего в настройках не менял.

Есть у кого рабочая схема?

Это верно для одной площадки и неверно для другой.

Считайте долю отказов. Голое число ни о чём не говорит. Тысяча отказов на миллион запросов это норма, сто на тысячу уже беда.

12:04:11 200 ok
12:04:12 200 ok
12:19:38 429 too many requests
12:19:39 429 too many requests

Полгода назад ловил то же самое.

Код 200 с короткой заглушкой это тоже отказ, просто вежливый. Заведите проверку на размер ответа, иначе прогон соберёт пустоту и вы этого не заметите.

Разнесите нагрузку по времени суток. Ночью площадки спокойнее не потому, что спят, а потому что общий поток меньше и ваш вклад в него не выделяется.

Забрал себе в заметки.

Добавьте адресов, потоки трогать не надо.

Ровно то же наблюдал, только объёмы были поменьше.

Паузу ставьте с разбросом. Ровная пауза в две секунды заметнее, чем разброс от полутора до трёх, потому что ровный ритм это признак машины.

Спасибо за подробное описание, так отвечать проще.