Сбор идёт нормально днём и падает ночью, ищем причину

Ниже что вижу, и вопрос, что с этим делать.

Сразу к делу, чтобы не растекаться.

В ответе приходит код 200, но вместо содержимого короткая заглушка. Часть адресов проходит спокойно, часть ловит проверку с первых минут. Пробовал уменьшить потоки вдвое, отказов стало меньше, но время выросло втрое.

12:04:11 200 ok
12:04:12 200 ok
12:19:38 429 too many requests
12:19:39 429 too many requests

Подскажите, где я ошибаюсь.

Считайте по темпу, всё остальное вторично.

Всё верно написали выше, добавлю от себя пару деталей.

Паузу ставьте с разбросом. Ровная пауза в две секунды заметнее, чем разброс от полутора до трёх, потому что ровный ритм это признак машины.

12:04:11 200 ok
12:04:12 200 ok
12:19:38 429 too many requests
12:19:39 429 too many requests

Считайте по темпу, всё остальное вторично.

Проверял на трёх проектах подряд, картина устойчивая.

Ровный порог отказов означает счётчик на стороне площадки. Считайте не потоки, а запросы с адреса за минуту, и подгоняйте темп под этот счётчик.

Код 200 с короткой заглушкой это тоже отказ, просто вежливый. Заведите проверку на размер ответа, иначе прогон соберёт пустоту и вы этого не заметите.

Хороший разбор, добавлю в закладки.

На другой машине воспроизводится?

У меня картина совпадает почти полностью.

Ровный порог отказов означает счётчик на стороне площадки. Считайте не потоки, а запросы с адреса за минуту, и подгоняйте темп под этот счётчик.

Пришёл к этому не сразу, сначала сделал ошибку.

Отказы волнами обычно означают, что счётчик сбрасывается по расписанию. Замерьте промежуток между волнами и подгоните темп.

Уменьшение потоков помогает не всегда: если темп на адрес прежний, отказы останутся. Добавляйте адреса, а не убавляйте потоки.