Площадка отдаёт 200 и заглушку вместо содержимого

Спрашиваю тех, кто уже упирался в это же.

Паузы стоят от полутора до трёх секунд, темп примерно двадцать запросов в минуту. Доля отказов около трёх процентов, но растёт.

12:04:11 200 ok
12:04:12 200 ok
12:19:38 429 too many requests
12:19:39 429 too many requests

Может, есть путь проще, которого я не вижу.

Плюсую, сам пришёл к тому же через полгода проб.

Заголовки трогайте в последнюю очередь. Чаще всего проблема в темпе. То, как вы представляетесь, влияет слабо.

Жду продолжения.

Схема рабочая, но у неё есть предел.

Отказы, привязанные ко времени суток, обычно означают общую нагрузку на площадку. Персональные ограничения ведут себя иначе.

Считайте долю отказов. Голое число ни о чём не говорит. Тысяча отказов на миллион запросов это норма, сто на тысячу уже беда.

12:04:11 200 ok
12:04:12 200 ok
12:19:38 429 too many requests
12:19:39 429 too many requests

Хороший вопрос, редко разбирают.

Могу подтвердить, у нас на двух проектах точно так.

Заголовки трогайте в последнюю очередь. Чаще всего проблема в темпе. То, как вы представляетесь, влияет слабо.

У меня это вскрылось только на сверке данных.

Резкий рост потоков площадка замечает быстрее, чем ровную нагрузку. Наращивайте постепенно.

Меняйте по одному, иначе не поймёте причину.

Начните с малого объёма и растите постепенно.

На маленьких объёмах верно, на больших уже нет.

Вход в аккаунт на части страниц это разделение доступа. Защитой от сбора он не задумывался. Смиритесь и обходите стороной.

Разбирались втроём, нашли случайно.

Отказы, привязанные ко времени суток, обычно означают общую нагрузку на площадку. Персональные ограничения ведут себя иначе.

Ведите журнал отказов с временем. Через неделю в нём проступает расписание площадки.

Начните с пробы на тысяче записей.

Сколько по времени занимает один запрос?

У нас на прошлом проекте это выглядело так.

Резкий рост потоков площадка замечает быстрее, чем ровную нагрузку. Наращивайте постепенно.

Проверял на трёх проектах подряд, картина устойчивая.

Пустой ответ и отказ по коду это разные вещи, и обрабатывать их надо по-разному.

12:04:11 200 ok
12:04:12 200 ok
12:19:38 429 too many requests
12:19:39 429 too many requests