позиции · сбор данных · отчёты
реклама IPrazon Network: приватные прокси IPv4 и SOCKS5, пул 12 000 адресов, безлимитный трафик, бесплатный тест до 2 часов

Разделы · Короткие вопросы

Чем разбить список на части

16 ответов · 4 750 просмотров
знак участника Оксана Пивень
Оксана ПивеньУчастник
  • сообщений 830
  • на форуме 9 мес
Короткие вопросыгорячая

Спрошу быстро, вдруг у кого готовый ответ.

Из существенного вот это.

Небольшой объём, но срочно. Объём небольшой, разовый.

Может, кто-то уже проходил это.

знак участника Артём Гринь
Артём ГриньУчастник
  • сообщений 1 284
  • на форуме 4 мес
Оксана Пивень писал: Чем разбить список на части

Один момент упущен, и он важный.

Проверяйте на маленькой выборке, прежде чем запускать всё.

Сохраните сырое, потом пересчитаете как надо.

Разбор годный, спорить не буду.

знак участника Полина Ржевская
Полина РжевскаяУчастник
  • сообщений 715
  • на форуме 10 мес

Уменьшите потоки вдвое и замерьте заново.

знак участника thread_limit
thread_limitЗнаток
  • сообщений 2 620
  • на форуме 2 мес

Сначала логи, потом версии.

знак участника Григорий Сташ
Григорий СташНовичок
  • сообщений 172
  • на форуме 1 года

Соглашусь, хотя пришёл к этому через неприятность.

Ответ зависит от площадки, universal тут нет.

знак участника Мамедов А.
Мамедов А.Новичок
  • сообщений 240
  • на форуме 1 года

Проверьте, что ответ полный.

знак участника grafik_cen
grafik_cenЗнаток
  • сообщений 1 720
  • на форуме 4 мес

Так же считаю, и коллеги считают так же.

Если сомневаетесь, берите меньше и растите.

Разбейте список на равные части по числу потоков, так проще следить.

знак участника Тарас Ю.
Тарас Ю.Новичок
  • сообщений 480
  • на форуме 1 года

Согласен с предыдущим ответом, но с одной оговоркой.

Пары минут на пробу хватит, чтобы понять порядок.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/
знак участника Ростислав Е.
Ростислав Е.Участник
  • сообщений 965
  • на форуме 7 мес

Осторожнее с этим выводом, он верен не всегда.

Сохраните сырое, потом пересчитаете как надо.

Берите с запасом, потом сократите по замеру.

Слежу за темой.

знак участника tochka_zamera
tochka_zameraВетеран
  • сообщений 3 355
  • на форуме 1 мес

У меня это вскрылось только на сверке данных.

Начните с настроек по умолчанию и меняйте по одной.

Отпишитесь, что получилось.

знак участника Виктор Лаптев
Виктор ЛаптевНовичок
  • сообщений 230
  • на форуме 1 года

Не совсем так, и разница тут существенная.

Ответ зависит от площадки, universal тут нет.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/
знак участника nochnoy_progon
nochnoy_progonЗнаток
  • сообщений 1 540
  • на форуме 5 мес

Всё верно написали выше, добавлю от себя пару деталей.

Обычно достаточно того, что уже есть под рукой.

Проверьте на десятке записей, дальше видно будет.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/

Пишите, если понадобится уточнить.

знак участника pool_manager
pool_managerЗнаток
  • сообщений 1 580
  • на форуме 5 мес

Проверьте на второй машине, это отсекает половину версий.

знак участника Маргарита Ю.
Маргарита Ю.Участник
  • сообщений 640
  • на форуме 11 мес

У меня это вскрылось только на сверке данных.

Начните с настроек по умолчанию и меняйте по одной.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

знак участника tempo_ru
tempo_ruЗнаток
  • сообщений 2 470
  • на форуме 3 мес

Ловил это дважды, оба раза по разным причинам.

Берите с запасом, потом сократите по замеру.

Проверьте на десятке записей, дальше видно будет.

Хороший вопрос, редко разбирают.

знак участника zapros_min
zapros_minУчастник
  • сообщений 760
  • на форуме 10 мес
Оксана Пивень писал: Чем разбить список на части

У меня это вскрылось только на сверке данных.

Смотрите не только число, но и разброс подсетей.

Жду продолжения.

знак участника Артур Хаким
Артур ХакимНовичок
  • сообщений 455
  • на форуме 1 года
Оксана Пивень писал: Чем разбить список на части

Добавлю то, что обычно выясняется поздно.

Если сомневаетесь, берите меньше и растите.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/
Ответить в темеПодписаться

Рядом в разделе

Сеометр, форум специалистов по поиску и аналитике ПравилаУчастникиО форумеЛента 2026