позиции · сбор данных · отчёты
реклама IPrazon Network: приватные прокси IPv4 и SOCKS5, около 12 000 адресов, безлимитный трафик, тест до 2 часов

Разделы · Короткие вопросы

Чем разбить список на части

16 ответов · 4 750 просмотров
знак участника Оксана Пивень
Оксана ПивеньУчастник
  • сообщений 830
  • на форуме 9 мес
Короткие вопросыгорячая

Короткий вопрос, длинного разбора не нужно.

По порядку.

Делаю это редко, поэтому и спрашиваю. Объём небольшой, разовый.

Кто сталкивался, поделитесь опытом.

знак участника Артём Гринь
Артём ГриньУчастник
  • сообщений 1 284
  • на форуме 4 мес
Оксана Пивень писал: Чем разбить список на части

Добавлю то, что обычно вылезает на второй месяц работы.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

Проверяйте на маленькой выборке, прежде чем запускать всё.

Хороший разбор, добавлю в закладки.

знак участника Полина Ржевская
Полина РжевскаяУчастник
  • сообщений 715
  • на форуме 10 мес

Разбейте прогон на части, станет ровнее.

знак участника thread_limit
thread_limitЗнаток
  • сообщений 2 620
  • на форуме 2 мес

Уменьшите потоки вдвое и замерьте заново.

знак участника Григорий Сташ
Григорий СташНовичок
  • сообщений 172
  • на форуме 1 года

Тут ничего нового не скажу, только подтвержу.

Разбейте список на равные части по числу потоков, так проще следить.

знак участника Мамедов А.
Мамедов А.Новичок
  • сообщений 240
  • на форуме 1 года

Проверьте, что настройка вообще применилась.

знак участника grafik_cen
grafik_cenЗнаток
  • сообщений 1 720
  • на форуме 4 мес

Тут ничего нового не скажу, только подтвержу.

Проверяйте на маленькой выборке, прежде чем запускать всё.

Коротко: считайте по темпу и держите двойной запас.

знак участника Тарас Ю.
Тарас Ю.Новичок
  • сообщений 480
  • на форуме 1 года

Считаю так же, и цифры у меня близкие.

Разбейте список на равные части по числу потоков, так проще следить.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/
знак участника Ростислав Е.
Ростислав Е.Участник
  • сообщений 965
  • на форуме 7 мес

Поправлю: дело не в объёме, а в темпе.

Проверяйте на маленькой выборке, прежде чем запускать всё.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

Держите нас в курсе.

знак участника tochka_zamera
tochka_zameraВетеран
  • сообщений 3 355
  • на форуме 1 мес

Пришёл к этому не сразу, сначала сделал ошибку.

Смотрите не только число, но и разброс подсетей.

Если поможет, напишите здесь же, пригодится следующим.

знак участника Виктор Лаптев
Виктор ЛаптевНовичок
  • сообщений 230
  • на форуме 1 года

Почти так, но одна деталь меняет вывод.

Разбейте список на равные части по числу потоков, так проще следить.

Коротко: считайте по темпу и держите двойной запас.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/
знак участника nochnoy_progon
nochnoy_progonЗнаток
  • сообщений 1 540
  • на форуме 5 мес

Считаю так же, и цифры у меня близкие.

Смотрите не только число, но и разброс подсетей.

Разбейте список на равные части по числу потоков, так проще следить.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/

Хороший разбор, добавлю в закладки.

знак участника pool_manager
pool_managerЗнаток
  • сообщений 1 580
  • на форуме 5 мес

Держите запас, ровно по расчёту работать не выйдет.

знак участника Маргарита Ю.
Маргарита Ю.Участник
  • сообщений 640
  • на форуме 11 мес

Пришёл к этому не сразу, сначала сделал ошибку.

Смотрите не только число, но и разброс подсетей.

Коротко: считайте по темпу и держите двойной запас.

знак участника tempo_ru
tempo_ruЗнаток
  • сообщений 2 470
  • на форуме 3 мес

Начинал с того же, потом переделал.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

Разбейте список на равные части по числу потоков, так проще следить.

Держите нас в курсе.

знак участника zapros_min
zapros_minУчастник
  • сообщений 760
  • на форуме 10 мес
Оксана Пивень писал: Чем разбить список на части

Пришёл к этому не сразу, сначала сделал ошибку.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

Тема нужная, подписался.

знак участника Артур Хаким
Артур ХакимНовичок
  • сообщений 455
  • на форуме 1 года
Оксана Пивень писал: Чем разбить список на части

Осторожнее с этим выводом, он верен не всегда.

Проверяйте на маленькой выборке, прежде чем запускать всё.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/
Ответить в темеПодписаться

Рядом в разделе

Сеометр, форум специалистов по поиску и аналитике ПравилаУчастникиО форумеЛента 2026