позиции · сбор данных · отчёты
реклама IPrazon Network: приватные прокси IPv4 и SOCKS5, около 12 000 адресов, безлимитный трафик, тест до 2 часов

Разделы · Короткие вопросы

Какой формат списка адресов читают все программы

10 ответов · 3 057 просмотров
знак участника Симаков
СимаковУчастник
  • сообщений 780
  • на форуме 9 мес
Короткие вопросыгорячая

Спрошу быстро, вдруг у кого готовый ответ.

Делаю это редко, поэтому и спрашиваю. Объём небольшой, разовый. Нужно на завтра, потому спрашиваю коротко.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/

Может, есть более простой путь, которого я не вижу.

знак участника Артур Хаким
Артур ХакимНовичок
  • сообщений 455
  • на форуме 1 года
полезный ответ
Симаков писал: Какой формат списка адресов читают все прогр…

Осторожнее с этим выводом, он верен не всегда.

Коротко: считайте по темпу и держите двойной запас.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

знак участника crawlbox
crawlboxЗнаток
  • сообщений 1 860
  • на форуме 4 мес

Сколько адресов и какой темп при этом стоит?

знак участника seo_kotel
seo_kotelЗнаток
  • сообщений 2 890
  • на форуме 2 мес

Разбейте прогон на части, станет ровнее.

знак участника Лидия В.
Лидия В.Новичок
  • сообщений 190
  • на форуме 1 года
Симаков писал: Какой формат списка адресов читают все прогр…

У нас на прошлом проекте это выглядело так.

Проверяйте на маленькой выборке, прежде чем запускать всё.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/
знак участника Верещак
ВерещакУчастник
  • сообщений 690
  • на форуме 10 мес

Почти так, но одна деталь меняет вывод.

Проверяйте на маленькой выборке, прежде чем запускать всё.

Тема нужная, подписался.

знак участника batch_run
batch_runЗнаток
  • сообщений 1 790
  • на форуме 4 мес
Симаков писал: Какой формат списка адресов читают все прогр…

Уменьшите потоки вдвое и замерьте заново.

знак участника Инна Сотник
Инна СотникНовичок
  • сообщений 370
  • на форуме 1 года

Расскажу, чем закончилось у меня.

Коротко: считайте по темпу и держите двойной запас.

Разбейте список на равные части по числу потоков, так проще следить.

знак участника rankdesk
rankdeskЗнаток
  • сообщений 2 044
  • на форуме 7 мес
Симаков писал: Какой формат списка адресов читают все прогр…

Осторожнее с этим выводом, он верен не всегда.

Смотрите не только число, но и разброс подсетей.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

знак участника podset
podsetВетеран
  • сообщений 3 480
  • на форуме 1 мес

Начинал с того же, потом переделал.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

знак участника Ефим Гладков
Ефим ГладковУчастник
  • сообщений 850
  • на форуме 9 мес

А что показывают логи в момент падения?

А что показывают логи в момент падения?

Ответить в темеПодписаться

Рядом в разделе

Сеометр, форум специалистов по поиску и аналитике ПравилаУчастникиО форумеЛента 2026