позиции · сбор данных · отчёты
реклама IPrazon Network: приватные прокси IPv4 и SOCKS5, около 12 000 адресов, безлимитный трафик, тест до 2 часов

Разделы · Короткие вопросы

Быстрая проверка списка

10 ответов · 1 047 просмотров
знак участника ip_i_potoki
ip_i_potokiЗнаток
  • сообщений 2 350
  • на форуме 3 мес
Короткие вопросы

Нужен короткий ответ по опыту.

Делаю это редко, поэтому и спрашиваю. Объём небольшой, разовый.

Подскажите, где я ошибаюсь.

знак участника pool_manager
pool_managerЗнаток
  • сообщений 1 580
  • на форуме 5 мес
полезный ответ
ip_i_potoki писал: Быстрая проверка списка

На другой машине воспроизводится?

На другой машине воспроизводится?

знак участника Маргарита Ю.
Маргарита Ю.Участник
  • сообщений 640
  • на форуме 11 мес

Держите запас, ровно по расчёту работать не выйдет.

знак участника tempo_ru
tempo_ruЗнаток
  • сообщений 2 470
  • на форуме 3 мес

Начните с малого объёма и растите постепенно.

знак участника zapros_min
zapros_minУчастник
  • сообщений 760
  • на форуме 10 мес

У меня картина совпадает почти полностью.

Проверяйте на маленькой выборке, прежде чем запускать всё.

Смотрите не только число, но и разброс подсетей.

Хороший разбор, добавлю в закладки.

знак участника Артур Хаким
Артур ХакимНовичок
  • сообщений 455
  • на форуме 1 года

Добавлю то, что обычно вылезает на второй месяц работы.

Разбейте список на равные части по числу потоков, так проще следить.

Смотрите не только число, но и разброс подсетей.

знак участника crawlbox
crawlboxЗнаток
  • сообщений 1 860
  • на форуме 4 мес
ip_i_potoki писал: Быстрая проверка списка

У нас на прошлом проекте это выглядело так.

Разбейте список на равные части по числу потоков, так проще следить.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/

Держите нас в курсе.

знак участника seo_kotel
seo_kotelЗнаток
  • сообщений 2 890
  • на форуме 2 мес

Тут легко перепутать два разных момента.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

знак участника Лидия В.
Лидия В.Новичок
  • сообщений 190
  • на форуме 1 года

Расскажу, чем закончилось у меня.

Коротко: считайте по темпу и держите двойной запас.

Разбейте список на равные части по числу потоков, так проще следить.

Отпишитесь, чем закончится, тема полезная.

знак участника Верещак
ВерещакУчастник
  • сообщений 690
  • на форуме 10 мес
ip_i_potoki писал: Быстрая проверка списка

Почти так, но одна деталь меняет вывод.

Обычно хватает тридцати секунд на соединение и шестидесяти на ответ.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/
знак участника batch_run
batch_runЗнаток
  • сообщений 1 790
  • на форуме 4 мес
ip_i_potoki писал: Быстрая проверка списка

На другой машине воспроизводится?

А что показывают логи в момент падения?

Ответить в темеПодписаться

Рядом в разделе

Сеометр, форум специалистов по поиску и аналитике ПравилаУчастникиО форумеЛента 2026