позиции · сбор данных · отчёты
реклама IPrazon Network: приватные прокси IPv4 и SOCKS5, пул 12 000 адресов, безлимитный трафик, бесплатный тест до 2 часов

Разделы · Короткие вопросы

Сколько хранить сырые данные

15 ответов · 2 219 просмотров
знак участника Мельник И.
Мельник И.Знаток
  • сообщений 1 655
  • на форуме 3 мес
Короткие вопросы

Спрошу без предисловий.

Детали такие.

Нужно на завтра, потому спрашиваю коротко. Объём небольшой, разовый.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/

Есть мысли, куда копать?

семантика это не список, это структура
знак участника csv_i_slezy
csv_i_slezyЗнаток
  • сообщений 2 180
  • на форуме 3 мес
полезный ответ
Мельник И. писал: Сколько хранить сырые данные

Пришёл к этому не сразу, сначала сделал ошибку.

Начните с настроек по умолчанию и меняйте по одной.

Пары минут на пробу хватит, чтобы понять порядок.

знак участника serpwatch
serpwatchЗнаток
  • сообщений 2 610
  • на форуме 2 мес

Не гоните с первого дня, дайте себе запас.

знак участника Емельян Ц.
Емельян Ц.Знаток
  • сообщений 2 130
  • на форуме 3 мес

Ставьте паузу с разбросом, не ровную.

знак участника obhod_night
obhod_nightУчастник
  • сообщений 1 495
  • на форуме 5 мес

Сколько адресов и какой темп при этом стоит?

знак участника Артём Гринь
Артём ГриньУчастник
  • сообщений 1 284
  • на форуме 4 мес

Считайте по темпу, всё остальное вторично.

знак участника Полина Ржевская
Полина РжевскаяУчастник
  • сообщений 715
  • на форуме 10 мес

Сколько это длится и с какой частотой повторяется?

Какой объём и за какое окно?

знак участника thread_limit
thread_limitЗнаток
  • сообщений 2 620
  • на форуме 2 мес
Мельник И. писал: Сколько хранить сырые данные

Так и делаю, работает без сюрпризов.

Начните с настроек по умолчанию и меняйте по одной.

знак участника Григорий Сташ
Григорий СташНовичок
  • сообщений 172
  • на форуме 1 года

Ставьте паузу с разбросом, не ровную.

знак участника Мамедов А.
Мамедов А.Новичок
  • сообщений 240
  • на форуме 1 года
Мельник И. писал: Сколько хранить сырые данные

Подтверждаю по своей практике.

Смотрите не только число, но и разброс подсетей.

Сохраните сырое, потом пересчитаете как надо.

знак участника grafik_cen
grafik_cenЗнаток
  • сообщений 1 720
  • на форуме 4 мес

Так и есть, проходил через это в прошлом году.

Если сомневаетесь, берите меньше и растите.

Берите с запасом, потом сократите по замеру.

знак участника Тарас Ю.
Тарас Ю.Новичок
  • сообщений 480
  • на форуме 1 года

Есть возможность повторить прогон и сравнить?

Какие паузы между запросами?

знак участника Ростислав Е.
Ростислав Е.Участник
  • сообщений 965
  • на форуме 7 мес

Расскажу, чем закончилось у меня.

Ответ зависит от площадки, universal тут нет.

Считайте от объёма и окна, остальное следствие.

знак участника tochka_zamera
tochka_zameraВетеран
  • сообщений 3 355
  • на форуме 1 мес
Мельник И. писал: Сколько хранить сырые данные

Держите запас, ровно по расчёту работать не выйдет.

знак участника Виктор Лаптев
Виктор ЛаптевНовичок
  • сообщений 230
  • на форуме 1 года
Мельник И. писал: Сколько хранить сырые данные

Считайте по темпу, всё остальное вторично.

знак участника nochnoy_progon
nochnoy_progonЗнаток
  • сообщений 1 540
  • на форуме 5 мес
Мельник И. писал: Сколько хранить сырые данные

Верно, и это не единичный случай.

Смотрите не только число, но и разброс подсетей.

curl -s -o /dev/null -w "%{http_code} %{time_total}\n" -x $ADRES https://example.org/

Интересно, чем закончится.

Ответить в темеПодписаться

Рядом в разделе

Сеометр, форум специалистов по поиску и аналитике ПравилаУчастникиО форумеЛента 2026