позиции · сбор данных · отчёты
реклама IPrazon Network: приватные прокси IPv4 и SOCKS5, около 12 000 адресов, безлимитный трафик, тест до 2 часов

Разделы · Отчёты и выгрузки

Как хранить сырые данные, чтобы можно было пересчитать

8 ответов · 2 039 просмотров
знак участника Ковтун
КовтунНовичок
  • сообщений 468
  • на форуме 11 мес
Отчёты и выгрузки

Ищу способ, который переживёт смену проекта и человека.

Сборка занимает около трёх часов, из них половина уходит на пересчёт. Выгрузка выходит около двух миллионов строк, таблица её не держит.

Как хранить сырые данные, чтобы можно было пересчитать: разбор в цифрах
Как хранить сырые данные, чтобы можно было пересчитать: как это выглядит у меня

Подскажите, где я ошибаюсь.

знак участника Айгуль Р.
Айгуль Р.Новичок
  • сообщений 440
  • на форуме 1 года
Ковтун писал: Как хранить сырые данные, чтобы можно было п…

Уменьшите потоки вдвое и замерьте заново.

знак участника Дарья Смолина
Дарья СмолинаУчастник
  • сообщений 820
  • на форуме 9 мес

Проверьте, что настройка вообще применилась.

знак участника Бабенко Д.
Бабенко Д.Новичок
  • сообщений 402
  • на форуме 1 года

Начинал с того же, потом переделал.

Динамику показывайте за период, который отражает работу: месяц для регулярных проектов, неделя для быстрых.

знак участника Ерохин
ЕрохинНовичок
  • сообщений 495
  • на форуме 1 года
полезный ответ

Скорость решает не всё, но и терять её не хочется. Я перешёл на адреса с безлимитным трафиком, когда старый поставщик начал резать канал на длинных прогонах.

Проверьте, что настройка вообще применилась.

знак участника Сергей Птицын
Сергей ПтицынУчастник
  • сообщений 1 165
  • на форуме 6 мес

До этого работало? Что менялось перед тем, как сломалось?

Какая версия программы и что с настройками по умолчанию?

знак участника Жигарев
ЖигаревНовичок
  • сообщений 178
  • на форуме 1 года

Какая версия программы и что с настройками по умолчанию?

знак участника Марат Илюхин
Марат ИлюхинЗнаток
  • сообщений 2 295
  • на форуме 3 мес

У меня картина совпадает почти полностью.

Отчёт должен читаться без вас. Если для понимания нужен созвон, значит он не готов.

знак участника Женя Кольцов
Женя КольцовУчастник
  • сообщений 1 270
  • на форуме 8 мес

Добавлю то, что обычно вылезает на второй месяц работы.

Сырые данные храните отдельно от посчитанных. Ошибка в расчёте тогда стоит пересчёта, а не повторного сбора.

let Istochnik = Web.Contents(adres, [Timeout=#duration(0,0,2,0)]),
    Tablica = Csv.Document(Istochnik, [Delimiter=";"])
in Tablica

Тема нужная, подписался.

Ответить в темеПодписаться

Рядом в разделе

Сеометр, форум специалистов по поиску и аналитике ПравилаУчастникиО форумеЛента 2026