позиции · сбор данных · отчёты
реклама IPrazon Network: приватные прокси IPv4 и SOCKS5, пул 12 000 адресов, безлимитный трафик, бесплатный тест до 2 часов

Разделы · Отчёты и выгрузки

Excel против базы данных для хранения истории замеров

4 ответов · 2 082 просмотров
знак участника Стрельцов
СтрельцовУчастник
  • сообщений 1 080
  • на форуме 7 мес
Отчёты и выгрузки

Собираю сводку по многим проектам, и вот где узкое место.

Вводные, чтобы не гадать.

История хранится за два года, объём растёт быстрее, чем ожидалось. Выгрузка выходит около двух миллионов строк, таблица её не держит. Данных за год около сорока миллионов строк.

let Istochnik = Web.Contents(adres, [Timeout=#duration(0,0,2,0)]),
    Tablica = Csv.Document(Istochnik, [Delimiter=";"])
in Tablica
Excel против базы данных для хранения истории замеров: разбор в цифрах
Excel против базы данных для хранения истории замеров: как это выглядит у меня

Кто держит похожие объёмы, отзовитесь.

знак участника Алина Прошина
Алина ПрошинаНовичок
  • сообщений 140
  • на форуме 1 года
Стрельцов писал: Excel против базы данных для хранения истори…

Считаю так же, и цифры у меня близкие.

Автоматическую рассылку сводки ставьте на утро понедельника. К этому времени данные за неделю уже полные.

В отчёте нужна не только динамика, но и объём выборки. Падение на трёх запросах и на трёх тысячах это разные новости.

Пусть висит, такие вопросы всплывают постоянно.

знак участника Симаков
СимаковУчастник
  • сообщений 780
  • на форуме 9 мес

Настройка применилась вообще?

знак участника Саша Верхов
Саша ВерховНовичок
  • сообщений 152
  • на форуме 1 года

Похоже на правду, у меня цифры близкие.

Автоматическую рассылку сводки ставьте на утро понедельника. К этому времени данные за неделю уже полные.

Динамику показывайте за период, который отражает работу: месяц для регулярных проектов, неделя для быстрых.

знак участника Тимофей Бек
Тимофей БекУчастник
  • сообщений 610
  • на форуме 11 мес

У меня это вскрылось только на сверке данных.

Сырые данные храните отдельно от посчитанных. Ошибка в расчёте тогда стоит пересчёта. Собирать заново не придётся.

Графики делайте скучными и одинаковыми. Красота в отчёте мешает читать цифры.

let Istochnik = Web.Contents(adres, [Timeout=#duration(0,0,2,0)]),
    Tablica = Csv.Document(Istochnik, [Delimiter=";"])
in Tablica

Если поможет, напишите здесь же, пригодится следующим.

Ответить в темеПодписаться

Рядом в разделе

Сеометр, форум специалистов по поиску и аналитике ПравилаУчастникиО форумеЛента 2026