Сборка отчёта занимает три часа, ищем узкое место

Пишу, потому что делаю это каждую неделю и хочу упростить.

Проверка на пустые ячейки делается руками, и это уже неприлично. Выгрузка выходит около двух миллионов строк, таблица её не держит. Сборка занимает около трёх часов, из них половина уходит на пересчёт.

Хочется услышать, чем это заканчивается на практике.

Сколько адресов и какой темп при этом стоит?

Осторожнее с этим выводом, он верен не всегда.

Разделяйте отчёт для заказчика и рабочую таблицу для себя. Попытка совместить портит оба.

let Istochnik = Web.Contents(adres, [Timeout=#duration(0,0,2,0)]),
    Tablica = Csv.Document(Istochnik, [Delimiter=";"])
in Tablica

Интересно, чем закончится.

Поправлю цифру, остальное верно.

Сравнение с конкурентами показывайте по одинаковой методике. Иначе разговор уходит в спор о цифрах.

Интересно, чем закончится.

Начните с малого объёма и растите постепенно.

Первый раз списал на случайность, второй раз уже нет.

Хранить историю в таблице можно до определённого объёма. Дальше нужна база, и переезжать лучше заранее.

Разделяйте отчёт для заказчика и рабочую таблицу для себя. Попытка совместить портит оба.

Так же считаю, и коллеги считают так же.

Сравнение с конкурентами показывайте по одинаковой методике. Иначе разговор уходит в спор о цифрах.

Графики делайте скучными и одинаковыми. Красота в отчёте мешает читать цифры.

let Istochnik = Web.Contents(adres, [Timeout=#duration(0,0,2,0)]),
    Tablica = Csv.Document(Istochnik, [Delimiter=";"])
in Tablica

До сих пор помню, чем это закончилось.

Динамику показывайте за период, который отражает работу: месяц для регулярных проектов, неделя для быстрых.

let Istochnik = Web.Contents(adres, [Timeout=#duration(0,0,2,0)]),
    Tablica = Csv.Document(Istochnik, [Delimiter=";"])
in Tablica

Разбейте прогон на части, станет ровнее.

Проверял это на своей задаче, вывод такой же.

Данные, собранные с перебоями, помечайте прямо в отчёте. Молчание об этом всплывает в самый неподходящий момент.

Добавлю тему в закладки.

Это на всех площадках или на одной?

Что показывает простой запрос из консоли?

Уменьшите потоки вдвое и замерьте заново.