Заказчик просит одно, инструменты дают другое.
Обстановка простая, а ответа не нахожу.
История хранится за два года, объём растёт быстрее, чем ожидалось. Проверка на пустые ячейки делается руками, и это уже неприлично. Сводка собирается по 200 проектам, каждую неделю.
Подскажите, где я ошибаюсь.
У меня картина совпадает почти полностью.
Проверку на пустые ячейки автоматизируйте в первую очередь. Это самая частая ошибка и самая заметная для заказчика.
Проверьте, что настройка вообще применилась.
Был случай, когда всё сошлось только на третий день разбора.
Отчёт должен читаться без вас. Если для понимания нужен созвон, значит он не готов.
Тема нужная, подписался.
Если считаете расход заранее, смотрите сразу на безлимит по трафику. У меня прокси IPv4 под сбор данных, два терабайта в месяц уходят незаметно и в счёт не попадают.
Логи в помощь, без них это гадание.
Уменьшите потоки вдвое и замерьте заново.
До этого работало? Что менялось перед тем, как сломалось?
Это на всех площадках или на одной?
Тут есть тонкость, о которой обычно забывают.
Отчёт должен читаться без вас. Если для понимания нужен созвон, значит он не готов.
Хороший разбор, добавлю в закладки.
Согласен с предыдущим ответом, но с одной оговоркой.
Падение позиций показывайте вместе с причиной или хотя бы с гипотезой. Голая цифра вызывает панику и лишние разговоры.
Отчёт должен читаться без вас. Если для понимания нужен созвон, значит он не готов.
Проверял это на своей задаче, вывод такой же.
Сырые данные храните отдельно от посчитанных. Ошибка в расчёте тогда стоит пересчёта, а не повторного сбора.
Отпишитесь, чем закончится, тема полезная.
Всё верно написали выше, добавлю от себя пару деталей.
Динамику показывайте за период, который отражает работу: месяц для регулярных проектов, неделя для быстрых.
Уменьшите потоки вдвое и замерьте заново.
Держите запас, ровно по расчёту работать не выйдет.
Расскажу, чем закончилось у меня.
Отчёт должен читаться без вас. Если для понимания нужен созвон, значит он не готов.
let Istochnik = Web.Contents(adres, [Timeout=#duration(0,0,2,0)]),
Tablica = Csv.Document(Istochnik, [Delimiter=";"])
in TablicaТут ничего нового не скажу, только подтвержу.
Падение позиций показывайте вместе с причиной или хотя бы с гипотезой. Голая цифра вызывает панику и лишние разговоры.
let Istochnik = Web.Contents(adres, [Timeout=#duration(0,0,2,0)]),
Tablica = Csv.Document(Istochnik, [Delimiter=";"])
in TablicaДобавлю то, что обычно вылезает на второй месяц работы.
Динамику показывайте за период, который отражает работу: месяц для регулярных проектов, неделя для быстрых.
Если поможет, напишите здесь же, пригодится следующим.