RU

Как мы перестроили корпоративную аналитику: ClickHouse и XLTable

Когда корпоративное хранилище данных становится слишком сложным, проблема постепенно перестает быть только технической. Сложно не только загрузить д…

ClickHouseXLTableOLAP-кубыаналитическое хранилищеDWHбизнес-аналитикааналитика данныхPostgreSQLETLBI
Habr
RU

Данные построчно правильные, а итог неверный: ошибки JOIN и гранулярности в аналитике

Ошибки в аналитических витринах часто скрываются за корректным числом строк и успешно выполненным SQL‑запросом. Разберём, как неправи…

SQLбазы данныханалитика данныхJOINPostgreSQLвитрины данныхкачество данныхETLDWHData Warehouse
Habr
RU

Как проверять аналитический отчёт, если красивого графика недостаточно

В одном из проектов я с нуля собирал BI-аналитику платных медицинских услуг. В отчёте нужно было показывать динамику доходов и помогать находить рас…

проверка аналитических отчётовBIPower BIDAXкачество данныханалитическая витринаETLприёмочное тестирование
Habr
RU

От исходных данных до аналитической витрины: что происходит между ними

В одном из проектов мне нужно было с нуля собрать аналитику платных медицинских услуг в крупной медицинской организации. На выходе должен был появит…

аналитическая витринаETLDWHBIмодель данныхкачество данныхPower BIdata lineage
Habr
RU

Как автоматизировать выгрузку данных из 1С: SQL или готовый ETL-инструмент

Как организовать регулярную выгрузку данных из 1С, если ручной экспорт уже не справляется с объемом и частотой обновлений? В статье сравниваются два…

1Свыгрузка данныхавтоматизацияSQLETLинтеграция данныхбазы данныхData Engineeringобработка данныханалитика данных
Habr
RU

Один контракт данных, разные адаптеры: как перестать писать миграцию магазина заново

Первый файл, который я получил при переезде своего магазина с InSales, парсер прочитал как одну длинную строку мусора. Выгрузка заказ…

миграция данныхETLадаптерыидемпотентностьимпорт данныхInSalesPostgreSQLNext.jsинтернет-магазинblue-green
Habr
RU

Data Storytelling на примере нестандартного дашборда: РПЛ и знаки зодиака

Что если задать BI-системе вопрос, который выходит за рамки рутинной аналитики? Будет ли она также эффективна? Эта идея родилась из корпоративного ш…

Data StorytellingBI-системагибкий BIдашбордвизуализация данныхETLочистка данныхseleniumphytonпарсинг на python
Habr
RU

AI‑assisted development в малом бизнесе: как я собрала систему обработки отзывов для ресторанной сети

Я маркетолог и до этого проекта не писала код. Но с помощью GPT собрала рабочую систему сбора, обработки и аналитики отзывов для ресторанной сети: 1…

AI-assisted developmentChatGPTавтоматизация бизнес-процессовCloudflare WorkersCloudflare D1serverlessETLинтеграция APIdata engineeringавтоматизация отзывов
Habr
RU

Как я устал писать парсер под каждый прайс и сделал из этого библиотеку

У нас на проекте десятки прайсингов на топливо: один вендор шлёт CSV, другой Excel, третий JSON на вебхук. Данные одни и те же, но колонка цены везд…

pythonпарсинг данныхETLpydanticобработка csvинтеграция данныхllmконвейер данныхвалидация данныхopen source
Habr
RU

Как мы перевезли свой интернет-магазин с InSales на собственный движок на Next.js

IWANT - наш собственный fashion-магазин. Несколько лет он жил на InSales: на старте это правильный выбор: быстро, без разработки, всё из коробки. Но…

Next.jsInSalesмиграция интернет-магазинаe-commerceETLTypeScriptPostgreSQLSEO миграцияself-hosted152-ФЗ
Habr
RU

Как за один вечер я написал сервис инвентаризации оргтехники для филиальной сети из 16 локаций

Знакомая работает в IT-департаменте организации с 16 филиалами и ~5000 единиц оргтехники на балансе. Попросила: “Сделай сервис, чтобы загрузить фотк…

PythonFastAPISQLiteETLpandasинвентаризацияClaude visionOpenRouterSQLAlchemy
Habr
RU

Как мы построили сквозную аналитику в Power BI

Всем привет! Меня зовут Никита и я CEO компании VSL-BI. Мы занимаемся внедрением BI-аналитики. К нам обратилась компания из сферы продажи стройматер…

сквозная аналитикаPower BIBI-аналитикаЯндекс ДиректGoogle AdsЯндекс МетрикаБитрикс24ETLData Engineeringбизнес-аналитика
Habr
RU

Как я сделал “Авиасейлз для логистики”: агрегатор заявок из 16+ источников

В логистике проблема часто не в том, что нет данных. Проблема в том, что данные разбросаны по разным местам. Одни заявки лежат во внутренней системе…

логистикаавтоматизацияпарсинг данныхагрегатор заявокETLPostgreSQLPythonGoogle SheetsFastAPI
Habr