Tech News — Latest News

All EN RU

Свой инструмент для бенчмаркинга ИИ-агентов: архитектура, надёжность и интеграция с Airflow

Всем привет! Мы создаём GraphRAG-систему и нам постоянно приходится тестировать новые гипотезы: менять подходы к поиску по графу, обработку контекста,…

бенчмаркинг python airflow llm-as-a-judge агент

RAG без downtime: настраиваем инкрементальное обновление документов на Qdrant и LangChain

PM: Нам нужно актуализировать базу знаний для ИИ-ассистента, там изменилась инструкция по смене пароля. DevOps: Не проблема, сейчас запущу скрипт, чер…

rag etl-пайплайн qdrant qdrant vector store масштабирование airflow python rag система

Строим машину времени для данных (SCD-2) на движке Trino под управлением Airflow

Сегодня SCD-2-таблицы не только остаются актуальными для медленно меняющихся данных, но и, на мой взгляд, становятся гораздо проще в реализации благод…

scd type 2 trino iceberg airflow lakehouse etl slowly changing dimensions data mesh витрина данных хранилище данных

Код как документация: как мы строим самодокументируемые витрины данных в Почте Mail

В аналитике больших данных есть старая проблема: код ETL-витрин живет своей жизнью, а документация — своей. Изменяешь логику, забываешь обновить описа…

big data apache spark airflow clickhouse sql документация dwh metadata dbt vk tech

Код как документация: как мы строим самодокументируемые витрины данных в Почте Mail

big data apache spark airflow clickhouse sql документация dwh metadata dbt vk tech

Airflow TaskFlow API: внутреннее устройство современного способа писать DAG-и

Немного погрузимся во внутреннее устройство Apache Airflow и разберёмся, что на самом деле происходит за красивым синтаксисом TaskFlow API. Посмотрим,…

airflow Framework Python DE