Динамические квоты и лимиты: как не завалить очередь в highload
Представьте: ваш сервис Y генерирует 10 000 событий в секунду, а сервис X может проглотить только 500. И при этом нельзя потерять ни одного события, а…
Latest News
⚑ Report a ProblemTech news from the best sources
All topics
- игры
AI
Gear
News
Tech
agents
ai
api
architecture
automation
beginners
career
claude
devchallenge
devops
javascript
llm
machinelearning
mcp
opensource
performance
productivity
programming
python
react
security
showdev
tutorial
typescript
webdev
Apache Kafka End of Life: Kafka Versions EOL Every 4 Months — Are You Behind?
Apache Kafka's release cadence is fast. A new minor version ships roughly every four months. EOL dates arrive quickly — and because Kafka sits at the …
PostgreSQL и аналитика: что меняется, когда хранилище становится общим
HTAP — одна из главных тем в мире СУБД. Вокруг PostgreSQL массово появляются конструкции с внешними аналитическими движками со сво…
How to analyze the cost of Kafka?
Which side are you on: "This is just what Kafka costs at scale" or "We should switch to a cheaper Kafka provider"? At Conduktor , our field team works…
Building a Real-Time Kafka + Cassandra Pipeline
Introduction Apache Kafka and Apache Cassandra pair effectively because they complement each other's strengths: Kafka handles high throughput, real-ti…
A Beginners guide to Real-time Data Streaming with Apache Kafka
Introduction Ever wondered how banks are able to detect and stop fraud in real-time? This is how they do it. Banks process thousands of transactions e…
Resurrecting SARA: Building a Polished Web Control Center for an Automated AI Video Pipeline
This is a submission for the GitHub Finish-Up-A-Thon Challenge What I Built I built the SARA Pipeline Control Center —a web-driven graphical orchestra…
I kept improving my .NET order pipeline after a CTO left feedback. Here is where it ended up.
A few weeks ago I published an article about an event-driven order pipeline I built in .NET. A CTO named Andrew Tan left a comment pointing out that m…
Apache Kafka for Beginners: Building Real-Time Streaming Systems with Python
Apache Kafka is widely recognized as the go-to way system for real-time event streaming. Modern systems across banking, e-commerce, healthcare, gaming…
How Apache Kafka Powers Real-Time Data Pipelines
Most standard data pipelines run on a schedule. You use tools like Airflow and dbt to extract and transform large batches of API data once a day. Howe…
KubeCon Amsterdam 2026: The Industrialization of ML - A Deep Dive into Uber’s AI Platform Architecture.
This article serves as a technical follow-up to our KubeCon 2026 coverage, providing a comprehensive deep dive into the architecture and evolution of …
Kafka, таксономии и удаление событий: как исключить обработку неактуальных сообщений
В рамках задачи по обработке XBRL-таксономий возникло требование: если таксономия удалена до обработки событий расчёта кэша, эти события не должны при…
Optimizing the Edge: Advanced AV1 Implementation for Android TV in 2026
The 2026 Context: From "Testing" to "Triage" In my previous post, I discussed why AV1 is no longer optional for Fire TV Stick 4K Max users. But as we …
A Beginner’s Guide to Apache Kafka: The Engine of Real-Time Data
Introduction Imagine you are running a massive online store. Every second, hundreds of users are clicking items, adding them to carts and making purch…
Apache Kafka: как настроить тестирование сообщений в топиках
Привет, Хабр! Я SDET-инженер в SimbirSoft Александр, в этой статье я предлагаю вам: Рассмотреть основы Kafka, ее архитектуру и как она работает. • Выя…
Открытое ТЗ для пет-проекта: сервис поиска пропавших людей
Долго думал, в каком формате это написать, в итоге решил по-простому - рассказать, что есть, и кому это может пригодиться. Мы с коллегой делали выпуск…
Yet another end-to-end streaming dashboarding example
Introduction In this post, we present an introductory example using Apache Pinot to ingest an Apache Kafka stream. This is an introductory post that b…
Kafka with Go Part 1 — Understanding Async Systems, Distributed Architecture, and Your First Kafka Publisher/Subscriber
Introduction Modern web applications are no longer just simple static websites. Years ago, many websites were mostly: static pages blogs content websi…
ClickHouse для больших данных: полный гайд по интеграции с NoSQL‑экосистемой
Когда классические SQL‑базы падают под аналитической нагрузкой, а Hadoop‑кластер напоминает чемодан без ручки — пора искать новое …
A senior engineer spotted a bug in my pipeline. I fixed it the same day. Here is what I learned.
A few weeks ago I published an article about an event-driven order pipeline I built in .NET with Kafka and Azure Service Bus. Someone left a comment t…
Why 80% of Kafka Clusters Would Fail a SOC 2 Audit Tomorrow
The Uncomfortable Number We aggregated findings from 50 production Kafka cluster scans. 80% of them had at least one finding that would fail a SOC 2 T…
Ursa — a new Diskless Lakestream engine for Kafka
The future of Kafka is diskless topics + native Apache Iceberg / Delta Lake integration Intro Ursa is a relatively new engine that's being fitted into…
Starting Enterprise-wide Kafka Governance
Technical leadership isn't always about having the right title; it’s about having the right influence. When you are operating without direct authority…
Автоматизация тестирования на Go: стратегия и реализация с нуля
В микросервисной архитектуре ошибка — это не просто баг в отдельном сервисе. Это сорванный релиз, нестабильные интеграции, потерянные заказы и ча…
Обзор Агредатор
На связи Сергей Скирдин, технический директор компании «Белый код». Поставил себе цель — сделать обзоры на шины данных из реестра отечественного ПО. С…
Про 11 типичных ошибок при проектировании интеграции с помощью Kafka на примерах
Всем привет! На связи Антон Воробьёв — архитектор в Альфа-Банке. Некоторое время назад у нас появился нативный порт C-клиента librdkafka, который сдел…
How We Improved Payment System Throughput by 25% Using Apache Kafka at a Fortune 500 FinTech
How We Improved Payment System Throughput by 25% Using Apache Kafka at a Fortune 500 FinTech By Disha Sune — Java Backend Engineer | Spring Boot | Kaf…
Loki «Next Wave»: как Grafana Labs переписала правила логирования на GrafanaCON 2026
Всем привет. В этой статье расскажу о новостях касаемо Loki. О том что было представлено на GrafanaCON 2026 в Барселоне. Чего нам ждать от новой архит…
The Postmortem of a 20-Minute Kafka 3.8 Outage That Delayed 1M Order Messages
On October 12, 2024, a misconfigured Kafka 3.8 broker idempotent write setting caused a 20-minute total outage that delayed 1,047,892 order messages, …