RU

7 ошибок в оценке качества LLM‑систем в продакшене

LLM‑фича может месяцами показывать хорошие метрики и при этом регулярно ошибаться на реальных запросах. В статье разберём 7 типи…

LLMоценка качества LLMLLM evaluationLLM-as-a-JudgeнаблюдаемостьOpenTelemetryтрассировкапродакшенметрики качестватестирование LLM
Habr
RU

OpenTelemetry как единый стандарт наблюдаемости для распределённых систем

Когда метрики, логи и трассировки живут в разных системах, поиск причины сбоя превращается в ручное сопоставление фрагментов. В стать…

OpenTelemetryнаблюдаемостьраспределённые системытелеметрияметрикилогированиераспределённая трассировкаOpenTelemetry CollectorOTLPсэмплирование.
Habr
RU

Как внедрить AI (Claude) и отследить его влияние на команду

Пошаговое руководство по внедрению Claude Team и Claude Code в команду: подготовка инфраструктуры, настройка, мониторинг, метрики и лучшие практики…

Claude CodeAIвнедрение AIEngineering ManagementOpenTelemetryGrafanaинженерные метрикимониторинг
Habr
RU

Как приручить legacy-код: безопасная модернизация без заморозки фич

Как модернизировать legacy-код без остановки продукта: Strangler Fig Pattern, feature flags, shadow testing и безопасная миграция данных. Практика и…

ИнтернетAPIJavaGitОпросPythonRubyMySQLПрактикаSQLРефакторингРаботаTorGitHubБотыHRMITФинтехICORedisQAБэкендTwitterИграПриложениеСерверKubernetesБиблиотекианалитикOpenTelemetryPostgreSQLDeFiGrafanaБизнесLegacyТехникаСтатьи
Tproger
RU

[Перевод] Логи, метрики и счёт в конце месяца: как телеметрия превращается в архитектурный долг

После инцидента команда почти всегда хочет видеть больше: добавить поле в лог, сохранить еще одну метку, оставить дашборд «на всякий случай». В моме…

observabilityтелеметриялогиOpenTelemetryметрикикардинальностьмониторингтрейсингsreархитектурный долг
Habr
RU

Структурированное логирование и трейсинг в Node.js: @cleverbrush/log и @cleverbrush/otel

Статья о том, как получить наблюдаемость (observability) в приложении с минимальным кодом, а бонусом получить структурированные логи с типизированны…

структурированное логированиеOpenTelemetryNode.jsTypeScriptтрейсингobservabilityCleverbrushxpenserсхемная валидацияфинансовый трекер
Habr
RU

Почему ваши логи бесполезны и как это починить за полчаса

Когда продакшен падает в три часа ночи, строка ERROR Something went wrong не помогает никому. В статье разбираем, почему привычные те…

structured loggingструктурированные логиJSON-логилогированиеrequest_idobservabilityOpenTelemetrystructlogslogдиагностика ошибок