RU

Одно имя метрики, разные эксперименты: почему состав выборки надо хешировать

Рядом с метрикой принято хранить версию модели и версию данных, но этого мало. Правило отбора объектов в оценку расходится двумя способами: список и…

метрикивоспроизводимостьвалидацияmlopsбэктестэкспериментыкачество-данных
Habr
RU

ИИ дешевеет, а ваш компьютер дорожает: как OpenAI и Anthropic устроили гонку цен

Цены пошли на спад. 22 сентября Anthropic и OpenAI с разницей примерно в полтора часа выпустили модели дешевле своих предшественников, а DeepSeek от…

aimlmlopsAnthropicOpenAIDDR5ии компанииии моделидайджест-ml
Habr
RU

Зачем Авито нужна своя Inference-платформа для ML/LLM-сервисов: PaaS vs отдельное решение

Привет, Хабр! Меня зовут Антон Алексеев , я ML Ops-инженер в Авито . В этой статье я разберу, почему существующий PaaS — отличный инструмент для веб…

inferencemlopsKServeLLMKubernetesPaaSML-платформаopen sourceML-инфраструктурасезон код будущего
Habr
RU

Зелёный пайплайн ничего не доказывает. Семь способов, которыми quality gate пропускает брак в прод

if roc_auc < 0.85: exit 1 — примерно так выглядит quality gate почти в каждом ML-пайплайне, который мне попадался. В обычном CI то же самое — кол…

qualitygatesquality gatedevopscimlopsмашинное обучениетестированиекачество кодавалидация моделейruvds_статьи
Habr
RU

Зачем нейросети «обвязка»: как превратить LLM в рабочий AI-сервис

Большую языковую модель можно скачать с Hugging Face, развернуть на сервере с GPU и отправить ей первый запрос. Технически LLM уже работает: получае…

aimlmlopsharnessharness engineeringобвязкаобвязка агентаllmllm-модели
Habr
RU

Ищем замену MinIO в условиях импортозамещения: опыт тестирования трех S3-совместимых хранилищ

Привет, я - Иван Засухин, DataOps Лаборатории искусственного интеллекта департамента больших данных Россельхозбанка. Мы одна из команд платформы RAI…

MiniOs3ЗакромаRustFSseaweedfsdataopsmlopsAnalyticsOps
Habr
RU

Как я построил ML-пайплайн для поиска подозрительных транзакций и почему одной классификации оказалось мало

С ростом числа финансовых операций аналитикам всё сложнее вручную разбирать срабатывания систем финмониторинга — а большинство из них ложные. Привет…

mlopsмашинное+обучениефинансовый мониторингml-пайплайнриск-скорингдрейф данныхmlflowapache airflowshapaml
Habr
RU

От 6 часов до 20 минут: как мы ускорили коллаборативную модель в рекомендациях Авито

Привет, я Салават Динмухаметов, senior ML-engineer в команде рекомендаций Авито . В статье расскажу, как мы изменили систему рекомендаций на главной…

рекомендательные системыколлаборативная фильтрацияэмбеддингиmlopskafkagpukubeflow
Habr
RU

Kubernetes без границ: Managed Kubernetes как вычислительный центр для ИИ

Эволюция искусственного интеллекта дошла до стадии, когда загрузка весов нейросети из открытого репозитория сводится к нескольким кликам, тогда как…

vk cloudmanaged kuberneteskubernetes для ииgpu-as-a-servicegpu-кластерымашинное обучениеmlopskubeflowkservenvidia gpu operator
Habr
RU

650 млн точек, 3 поломки и PI System: технический разбор предиктивной аналитики на НПЗ (часть 2)

Часть 2 из 2. В первой части серии мы предсказали отказ насоса за 60 дней и выяснили, что годами чинили не то. Увидели, что материал встретил вашу ж…

машинное обучениеdata engineeringbig dataпромышленностьнефтегазпредиктивная аналитикаtime seriesanomaly detectionmlopsindustrial ocean
Habr
RU

Почему ML-модель получает неправильные признаки: Event Time, Watermarks и Apache Flink

Представьте: вы разрабатываете антифрод-систему для банка. Пользователь совершает пять покупок подряд за пару минут. Все транзакции успешно попадают…

mlmlopsjavaпродакшенapache flinkdata engineeringWatermarkstreamingreal-time MLai
Habr
RU

[Перевод] Масштабирование LLM: от одного чипа до ЦОДа. Глава 5. Инференс

Предыдущая глава Ну а теперь рассмотрим, как нам применить обученный трансформер. И применение уже обученной модели сильно отличается от тренировки,…

llmaimlgpugpu вычисленияанализ и проектирование системmlops
Habr
RU

Книга: «LLM на практике. Большие языковые модели от идеи до внедрения»

Привет, Хаброжители! Искусственный интеллект стремительно развивается, и именно большие языковые модели (LLM) задают направление всей индустрии. Пог…

книги по программированиюкнигаllmmlmlops
Habr
RU

Как за 5 недель построить рекомендательную систему в TravelTech: Kafka и MongoDB вместо Feature Store

Привет! Меня зовут Кристина, я MLOps-инженер в Туту. Занимаюсь тем, что помогаю рекомендательным системам добраться до прода со всеми компромиссами,…

рекомендательные системыmlopskafkaclickhousefeature storefastapicatboosttravel techmongodb
Habr
RU

Бесшовный переход в индустрию: как закрыть разрыв между вузом и реальным ИИ‑проектом

Привет, Хабр, я Анастасия Сапрыкина, работаю на стыке двух миров: академического и индустриального. Сейчас в России активно развивается пр…

образованиегосполитикастратегияискусственный интеллекткарьера в itmlopsии-агентыedtechстажерысайбокс
Habr
RU

CI/CD для данных и моделей на Airflow: как мы деплоим прогноз спроса в «Магните»

Артефакт нашей сборки — не бинарник, а код вместе с терабайтами рассчитанных таблиц. Рассказываем, как из штатных фич Airflow, Spark и Delta Lake у…

mlopssparkairflowdelta lakes3data engineeringмашинное обучениепрогнозирование спросаDataOpsоркестрация пайплайнов
Habr
RU

Коробка с нейросетями: готовая ИИ-инфраструктура, которая просто работает

Привет, Хабр! В день, когда весь мир в очередной раз обсуждает «умные» ассистенты, генеративные сети и спорит, заменит ли ИИ разработчиков, хочется…

к2 нейротехпак-mlии-инфраструктураon-premiseпрограммно-аппаратный комплексвысоконагруженные вычисленияискусственный интеллектmlopsgpuвсемирный день ии
Habr
RU

От legacy до промышленной платформы: инженерная эволюция OSA в «Магнит»

Как мы провели проект через четыре «эпохи» — от ручных запусков на Windows‑планировщике до Spark + k8s на масштабе сет…

data engineerbigdatamlopsdata scienceosapysparkоблачные вычисленияархитектура системыdatalake
Habr