Один адрес на все хранилища, или как я перестал бояться переездов S3
У меня несколько кластеров Ceph с S3, они стоят в разных ЦОД, и у каждого свой адрес, свои пользователи и свои ключи. Каждый переезд кластера превра…
Последние новости
⚑ Сообщить о проблемеTech news from the best sources
Все темы
- Искусственный интеллект, машинное обучение, нейросети
- Новости сети
- автомобили, мотоциклы, транспортные средства
- вирусы, трояны, уязвимости в ПО, вопросы безопасности
- игры
- мобильные телефоны, смартфоны, сотовая связь, коммуникаторы, КПК
- процессоры
AI-агенты
LLM
Python
ai
ai-агенты
claude
linux
llm
open source
python
ruvds_статьи
Новости
Статьи
автоматизация
ии
ии-агенты
информационная безопасность
искусственный интеллект
машинное обучение
нейросети
программирование
разработка
тестирование
Движки таблиц ClickHouse
Система баз данных ClickHouse предоставляет изобилие разнообразных движков таблиц, из которых, однако, зачастую на практике разработчиками используе…
Переезд S3 без простоя и без привязки к одному облаку: rclone union + serve s3 на практике
«Три зоны доступности» внутри одного облака не спасают, когда отказывает само облако. Собираем S3, который переживает отказ провайдера: один endpoin…
Ищем замену MinIO в условиях импортозамещения: опыт тестирования трех S3-совместимых хранилищ
Привет, я - Иван Засухин, DataOps Лаборатории искусственного интеллекта департамента больших данных Россельхозбанка. Мы одна из команд платформы RAI…
Где заканчивается автопилот в DR: разбор оркестрации ВМ, WORM в S3, конфликтов с СРК и задач DBA
Привет, Хабр! Разбирать вопросы после эфиров — полезная практика. В чате трансляции часто поднимают темы, с которыми инженерам приходится сталкивать…
MinIO заархивировал открытую версию. Что остаётся тем, у кого он уже развёрнут
25 апреля 2026 года репозиторий MinIO заархивировали, а административную часть консоли вырезали из открытой сборки ещё годом раньше. Взамен есть бес…
Семь мест, где «S3-совместимое» хранилище ведёт себя не как AWS
Код, который отлично работает с AWS S3, на Ceph RGW или MinIO может упасть с пустым текстом ошибки. Разбираю семь таких мест из собственного клиента…
Apache Iceberg: Индиана Джонс и Каталог судьбы в Lakehouse
В феврале этого года проект с красивым именем Polaris незаметно стал полноценным проектом фонда Apache. Новость прошла как-то мимо, ну стал и стал,…
Iceberg и Paimon — строительные блоки Streaming Lakehouse
Привет, Хабр! Я Алексей Новаков, ведущий инженер данных в Рунити. Сегодня разберемся, зачем Lakehouse понадобился streaming, почему одного Iceberg д…
Начинаем в багбаунти: 10 неочевидных уязвимостей S3-интеграций в веб-приложениях
Всем привет! Меня зовут Сергей Бобров aka BlackFan . Я работаю в Лаборатории Касперского, занимаюсь анализом защищенности мобильных и веб-приложений…
Bucket Access Policy: когда авторизацию возвращают в хранилище, а прокси выключают
У нас в публичном облаке VK Cloud у каждого бакета Object Storage есть Bucket Access Policy. Это набор правил в формате JSON, который лежит на самом…
Bucket Access Policy: когда авторизацию возвращают в хранилище, а прокси выключают
У нас в публичном облаке VK Cloud у каждого бакета Object Storage есть Bucket Access Policy. Это набор правил в формате JSON, который лежит на самом…
Августовский дайджест — клонирование приложений, навыки агентов, режим стримера и документация
Последний месяц лета закрываем длинным списком релизов для AI-агентов: документация, MCP-сервер, скиллы, навыки, файлы в чате и четыре новые модели…
Облако по чертежу: как собрать инфраструктуру под проект
IT‑инфраструктура подобна зданию: в её фундаменте — вычислительные мощности, а выше — надстройки, включающие внутренние коммуник…
Как мы делали многоуровневую память для корпоративных AI-агентов в VK AI Space
Привет, Хабр. Меня зовут Сергей Врулин, я Team Lead в команде агентов VK AI Space — корпоративной платформы для создания и запуска AI-агентов. В июл…
Как мы делали многоуровневую память для корпоративных AI-агентов в VK AI Space
Привет, Хабр. Меня зовут Сергей Врулин, я Team Lead в команде агентов VK AI Space — корпоративной платформы для создания и запуска AI-агентов. В июл…
Bucket Access Policy: когда авторизацию возвращают в хранилище, а прокси выключают
Бакет в S3 — не просто папка для файлов, а ресурс, на котором хранилище принимает решение о доступе к объектам. Пока доступ контролирует только ngin…
Инфраструктура данных 2052: что, если у данных больше не будет «прода» и «истории»?
Если мысленно вернуться в 1980-е , аналитика во многом находилась буквально над production Данные появлялись в операционных системах, затем из них с…
Обзор технологий S3-хранилища: как изменился подход к хранению данных и обеспечению их безопасности
Объектные хранилища, работающие по протоколу S3, уже давно стали де-факто стандартом для работы с неструктурированными данными — от бэкапов корпорат…
Обзор технологий S3-хранилища: как изменился подход к хранению данных и обеспечению их безопасности
Объектные хранилища, работающие по протоколу S3, уже давно стали де-факто стандартом для работы с неструктурированными данными — от бэкапов корпорат…
Июльский дайджест — сервер за 30 секунд, новые модели и токены на агента
Вместо долгого начала про июльские отпуска и шуток про жару просто похвастаемся цифрами. Тридцать секунд — столько теперь занимает создание сервера.…
Релиз DataSafeS3 v1.3.0
Что делать, если Docker Desktop и L2 multicast живут в разных мирах, а доказать failover кластера перед тегом v1.3.0 всё равно нужно? Под капотом: S…
Apache Iceberg: Индиана Джонс и Каталог судьбы
parquet - данные лежат в открытом формате - казалось бы, бери кто хочешь. Но есть неприметный артефакт, от которого зависит, увидите вы таблицы или…
И еще немного извращений из мира прокси и VPN
Жизнь диссидента-экспериментатора не сидит на месте, а копилка безумных находок пополняется быстрее, чем успеваешь про них написать. Продолжаем то,…
CI/CD для данных и моделей на Airflow: как мы деплоим прогноз спроса в «Магните»
Артефакт нашей сборки — не бинарник, а код вместе с терабайтами рассчитанных таблиц. Рассказываем, как из штатных фич Airflow, Spark и Delta Lake у…
MinIO, MongoDB, PostgreSQL для хранения 25 лет истории стоимости акций
💾 MinIO, MongoDB, PostgreSQL для хранения 25 лет истории стоимости акций Когда строишь эмулятор для проверки торговой стратегии 20 акций на 25 лет и…
Синхронизация объектов в S3‑хранилище с помощью MinIO CLI
Представим типичную инфраструктурную задачу. В компании для хранения артефактов сборки, бэкапов сервисов или пользовательских файлов применяется S3‑…
Два self-hosted S3, которые доверяют друг другу: DataSafeS3 v1.1.0
v1.1.0: убрали HTTP-костыль для sink’ов, закрыли /metrics, Teams в UI, trusted clusters. Про v1.0.3 и типичный «pairing failed» на Docker — внутри.…
Обновление контента игровых клубов. Отказ от внешнего S3-провайдера. Стоимость и механика
Реальный кейс: как из ручного хаоса с флешками и «у кого что скачалось» выросла централизованная система обновления игрового кон…
Логи, бэкапы, образы, артефакты: где мы используем S3 внутри Рег.облака
Привет, Хабр! На связи Игорь Шишкин, я руковожу отделом разработки облачной платформы Рег.облака. Когда инженеру нужно где-то сложить данные, первая…