На главную
Оставить заявку

S3 Архипелаг — объектное хранилище для Data Lakehouse

Быстрое и надежное S3-совместимое объектное хранилище с мгновенным доступом через API и веб-интерфейс

Связаться с экспертом и получить консультацию с демонстрацией решения «Диасофт»

Data Lakehouse

Единое хранилище для аналитики с поддержкой Apache Iceberg и Apache Hudi

Резервное копирование 

Надежное хранение бэкапов с Erasure Coding и защитой от удаления

Микросервисы 

Масштабируемое хранилище для контейнерных приложений с S3 API

ML/AI платформы 

Хранение датасетов, моделей и артефактов машинного обучения

Документооборот

Версионирование файлов и защита от случайного удаления

Импортозамещение 

Замена Amazon S3, Ceph, MinIO
с соответствием требованиям КИИ

Решаемые задачи

S3 API 

полная совместимость с AWS S3, работа с aws-cli, boto3, стандартными SDK

Множество интерфейсов 

S3, FUSE, WebDAV, HDFS, gRPC для любых сценариев интеграции

Erasure Coding 

эффективное использование дисков, накладные расходы 40% вместо 200%

Версионирование 

сохранение предыдущих версий объектов с возможностью восстановления

Lifecycle Policies 

автоматическое управление жизненным циклом: архивирование, перемещение, удаление

Шифрование данных

AES-256 в покое, TLS 1.3 при передаче, ключи хранятся отдельно от данных

Cross-Region Replication

асинхронная репликация в резервный ЦОД для катастрофоустойчивости

Object Lock 

защита от удаления на заданный срок, соответствие требованиям регуляторов

Bitrot Protection 

периодическая проверка контрольных сумм и автоматическое восстановление данных

Функциональность продукта

Хранить любые
объёмы данных

Линейное масштабирование до экзобайт
Эффективная работа с миллионами мелких файлов
Поддержка горячих, тёплых и холодных данных
Автоматическое распределение по узлам кластера

Интегрироваться с любыми системами

Полная совместимость с AWS S3 API
Монтирование как файловая система (FUSE)
Интеграция с Hadoop-экосистемой (HDFS)
Работа со Spark, Trino, Apache Iceberg, Apache Hudi

Соответствовать требованиям регуляторов

Работа на российских ОС (Astra Linux, РЕД ОС, Alt Linux)
Соответствие КИИ, ИСПДн, ГИС

С S3 Архипелаг вы сможете:

Узнать подробнее

Линейная
масштабируемость

Архитектура Master-Volume-Filer позволяет хранить сотни миллиардов файлов без деградации

Горячее
масштабирование

Инфраструктурные компоненты, обеспечивающие выполнение процессов фабрики данных

Консолидация
хранилищ

Замена объектного и файлового хранилища одной платформой — экономия CAPEX и OPEX

Гибридная отказоустойчивость

Репликация для горячих данных, Erasure Coding для холодных — экономия до 50% дисков

Многоуровневая безопасность

Шифрование, LDAP/AD, Kerberos, защита от удаления — соответствие требованиям регуляторов

Простота
эксплуатации

Не требует команды экспертов, веб-интерфейс администрирования, готовые Grafana-дашборды

Ключевые преимущества

Архитектура S3 Архипелага

Интерфейсы
Filer REST
gRPC
WebDAV
FUSE mount S3
S3 Gateway
Сервера хранения
Горячие данные
NVME
Теплые данные
SSD
Холодные данные
HHD
Файловый менеджер
Управление метаданными
Мастерноды
Метаданные
Digital Q.DataBase
Архитектура хранилища с многоуровневым хранением данных и разделением слоев обеспечивает независимое масштабирование метаданных и данных, высокую доступность и гибкость хранения в зависимости от класса данных:
Запросите демо-версию S3 Архипелаг и протестируйте бесплатно
Запросить демо
На основе тестов, проведенных на идентичном железе (6 серверов, 12 NVMe дисков на каждом, 10GbE сеть):

Быстродействие S3 Архипелага

Сравнение потребления ресурсов на 1 TB данных:
S3 Архипелаг показывает стабильную производительность даже при заполнении кластера до 80% (деградация всего -8,6%), что выгодно отличает его от аналогов.

Потребление ресурсов

S3 Архипелаг потребляет в 2–3 раза меньше ресурсов, чем Ceph, что позволяет использовать более дешевое железо или хранить больше данных на существующей инфраструктуре.
Кейсы использования
Data Lakehouse для аналитики
Цели и задачи:
Построить единое хранилище для аналитических данных:
  • Консолидировать данные из разных источников в одном месте
  • Обеспечить работу Apache Spark, Trino, Apache Impala, StarRocks без переписывания кода
  • Поддержать форматы Apache Iceberg и Apache Hudi для ACID-транзакций
  • Снизить затраты на хранение при росте объёмов до петабайт

Какие возможности даёт S3 Архипелаг?
  • Полная совместимость с S3 API — MPP-системы работают через стандартный S3A-коннектор без доработок.
  • Оптимизация для Iceberg и Hudi — доработанный механизм работы с метаданными обеспечивает предсказуемую latency при транзакционных операциях.
  • Lifecycle Policies — автоматическое перемещение старых партиций на Erasure Coding экономит до 50% дискового пространства.
  • Линейное масштабирование — добавление узлов увеличивает ёмкость и производительность без миграции данных.
Резервное копирование и архивы
Цели и задачи:
Организовать надёжное хранение резервных копий и архивов:
  • Хранить бэкапы баз данных, виртуальных машин, файловых серверов
  • Защитить данные от случайного или злонамеренного удаления
  • Снизить стоимость хранения архивных данных
  • Обеспечить катастрофоустойчивость с репликацией в резервный ЦОД

Какие возможности даёт S3 Архипелаг?
  • Object Lock — блокировка объектов на заданный срок, удаление невозможно даже администратором. Соответствует требованиям регуляторов.
  • Erasure Coding — накладные расходы 40% вместо 200% при репликации. На 100 ТБ данных экономия составляет 60 ТБ дискового пространства.
  • Cross-Region Replication — асинхронная репликация в резервный ЦОД для защиты от катастроф.
  • Bitrot Protection — периодическая проверка контрольных сумм и автоматическое восстановление повреждённых блоков
ML-платформа
Цели и задачи:
Создать хранилище для платформы машинного обучения:
  • Хранить датасеты, модели, артефакты экспериментов
  • Обеспечить быстрый доступ к данным при обучении моделей
  • Поддержать версионирование датасетов и моделей
  • Интегрироваться с MLflow, Kubeflow, JupyterHub

Какие возможности даёт S3 Архипелаг?
  • Высокая производительность — более 8 GB/s на запись крупных объектов, latency p50 около 2 ms для мелких файлов.
  • Версионирование — сохранение всех версий датасетов и моделей с возможностью отката к любой точке.
  • S3 API — стандартная интеграция с boto3, MLflow, DVC и другими инструментами ML-пайплайнов.
  • Эффективная работа с мелкими файлами — архитектура оптимизирована для миллионов объектов без деградации.
Импортозамещение S3
Цели и задачи:
Заменить зарубежное объектное хранилище на отечественное решение:
  • Уйти от зависимости от Amazon S3, Azure Blob, Google Cloud Storage 
  • Соответствовать требованиям КИИ, ИСПДн, ГИС
  • Работать в изолированном контуре без доступа в интернет
  • Сохранить совместимость с существующими приложениями

Какие возможности даёт S3 Архипелаг?
  • Полная совместимость с AWS S3 API — приложения работают без изменений, достаточно поменять endpoint.
  • Российские ОС — поддержка Astra Linux (включая «Смоленск»), РЕД ОС, Alt Linux.
  • Работа в закрытом контуре — on-premise развёртывание без внешних зависимостей.
  • Безопасность — шифрование AES-256, интеграция с LDAP/AD и Kerberos, аудит всех операций для SIEM
Организации

Банки и финтех — хранение транзакционных логов, бэкапов, данных для антифрод-аналитики

Ритейл и e-commerce — каталоги товаров, изображения, аналитика поведения покупателей

Телеком — CDR-записи, логи сетевого оборудования, данные биллинга

Госсектор — архивы документов, данные для межведомственного обмена, соответствие КИИ

Производство — для хранения данных IoT-датчиков и недропользователей

Роли

Архитекторы данных — проектирование Data Lakehouse и интеграция с аналитическими системами

DevOps и SRE — развёртывание, мониторинг, автоматизация через Helm и Kubernetes

Инженеры ML — хранение датасетов и моделей, интеграция с MLflow и DVC

Специалисты ИБ — настройка шифрования, политик доступа, аудита для SIEM

Кому подходит

новости и публикации
24.02.2026
«Диасофт» выводит на рынок объектное хранилище для Data Lakehouse и критичных данных
Компания «Диасофт»» анонсирует выход продукта «S3 Архипелаг» – российского S3-совместимого хранилища, созданного для работы с петабайтами данных в архитектурах Data Lakehouse, аналитических системах ...
Читать
25.02.2026
S3 Архипелаг: как мы в Диасофте построили свое объектное хранилище
На связи Илья Шуйков, руководитель продукта «Фабрика данных» компании Диасофт. В этой статье хочу рассказать, зачем мы построили свое объектное хранилище.
Читать
25.04.2026
Новость про установку бесплатной версии
Готовится к публикации
Читать
25.04.2026
Статья на ХАБР
Готовится к публикации
Читать
Остались вопросы?

Оставьте заявку на презентацию Digital Q.DataFactory, получение записи вебинара или консультацию руководителя решения

ОБРАТНАЯ СВЯЗЬ

Продолжая использовать и/или оставаясь на сайте, вы соглашаетесь с Политикой конфиденциальности сайта, включая использование сайтом файлов «cookie».
ОК