Системы хранения данных Диамант ВОЛГА

В современных условиях параллельная обработка колоссальных объемов неструктурированных данных требует принципиально новых подходов к организации файловых систем. Российская компания ДИАМАНТ разработала высокоскоростную программно-определяемую платформу ВОЛГА, предназначенную для создания единых масштабируемых сред, объединяющих физически разнородные типы хранилищ — от сверхбыстрых NVMe до ленточных библиотек — в единое логическое пространство имен с автоматическим управлением жизненным циклом файлов.

Продуктовое семейство ВОЛГА разделено на два базовых технологических решения. Файловая система совместного хранения ВОЛГА нацелена на максимальную производительность и потоковую передачу данных в реальном времени, ориентируясь на совместную работу медиа-групп, вещательных компаний, студий пост-продакшена, обработку несжатого 4K/8K видео, аналитику Big Data и высоконагруженных СУБД. Гибридная файловая система ВОЛГА.АРХИВ предназначена для долговременного хранения больших массивов данных и организации корпоративных архивов, сочетая преимущества общего дискового пространства и глубокой интеграции с холодными уровнями хранения.

Ключевые технические характеристики платформы

• В пиковых режимах файловая система способна выдавать до 23 ГБ в секунду в рамках одного потока.
• Платформа обеспечивает задержку менее 1 мс при 2 500 параллельных потоках и поддерживает до 6 500 одновременных потоков.
• Реализован одновременный и прозрачный параллельный доступ к файлам из-под Windows, macOS и Linux с поддержкой протоколов CIFS/SMB, NFS, S3 и специализированного DLC.
• Для минимизации задержек ввода-вывода задействуются подключения через Fibre Channel, InfiniBand или iSER/RDMA.
• В качестве носителей могут использоваться NVMe- и SSD-накопители с задержкой менее миллисекунды.

Главное эксплуатационное преимущество системы заключается во встроенном инструменте Information Lifecycle Management, позволяющем настраивать автоматические правила перемещения файлов между уровнями хранения. Активные данные размещаются на NVMe- или SSD-накопителях; при снижении интенсивности использования файлы автоматически перемещаются на более экономичные уровни хранения. Для пользователя файл остаётся доступен по прежнему пути в едином пространстве имён.

Платформа спроектирована на базе полностью суверенного программного обеспечения, совместима с POSIX-стандартами и открытыми API, протестирована на бесшовную работу с отечественными СРК. Решение активно внедряется в медиаиндустрии, научно-исследовательских институтах и государственном секторе для централизации файловых архивов.