Программно-определяемое хранение объемных данных. Open-E Jovian DSS

К активным хранилищам данных большого объема нужен особый подход, из-за высоких требований к производительности и непрерывности. Одноконтроллерные решения плохи рисками простоя, аппаратные СХД специального назначения всегда дороги, распределенные системы вносят большие сетевые задержки и раздувают накладные расходы размещением нескольких копий данных.  

Open-E Jovian DSS – программное обеспечение для корпоративных хранилищ на основе Linux и файловой системы ZFS. Встроенная поддержка ZFS гибридных пулов RAM / SSD / HDD позволяет сбалансировать производительность и емкость хранения. Объем набирается недорогими дисками NL SAS, ядро горячих данных обслуживают RAM и SSD. 

Предлагаются сопутствующие объемным данным сервисы: динамическое выделение емкости, снэпшоты, сжатие, дедупликация. Хранилища встраиваются в NAS и SAN окружение по 10/40 Гигабит Ethernet.

Целевые рынки: тяжелые базы данных с интенсивным I/O-трафиком, облачный хостинг, хранение и раздача медийного контента. Для кластера высокой доступности данных c NFS- и iSCSI-подключением в минимальной конфигурации достаточно двух серверов на процессорах Intel Xeon E5 26xx и SAS JBOD разделяемого доступа.

Масштабируемость. 128-битная файловая система ZFS не ограничивает емкость хранения, с томами размером до зетабайта, на произвольном количестве дисков. В кластерах хранения JBOD с большим количеством емких дисков подключают по 6-12 Гбит SAS к управляющим серверам.

Сохранность данных. Массивы RAID переносят отказ до трех дисков одновременно. Поддерживается неограниченное количество снэпшотов – опция из разряда must have в эффективных сценариях восстановления данных. Активируется удаленно через командную строку.

Многослойное кэширование. Вместе с файловой системой унаследованы алгоритмы кэширования. Популярные файлы отправляются в одну из категорий «часто используемые» и «недавнего обращения» - раздельные области кэширования в оперативной памяти RAM серверных узлов и на SSD.

Гибридные пулы хранения. Утилизуют I/O-производительность SSD и высокую емкость HDD в единой логике управления.

Сжатие данных и дедупликация “на лету”. Экономия места на дисках, снижение накладных расходов по хранению. В таких системах коэффициент дедупликации может достигать 3:1 – когда для записи 3 ТБ данных достаточно 1ТБ физического пространства на дисках.

Динамическое выделение емкости (thin provisioning). Виртуальное выделение дискового пространства позволяет наращивать емкость хранилища без переформатирования. Избавляет от перерасхода дисков, их можно докупать и вводить в оборот данных по надобности.

Оптимизация под окружение. Серверы легко адаптируются под внешнюю нагрузку и набор сервисов. Подбор процессоров, объема RAM, пулов SSD, cетевых интерфейсов 10-40 Гб Ethernet позволяет парировать самые тяжелые запросы и предоставляет доступ к данным в широкополосном диапазоне, с минимальными задержками.