BAUM Inform

+7 495 120 30 75
+7 499 267 00 63

О КОМПАНИИ

БАУМ-ИНФОРМ осуществляет разработку распределенных систем хранения данных с 2012 года.

Ведется совместное тестирование ПТК с Российскими производителями программных и аппаратных средств.

Основными преимуществами решения является возможность создать сеть хранения данных на основе жестких дисков модулей хранения (серверов) для обеспечения высокой гибкости, масштабируемости и производительности решения. Благодаря объединению ресурсов хранения и вычислительных ресурсов БАУМ РСХД поддерживает масштабирование до нескольких тысяч узлов.

РСХД обладает наличием подсистемы информационной безопасности, соответствующей требованиям Российского законодательства.

На данный момент БАУМ-ИНФОРМ располагает сервисными центрами на территории Российской Федерации, что позволяет осуществлять своевременную и качественную поддержку продукции.

РЕШЕНИЯ

ВВЕДЕНИЕ

Рост объемов данных наблюдается во всех областях информационных технологий. Вместе с ростом объема данных растет сложность классических систем хранения данных. Классические блочные и файловые СХД, архитектура которых разработана более 20 лет назад, не справляются с большими объемами данных. Большие объемы данных требуют нового подхода к хранению и обработке. Такой подход реализован в продукте BAUMAN ALYTICS – система, изначально разработанная для работы с Большими Данными.

Принципиальное отличие BAUMAN ALYTICS от классических решений - кластерная архитектура. СХД не содержит контроллеров и дисковых полок, а представляет собой набор равнозначных узлов, объединенных с помощью выделенной дублированной сети Ethernet 10/40 Gbps с RDMA. Каждый узел содержит диски, процессоры, память и сетевые интерфейсы для клиентского доступа. Вся дисковая емкость кластера формирует единый пул хранения и единую файловую систему, доступ к которой возможен через любой из узлов.

Такая архитектура обеспечивает практически безграничное масштабирование (до 144 узлов и 50ПБ в единой ФС), простоту использования независимо от объема, линейную масштабируемость и емкости, и производительности и высокую эффективность.

ЦЕЛИ ПРОЕКТА

Целями проекта является построение инфраструктуры с территориальным распределением хранимых данных с следующими техническими особенностями:
 

  • Отказоустойчивость
    Кластеризация как на уровне управляющих контроллеров, так и на узлах хранения.
  • Резервируемость
    Схема резервирования до 2048N
  • Мультипротокольность
    Поддержка блочного, файлового и объектного доступа.
  • Высокопроизводительность
    Ошеломительный доступ к данным. Поддержка до 400 Эксабайт кэша.
  • Масштабируемость
    до 2048 Зеттабайт полезного пространства

ОПИСАНИЕ РЕШЕНИЯ

Программно-аппаратный комплекс BAUMAN ALYTICS позволяет объединять в единый кластер десятки центров обработки данных Заказчика, объединенных высокоскоростными каналами передачи данных. При этом возможно организовать многоуровневое хранение данных как на локальных, так и распределенных узлах хранения. Каждый узел управления хранит общий каталог атрибутов хранимых файлов, объектов, блоков. Контроллерные узлы и узлы хранения объединяются в единый кластер для обеспечения централизованного администрирования и разграничения доступа.

Как и в классических системах доступ к файловым системам разграничивается на основе политик безопасности, в том числе с поддержкой механизмов мандатного доступа. К примеру из Центрального ЦОД возможен доступ к данным ЦОД филиала в одностороннем порядке. Это позволяет проводить контекстный и атрибутный поиск по множеству узлов, при этом каждый узел управления осуществляет ограниченный поиск в пределах своего ЦОД одновременно со всеми узлами кластера. BAUMAN ALYTICS позволяет обеспечить доступ по разным протоколам:

 

  • Блочный - iSCSI
  • Файловый - CIFS/SMB, NFS, pNFS
  • Объектный - Manila, Cinder, Swift, S3 
  • Больших данных – Hadoop, Apache Map Reduce API

Этот список будет увеличиваться по мере развития продукта BAUMAN ALYTICS.

Для защиты данных применяется помехоустойчивое кодирование.

МАСШТАБИРУЕМОСТЬ РЕШЕНИЯ

BAUMAN ANALYTICS

ФУНКЦИОНАЛ

Универсальность программно-аппаратного комплекса BAUM достигается за счет полной интеграции с множеством решений по работе с “Большими данными”. Как уже отмечалось выше BAUM обеспечивает блочный, файловый, объектный доступ к данным, а также поддерживается формат работы с “большими данными” для интеграции с аналитическими системами.

Система спроектирована таким образом, чтобы обеспечить максимальную пропускную способность для работы с большим объемом данных в единой среде. Автоматизация размещения файлов позволяет оптимизировать использование емкости хранилища и значительной экономии при администрировании кластером.

Встроенные средства управления позволяют эффективно управлять эксабайтами данных и миллиардами файлов и объектов, объединенных единое пространство имен.

Технология Активного Файлового Управления (АФУ) обеспечивает доступ к данным с низким временем отклика из различных территориально удаленных точек за счет распределения кэша метаданных по различным узлам системы. Функционал АФУ дает возможность объединить в единое пространства имен множество территориально распределенных узлов. АФУ делает единое пространство имен глобальным за счет автоматического управления процессами асинхронной репликации данных между территориально распределенными кластерными узлами.

ОСНОВНЫЕ ПРЕИМУЩЕСТВА РЕШЕНИЯ

  • Отказоустойчивость на локальном уровне
     
  • Высокая производительность
     
  • Гибкая масштабируемость
     
  • Поддержка кластеризации из множества узлов
     
  • Территориально-распределенное резервирование данных
     
  • Асинхронная репликация данных на большие расстояния
     
  • Единая распределенная файловая система с поддержкой контекстного и атрибутного поиска
     
  • Возможность организации иерархической структуры хранения с возможностью вытеснения данных на ленточные накопители
     
  • Интегрированные средства резервного копирования/восстановления
     
  • Организация доступа к данных по протоколам iSCSI, NFS, CIFS, POSIX, HDFS API, OpenStack (Manila, Swift, Cinder)
     
  • Поддержка шифрования и гарантированного удаления информации
     

АППАРАТНАЯ ЧАСТЬ

Архитектурно BAUM представляет собой кластер состоящий из узлов управления и узлов хранения с подключенными дисковыми полками объединенных 10/40/100G Ethernet в зависимости от нагрузки и объема хранимых данных. Узлы управления, как и узлы хранения представляют собой серверы х86 архитектуры, однако для обеспечения быстрого доступа к горячим данным и для кэширования помимо оперативной памяти используются сверхбыстрые NVME диски. Доступ к СХД.БАУМ предоставляется через сети Ethernet.

  • Лучшая отказоустойчивость
     
  • Быстрое время восстановления RAID с минимальным влиянием на общую производительность системы даже при использовании медленных дисков
     
  • Лучшая утилизация дисков за счет равномерного распределения данных по все дискам
     
  • Уникальные алгоритмы контроля целостности данных
     

ОБУЧЕНИЕ

​​

БАУМ-ИНФОРМ осуществляет обучение...

BAUM Inform

+7 495 120 30 75
+7 499 267 00 63