Architecture Course Home

Системы хранения данных (СХД)

Системы хранения являются платформами на которых строятся современные распределенные системы. Существует большое количество различных систем хранения данных, разработанных под различные сценарии использования. При выборе системы хранения необходимо рассмотреть множество различных факторов. Один из этих факторов - количество данных, которые необходимо обрабатывать учитывая стоимость и скорость обработки. Так же нужно учитывать способ доступа к обрабатываемым данным: получение всех данных за раз, последовательный доступ, произвольный доступ или потоковый по частям. Не маловажную роль играет тип данных, которые мы хотим хранить: бинарные данные (фото, видео), текстовые файлы и т д, вместе с пониманием, каким образом необходимо обновлять эти данные. 

Виды сетевого доступа к хранилищу данных

Для корректной работы системы хранения данных необходимо выбрать способ хранения данных (блоки, файлы, объекты), и вид сетевого доступа. Рассмотрим подробнее варианты сетевого доступа к хранилищу  

Как правило, используется три технологии:

Хранилище с прямым подключением (DAS)

Исторически первый вариант подключения носителей, применяемый до сих пор. Накопитель, с точки зрения компьютера, в котором он установлен, используется монопольно, обращение с накопителем происходит поблочно, обеспечивая максимальную скорость обмена данными с накопителем с минимальными задержками. Также это наиболее дешевый вариант организации системы хранения данных, однако не лишенный своих недостатков. К примеру если нужно организовать хранение данных предприятия на нескольких серверах, то такой способ организации не позволяет совместное использование дисков разных серверов между собой, так что система хранения данных будет не оптимальной: некоторые сервера будут испытывать недостаток дискового пространства, другие же — не будут полностью его утилизировать. Конфигурации систем с единственным накопителем применяются чаще всего для нетребовательных нагрузок, обычно для домашнего применения. Для профессиональных целей, а также промышленного применения чаще всего используется несколько накопителей, объединенных в RAID-массив программно, либо с помощью аппаратной карты RAID для достижения отказоустойчивости и\или более высокой скорости работы, чем единичный накопитель. Также есть возможность организации кэширования наиболее часто используемых данных на более быстром, но менее емком твердотельном накопителе для достижения и большой емкости и большой скорости работы дисковой подсистемы компьютера.

Преимущества

Недостатки

Сеть хранения данных (SAN)

Вместо прямого подключения дискам мы можем собрать их на одном сервере и предоставить к нему сетевой доступ. В данном сценарии индивидуальные машины видят хранилище как набор блоков хранения данных, при этом способ сопоставления этих блоков с физическими устройствами хранения остается скрытым.  Так решается вопрос с утилизацией дискового пространства серверами, а также устраняются точки отказа, неизбежно присутствующие в системах хранения данных на основе DAS. Пространство для хранения данных рассматривается хостом как блочное устройство. Мы можем использовать файловую систему и сохранять данные, аналогично использованию локальных дисков. Сеть хранения данных может быть разбита на три уровня

Преимущества

Недостатки

Сетевое хранилище (NAS)

Представляет собой сетевой сервер, состоящий из большого количества дисков, объединенных в RAID-массивы. В свою очередь этот массив - часть сети, работающей по заданным правилам и протоколам, например NFS, SMB и прочих. Принципиально базируется на DAS, но ключевым отличием является предоставление общего файлового доступа. Так как работа ведется по сети — сама система хранения может быть сколько угодно далеко от потребителей (в разумных пределах разумеется), но это же является и недостатком в случае организации на предприятиях или в датацентрах, поскольку для работы утилизируется полоса пропускания основной сети — что, однако, может быть нивелировано с использованием выделенных сетевых карт для доступа к NAS. Также по сравнению с SAN упрощается работа клиентов, поскольку сервер NAS берет на себя все вопросы по общему доступу и т.п. На практике эта сеть может быть реализована по-разному. К серверу могут быть подключены другие серверы (физические или виртуальные), а также дисковые станции — устройства, которые помогают увеличить объем за счет съемных жестких дисков. 

Преимущества

Недостатки


Классификация систем хранения

Рассмотрев способы доступа к хранилищу можно перейти к основным абстракциям, используемым разными типами хранилищ для доступа к данным. На высоком уровне системы хранения можно разделить на три большие группы

Блочное хранилище

Впервые появились в 1960 году. Основные устройства хранения данных такие как жесткие диски (HDD) или твердотельные накопители (SSD), физически подключенные к серверам, могут рассматриваться как хранилища блоков. В данном типе хранилища данные разбиты на блоки и сохранены как набор чанков с данными. Каждый блок содержит уникальный идентификатор, позволяя системе быстро записывать данные. Поскольку блоки не содержат методанных, это снижает накладные расходы на передачу данных и позволяет серверу эффективно получать доступ к данным в блочном хранилище и извлекать их. 

Схема работы блочной СХД

Блочное хранилище обычно развертывается с использованием сети хранения данных (SAN), которая представляет хранилище другим сетевым устройствам как будто блоки - локально подключенные устройства. Каждому серверу может быть предоставлен практически неограниченный размер диска. Пользователь видит этот диск в интерфейсе операционной системы сервера. Операционная система сервера может подключаться к блокам данных через высокоскоростные интерфейсы FC (Fiber Channel) или iSCSI.

Рассмотрим преимущества данного типа СХД:

Возможные недостатки:

Интересно так же рассмотреть возможные сценарии использования данного типа хранилищ.

Примеры блочных СХД: 

Файловое хранилище

Наиболее популярное абстракция для хранения данных. Построено над блочным хранилищем, предоставляя высокоуровневые абстракции для упрощения работы с файлами и директориями. Данные сохраняются в как фалы в иерархической структуре каталогов. Данный тип хранилища является наиболее распространенным решением для хранения данных общего назначения.

Как и в блочной СХД, в файловой системе каждому файлу присваивается идентификатор. Он включает в себя

Файловая СХД имеет принципиальное отличие от других вариантов хранилищ — это разные уровни директорий, от которых зависит тип доступа к файлам. Рассмотрим эти уровни подробнее:

Хранилище файлов может быть доступно большому количеству серверов с использованием таких сетевых протоколов как SMB/CIFS и NFS. Сервер, получая доступ к файлу, не должен касаться вопросов управления блоками, форматирования томов и т д. С точки зрения архитектуры данный тип хранилища может быть разбит на следующие уровни:

Можно выделить следующие преимущества данного типа СХД

Одним из основных недостатков является ограниченное масштабирование. Чем больше файлов создается в системе, тем медленнее отклик сервера 

Примеры файловых хранилищ:

Хранилища объектов

Данный тип хранилища объединяет данные с уникальными идентификаторами и настраиваемыми методанными.  Объектное хранилище использует плоское адресное пространство в отличие от иерархического файлового хранилища или адресов, распределенных между чанками блоков в блочном хранилище. Плоское адресное пространство облегчает поиск и получение данных. Для получения доступа к данным используются идентификаторы, присваиваемые каждому объекту. Марк Горос, генеральный директор и соучредитель Carnigo, сравнивает такой способ организации со службой парковки, предполагающей выдачу автомобиля. Вы просто оставляете свою машину парковщику, который увозит её на стояночное место. Когда вы приходите забирать транспорт, то просто показываете талон — вам возвращают автомобиль. Вы не знаете, на каком парковочном месте он стоял.

Одним из основных отличий данного типа СХД является то, что объекты, находящиеся внутри хранилища, являются неизменяемыми: их можно удалить или заменить новой версией, но инкрементальне изменения недопустимы. У каждого объекта имеется набор методанных. Таким образом, каждый объект в системе состоит из трех элементов: данных, метаданных и уникального идентификатора — присвоенного адреса. При этом объектное хранилище, в отличие от блочного, не ограничивает метаданные атрибутами файлов — здесь их можно настраивать 

С точки зрения архитектуры, на высоком уровне данный тип хранилища может быть представлен следующим образом

Рассмотрим основные компоненты


Можно выделить следующие преимущества данного типа СХД

К недостаткам можно отнести  

Примерами данного типа хранилищ являются

Сравнение разных типов СХД



Блочное хранилищеФайловое хранилищеХранилище объектов
Возможность изменить контентДаДаНет (поддерживается версионирование объектов)
КонсистентностьСтрогаяСтрогаяСтрогая
МасштабируемостьСредняяВысокаяВысокая
ПроизводительностьОт средней до очень высокойОт средней до высокойОт низкой до средней
Протоколы доступа к даннымSAS/iSCSI/FCStandard file access, CIFS/SMB, and NFSRESTful API
Стоимость поддержкиВысокаяОт средней до высокойНизкая
Хорошо подходит дляВиртуальные машины, базы данныхДоступ к файловой системе общего назначенияБинарные данные, неструктурированные данные




Оригинал на wiki