- •Факультет Радио и Телевидение Кафедра ТиЗВ им. С.И. Катаева
- •Курс преподают:
- •Хранение
- •Хранение
- •Системы и способы архивирования информации..
- •Архивы
- •Архивы
- •Основные недостатки традиционного архива
- •Проблема замены изношенных деталей устаревшего оборудования
- •Переход на цифровые системы хранения данных (СХД)
- •Архив может выполнять несколько функций:
- •Архивы
- •Сроки хранения медиаматериалов:
- •Архив вечного хранения
- •Единицы количества информации
- •Ленточные архивы
- •Технологию LTO (Linear Tape Open), разработали IBM, HP и Quantum.
- •Ленточные архивы
- •Ленточные архивы
- •Ленточные архивы
- •Ленточные архивы
- •Ленточные архивы
- •Реальное время вывода информации складывается из времени перемещения исполнительного механизма, загрузки контента, загрузки
- •Массивы на жестких дисках имеет смысл применять только для архивов временного хранения, непрерывно
- •Sony и Panasonic создали лазерный диск на 1 Тб
- •Реклама SONY
- •Роботизированная библиотека Panasonic LB-DH8 на оптических дисках
- •Современные электронные библиотеки строятся как на ленточных, так и на оптических кассетах
- •Устройство оптических кассет
- •Архив зачастую рассматривается как что-то постоянное, но используемые технологии всегда меняются.
- •Не существует одного-единственного идеального решения такой системы.
- •Примеры категорий требований к медиа хранилищу
- •Технология.
- •"DAM" (digitali it l asset management) и "MAM" ((media asset management)
- •RAID – (англ. redundant array of independent disks — избыточный массив независимых дисков)
- •Два диска — минимальное количество для построения «зеркального» массива
- •RAID 2
- •Вмассиве RAID 3 из n дисков данные разбиваются на куски размером меньше сектора
- •RAID 4 похож на RAID 3, но отличается от него тем, что данные
- •RAID5 получил широкое распространение, в первую очередь, благодаря своей экономичности. Производительность RAID 5
- •Выводы:
- •RAID 5 – аналогичен RAID 3, но запись значений четности распределена между всеми
- •RAID 0 — дисковый массив повышенной производительности с чередованием, без отказоустойчивости;
- •AXF – открытый формат нового поколения.
- ••У формата AXF есть ряд неоспоримых достоинств:
- •Стандарт SMPTE ST 2034-1-2017
- •SMPTE® PUBLISHES ARCHIVE EXCHANGE FORMAT (AXF) STANDARD
- •OAIS – открытая информационная система
- •AIP – архивный инфопакет
- •Системы и способы архивирования информации
- •Цена – это то, что вы платите во время приобретения. Расходы – это
- •Tech 3358 Media Storage Framework Model
- •Стандарт описания мультимедийной информации MPEG 7
- •Стандарт MPEG-7 состоит из следующих частей:
- •Материал, охарактеризованный описаниями MPEG-7, может быть доступным в различных форматах, с разными схемами
- •Дублинское ядро
- •Метаданные
- •B2B (англ. Business to Business) — термин, определяющий вид информационного и экономического взаимодействия,
- •ГОСТ Р 56476-2015
- •ГОСТ Р 54719-2011
- •ГОСТ Р 54719-2011
- •ГОСТ Р 54719-2011
- •ГОСТ Р 54719-2011
- •Построение цифрового архива начинается с создания базового комплекса оборудования:
- •ВГТРК создал многоуровневую систему хранения, которая разделяет материалы по качеству, объему и времени
- •Форматы цифровых потоков аудиосигнала
- •В 2016 году министерство культуры поручило НИКФИ произвести работу по вопросам цифровой архивизации.
- •Оборудование
- •Сканирование киноплёнок
- •Сканирование киноплёнок
- •Сканирование киноплёнок
- •Сканирование киноплёнок
- •Влажное сканирование
- •Сканирование киноплёнок
- •Что такое Центр обработки данных (ЦОД)?
- •Что такое Центр обработки данных (ЦОД)?
- •Специальное помещение
- •Кондиционирование помещений
- •Система охлаждения ЦОД
- •Персонал, мониторинг
- •Пример характеристик действующего ЦОД
- •Технические требования к ЦОД
- •Таблица норм по Классификатору TIER
- •Выбор: Иметь или арендовать?
- •Проблемы безопасности
- •Определение из Википедии
- •ОБЛАЧНЫЕ ВЫЧИСЛЕНИЯ
- •ОБЛАЧНЫЕ ВЫЧИСЛЕНИЯ: ОСНОВНЫЕ ПОНЯТИЯ
- •Что такое облачные вычисления?
- •Технологии в облаках
- •Услуги на подъеме
- •Клаудберстинг (Cloudbursting/Overdraft)
- •Виртуальные частные «облака» (Virtual Private Cloud Computing)
- •Гибридные «облака» (Hybrid Cloud Computing)
- •Гибридное облако
- •Обеспечение безопасности «облачных» вычислений (Cloud-Computing Security Concerns)
- •Интеллектуальные облака
- •проф., д.т.н. Мишенков С.Л.
RAID – (англ. redundant array of independent disks — избыточный массив независимых дисков) — технология виртуализации данных, которая объединяет несколько дисков в логический элемент для избыточности и повышения производительности.
Аббревиатура «RAID» изначально расшифровывалась как «redundant array of inexpensive disks» («избыточный (резервный) массив недорогих дисков», так как они были гораздо дешевле дисков SLED (Single Large Expensive Drive)). Именно так был представлен RAID его создателями: Петтерсоном (David A. Patterson), Гибсоном (Garth A. Gibson) и Катцом (Randy H. Katz) в 1987 году.
Со временем «RAID» стали расшифровывать как «redundant array of independent disks» («избыточный (резервный) массив независимых дисков»), потому что для массивов приходилось использовать и дорогое оборудование (под недорогими дисками подразумевались диски для ПЭВМ).
RAID 0 (striping — «чередование») — дисковый массив из двух или более жёстких дисков без резервирования. Информация разбивается на блоки данных фиксированной длины и записывается на оба/несколько дисков поочередно, то есть, один блок на первый диск, а второй блок на второй диск соответственно.
Схема RAID 0
42
Два диска — минимальное количество для построения «зеркального» массива
RAID 1 (mirroring — «зеркалирование») — массив из двух (или более) дисков, являющихся полными копиями друг друга.
(+): Обеспечивает приемлемую скорость записи и выигрыш по скорости чтения при распараллеливании запросов.[1]
(+): Имеет высокую надёжность — работает до тех пор, пока функционирует хотя бы один диск в массиве.
(-): Недостаток RAID 1 в том, что по цене двух жестких дисков пользователь фактически получает объем лишь одного
Схема RAID 1
43
RAID 2
Массивы такого типа основаны на использовании кода Хемминга.
Диски делятся на две группы: для данных и для кодов коррекции ошибок, причём если данные хранятся на 2n – n - 1 дисках, то для хранения кодов коррекции необходимо дисков (в сумме 2n - 1 дисков). Данные распределяются по дискам, предназначенным для хранения информации, так же, как и в RAID 0, то есть они разбиваются на небольшие блоки по числу дисков. Оставшиеся диски хранят коды коррекции ошибок, по которым в случае выхода какого-либо жёсткого диска из строя возможно восстановление информации. Метод Хемминга давно применяется в памяти типа ECC и позволяет на лету исправлять однократные и обнаруживать двукратные ошибки.
44
Вмассиве RAID 3 из n дисков данные разбиваются на куски размером меньше сектора (разбиваются на байты или блоки) и распределяются по n -1 дискам.
Ещё один диск используется для хранения блоков чётности.
ВRAID 2 для этой цели применялся диск, но большая часть информации на контрольных дисках использовалась для коррекции ошибок на лету, в то время как большинство пользователей удовлетворяет простое восстановление информации в случае поломки диска, для чего хватает информации, умещающейся на одном выделенном жёстком диске.
Отличия RAID 3 от RAID 2: невозможность коррекции ошибок на лету и меньшая избыточность.
Достоинства:
•высокая скорость чтения и записи данных;
•минимальное количество дисков для создания массива равно трём.
Недостатки:
•массив этого типа хорош только для однозадачной работы с большими файлами, так как время доступа к отдельному сектору, разбитому по
дискам, равно максимальному из интервалов доступа к секторам каждого из дисков. Для блоков малого размера время доступа намного больше времени чтения.
•большая нагрузка на контрольный диск, и, как следствие, его надёжность сильно падает по сравнению с дисками, хранящими данные.
Схема RAID 3
45
RAID 4 похож на RAID 3, но отличается от него тем, что данные разбиваются на блоки, а не на байты. Таким образом, удалось отчасти «победить» проблему низкой скорости передачи данных небольшого объёма. Запись же производится медленно из-за того, что чётность для блока генерируется при записи и записывается на единственный диск. Из систем хранения широкого распространения RAID-4 применяется на устройствах
хранения компании NetApp (NetApp FAS), где его Схема RAID 4 недостатки успешно устранены за счет работы дисков в
специальном режиме групповой записи, определяемом используемой на устройствах внутренней файловой системой WAFL.
46
RAID5 получил широкое распространение, в первую очередь, благодаря своей экономичности. Производительность RAID 5 заметно ниже, в особенности на операциях типа Random Write (записи в произвольном порядке), при которых производительность падает на 10-25 % от производительности RAID 0
RAID 6 — похож на RAID 5, но имеет более высокую степень надёжности — три диска данных и два диска контроля четности (используется для защиты от двойных неисправностей). Обеспечивает работоспособность после одновременного выхода из строя двух дисков — защита от кратного отказа.
Схема RAID 5
Схема RAID 6
47
Выводы:
RAID 0 – простое распараллеливание, веерная запись/чтение блоками на все диски. Имеет самую высокую производительность, минимальную цену на 1 ГБ хранения, но нет защиты от сбоя. Поскольку RAID 0 определяет простейший вариант построения массива – без избыточности дисков, то, строго говоря, он даже не является RAID. Тем не менее, этот уровень официально утвержден консорциумом по стандартизации RAID (RAID Advisory Board, RAB) и широко используется на практике.
RAID 1 – зеркалирование, то есть дублирование всех записей на две идентичные группы дисков. Обеспечивается самая высокая степень защиты критически важных данных, но как следствие – вдвое меньший доступный объем хранения. На практике в основном используется в двухдисковом варианте для хранения небольших объемов критически
важных данных.
RAID 3 – входной поток данных разбивается на блоки, по всем битам которых вычисляются контрольные значения четности. Запись/чтение осуществляется параллельно на все диски, но при этом для контрольных данных выделяется отдельный диск. При сохранении высокого быстродействия (сравнимого с RAID 0) данные не теряются при выходе из строя одного (любого) из дисков.
48
RAID 5 – аналогичен RAID 3, но запись значений четности распределена между всеми дисками. Кроме того, уменьшен размер блоков записываемых данных, что увеличивает быстродействие системы при большом количестве данных, что увеличивает быстродействие системы при большом количестве запросов на запись/ чтение небольших файлов. Этот уровень является одним из самых популярных и обеспечивает оптимальное сочетание быстродействия и надежности.
RAID 6 –параллельно рассчитываются два независимых значения четности, которые распределяются между всеми дисками. Сохранность данных обеспечивается при выходе из строя даже двух дисков. Однако этот уровень требует очень большого объема вычислений (восстановление данных при замене неисправных дисков на новые может длиться несколько дней).
49
RAID 0 — дисковый массив повышенной производительности с чередованием, без отказоустойчивости;
RAID 1 — зеркальный дисковый массив;
RAID 2 — зарезервирован для массивов, которые применяют код Хемминга; RAID 3 и 4 — дисковые массивы с чередованием и выделенным диском чётности; RAID 5 — дисковый массив с чередованием и «невыделенным диском чётности»;
RAID 6 — дисковый массив с чередованием, использующий две контрольные суммы, вычисляемые двумя независимыми способами;
RAID 10 — массив RAID 0, построенный из массивов RAID 1;
RAID 01 — массив RAID 1, построенный из массивов RAID 0 (имеет низкую отказоустойчивость);
RAID 50 — массив RAID 0, построенный из массивов RAID 5;
RAID 05 — массив RAID 5, построенный из массивов RAID 0;
RAID 60 — массив RAID 0, построенный из массивов RAID 6;
RAID 06 — массив RAID 6, построенный из массивов RAID 0.
50
51
52
53
