
- •Лекция 01: Вводные замечания Основные понятия, принципы и ограничения реляционных баз данных Основные определения
- •Принципы, реализуемые реляционными субд
- •Ограничения реляционных баз данных
- •Реляционная судб ms sql Server
- •Ms sql Server как система управления обработкой транзакций
- •Ms sql Server как система поддержки принятия решений
- •Службы ms sql Server Серверная часть системы
- •Клиентская часть системы
- •Лекция 02: Что делают и за что отвечают администраторы баз данных Microsoft sql Server
- •Инсталляция и конфигурирование
- •Инсталляция программного обеспечения
- •Конфигурирование аппаратуры и программного обеспечения
- •Безопасность
- •Аудит системы
- •Обычная работа
- •Резервное копирование и восстановление
- •Управление пользователями
- •Прочая обычная работа
- •Уровень качества обслуживания
- •Мониторинг и настройки производительности
- •Состав системы и планирование мощности
- •Обеспечение периодов работоспособности системы
- •Планирование периодов неработоспособности
- •Восстановление после аварий
- •Документирование
- •Документация о конфигурации
- •Системный журнал
- •Документация о структуре системы
- •Планы обычного технического обслуживания
- •Планы восстановления после аварий
- •Проектирование и разработка
- •Создание модели данных и анализ
- •Проектирование базы данных
- •Разработка хранимых процедур
- •Разработка приложений
- •Информационная помощь другим сотрудникам
- •Прочие обязанности администратора баз данных
- •Администрирование кластера
- •Работа в службе технических консультаций для пользователей
- •Оценка закупаемого оборудования и программного обеспечения
- •Слежение за мощностью системы
- •Типы данных
- •Значение null
- •Правила порождения идентификаторов
- •Системные таблицы
- •Временные таблицы
- •Пользовательские таблицы
- •Физическая архитектура баз данных
- •Страницы и группы страниц
- •Файлы и группы файлов
- •Лекция 04: Основы программирования в ms sql Server Реляционная алгебра
- •Операции реляционной алгебры
- •Реализация операций реляционной алгебры в языке sql
- •Описание синтаксиса языка Transact-sql Управляющие конструкции
- •Логические операторы
- •Лекция 05: Создание и использование умолчаний, ограничений и правил
- •Умолчания
- •Определение и модифицирование умолчаний с помощью t-sql
- •Оператор create table с атрибутом default
- •Оператор alter table с атрибутом default
- •Оператор create default и процедура sp_bindefault
- •Процедура sp_unbindefault
- •Ограничения
- •Создание и модифицирование ограничений с помощью t-sql Ограничение not null
- •Ограничение unique
- •Ограничение primary key
- •Ограничение foreign key
- •Ограничение check
- •Правила
- •Создание Rule-объекта с помощью t-sql
- •Лекция 06: Создание и использование индексов Что такое индекс?
- •Понятия индексирования
- •Индексные ключи
- •Простые индексы
- •Составные индексы
- •Уникальность индекса
- •Уникальный индекс
- •Неуникальные индексы
- •Типы индексов
- •Кластеризованные индексы
- •Некластеризованные индексы
- •Полнотекстовые индексы
- •Использование коэффициента заполнения для предупреждения расщеплений страниц
- •Создание индексов
- •Использование Management Studio
- •Категория «Общие»
- •Категория «Идентификация»
- •Категория «Конструктор таблиц»
- •Спецификация пространства данных
- •Характеристики заполнения
- •Использование t-sql
- •Лекция 07: Программируемые объекты в ms sql Server Пользовательские функции sql Server
- •Функции Scalar
- •Функции Inline
- •Функции Multistatement
- •Изменение функций
- •Удаление функций
- •Использование sql Server Management Studio
- •Хранимые процедуры
- •Примеры использования хранимых процедур
- •Лекция 08: Другие программируемые объекты ms sql Server Определение триггера в стандарте языка sql
- •Реализация триггеров в среде ms sql Server
- •Примеры использования триггеров
- •Курсоры
- •Запрос курсора
- •Обработка курсоров
- •Преимущества использования курсоров
- •Курсоры базовой таблицы
- •Статические курсоры
- •Последовательные курсоры
- •Последовательные курсоры «только для чтения»
- •Курсоры, управляемые набором ключей
- •Работа с объединениями
- •Правила выбора типа курсора
- •Получение блокировок
- •Неявное преобразование типа курсора
- •Лекция 09: Проектирование системы Microsoft sql Server
- •Системные требования
- •Системное приложение
- •Oltp (системы оперативной обработки транзакций)
- •Dss (системы поддержки принятия решений)
- •Системы пакетной обработки данных
- •Требования
- •Требования к уровню обслуживания
- •Производительность
- •Мощность
- •Обеспечение работоспособности
- •Размещение базы данных
- •Журнал транзакций
- •Файлы данных
- •Приложение
- •Архитектура
- •Производительность и масштабируемость
- •Проектирование системы безопасности
- •Уровни системы безопасности Система безопасности уровня сервера
- •Система безопасности уровня базы данных
- •Права собственности на объект
- •Лекция 10: Microsoft sql Server и Microsoft Cluster Services Разновидности отказов
- •Обзор mscs
- •Основные понятия
- •Компоненты кластера
- •Программное обеспечение mscs для управления кластером
- •Взаимосвязь между серверами
- •Разделяемая дисковая система
- •Подсистемы ввода-вывода
- •Внутренняя raid-система
- •Внешняя raid-система
- •Категории приложений, работающих с кластерами
- •Режимы mscs
- •Активно-пассивные кластеры
- •Активно-активные кластеры
- •Примеры кластеризованных систем
- •Пример 1 – система с высокой готовностью со статическим балансированием нагрузки
- •Пример 2 – система с «горячим резервированием» с максимальной готовностью
- •Пример 3 – кластеризация части сервера
- •Пример 4 – только виртуальные серверы, без переходов по отказам
- •Конфигурирование sql Server для работы на кластере
- •Планирование конфигурации
- •Задание времени восстановления
- •Конфигурирование sql Server для активно-пассивных кластеров
- •Конфигурирование sql Server для активно-активных кластеров
- •Лекция 11: Транзакции и блокировка транзакций
- •Что такое транзакция?
- •Acid-свойства
- •Атомарность
- •Согласованность
- •Изолированность
- •Поведение параллельных транзакций
- •Задание уровня изолированности
- •Устойчивость
- •Режимы транзакций
- •Режим автофиксации
- •Явный режим
- •Фиксирование транзакций
- •Создание вложенных транзакций
- •Неявный режим
- •Откаты транзакций
- •Автоматические откаты
- •Программируемые откаты
- •Точки сохранения
- •Блокировка транзакций
- •Возможности управления блокировками
- •Уровни блокировок
- •Режимы блокировки
- •Разделяемая блокировка
- •Блокировка изменений
- •Монопольная блокировка
- •Блокировка намерения
- •Блокировка схемы
- •Блокировка массовых изменений
- •Блокирование и взаимоблокировки
- •Лекция 12: Управление пользователями и системой безопасности
- •Разрешение удалённого доступа
- •Разрешение удалённых соединений
- •Обеспечение безопасности внешнего доступа
- •Управление доступом к экземплярам sql Server
- •Выбор режима проверки подлинности
- •Настройка режима проверки подлинности
- •Соединение с экземпляром sql Server
- •Предоставление доступа пользователям и группам Windows
- •Предоставление доступа именам входа sql Server
- •Принудительное применение политики паролей
- •Управление разрешениями для экземпляра
- •Получение информации о принадлежности к серверной роли
- •Запрет доступа пользователям
- •Рекомендации по управлению доступом
- •Применение схем и ролей. Общие принципы
- •Управление доступом в службах отчётов
- •Управление доступом в службах уведомлений
- •Управление доступом в интеграционных службах
- •Управление доступом в службах репликации
- •Управление доступом для sql Server Agent
- •Управление доступом для Database Mail
- •Управление доступом к базе данных с помощью протокола http
- •Лекция 13: Репликации
- •Что такое репликация базы данных?
- •Понятия репликации Компоненты репликации
- •Издатели
- •Дистрибьюторы
- •Подписчики
- •Типы репликации
- •Репликация моментальных снимков
- •Репликация транзакций
- •Репликация слиянием
- •Данные репликации
- •Публикации
- •Push-подписка и pull-подписка
- •Push-подписка (принудительная)
- •Pull-подписка (по запросу)
- •Агенты репликации
- •Snapshot Agent (Агент создания снимков состояния)
- •Репликация слиянием
- •Репликация моментальных снимков
- •Лекция 14: Средства автоматического администрирования
- •Средства автоматического конфигурирования sql Server
- •Динамическое управление памятью
- •Как действует динамическое управление памятью
- •Пул памяти
- •Параметры конфигурирования памяти sql Server
- •Другие параметры динамического конфигурирования
- •Параметр locks (блокировки)
- •Параметр recovery interval (интервал восстановления)
- •Параметр user connections (количество соединений с пользователями)
- •Статистика
- •Команда create statistics
- •Процедура sp_createstats
- •Команда update statistics
- •Процедура sp_autostats
- •Контрольные точки
- •Планы обслуживания баз данных
- •Использование мастера для создания плана обслуживания
- •Лекция 15: Автоматизация административных задач с помощью службы sqlServerAgent
- •Задания
- •Создание задания в Management Studio
- •Использование t-sql
- •Просмотр журнала выполнения задания
- •Использование Management Studio
- •Использование t-sql
- •Предупреждения
- •Протоколирование сообщений в журнале событий
- •Создание предупреждения о событии sql Server
- •Создание предупреждения о производительности sql Server
- •Операторы
- •Лекция 16: Резервное копирование Microsoft sql Server
- •Воспроизведение
- •Отказы системы
- •Отказы оборудования
- •Отказы программного обеспечения
- •Человеческие ошибки
- •Журнальное протоколирование в sql Server Журнал транзакций
- •Поток откладываемой записи
- •Последовательная запись в журнал
- •Размер журнала транзакций
- •Воспроизведение с помощью журнала транзакций
- •Свойства журнала транзакций
- •Непротоколируемые операции
- •Bulk copy и программа bcp
- •Текстовые операции
- •Контрольные точки
- •Операции контрольной точки
- •Конфигурирование интервала между контрольными точками
- •Методы резервного копирования
- •Полное резервное копирование
- •Разностное резервное копирование
- •Резервное копирование журнала транзакций
- •Резервное копирование группы файлов
- •Резервное копирование файла данных
- •Комбинирование разностных резервных копий и резервных копий журнала транзакций
- •Выполнение резервного копирования
- •Создание логических устройств резервного копирования
- •Создание устройств резервного копирования с помощью t-sql
- •Создание удалённого устройства резервного копирования
- •Резервное копирование с помощью Management Studio
- •Лекция 17: Полная модель восстановления
- •Модель восстановления с неполным протоколированием
- •Восстановление базы данных из резервных копий
- •Извлечение информации резервного копирования
- •Восстановление базы данных через интерфейс среды sql Server Management Studio
- •Восстановление базы данных при простой стратегии резервного копирования с использованием t-sql
- •Восстановление базы данных при полной стратегии резервного копирования с использованием t-sql
- •Восстановление системных баз данных
- •Восстановление базы данных master
- •Восстановление баз данных msdb и model
Файлы и группы файлов
Файлы базы данных и журнала транзакций могут размещаться в томах с файловой системой FAT и NTFS, но не могут располагаться в сжатых томах.
В MS SQL Server каждая база данных имеет, минимум, два файла: один для хранения данных и один для журнала транзакций. Более сложные базы данных имеют несколько файлов для данных и журнала транзакций. Эти файлы могут объединяться в группы для упрощения администрирования базы данных. Каждый файл может располагаться на отдельном диске. Такой подход очень эффективен при использовании множества физических дисков. Например, журнал транзакций можно расположить на отдельном физическом диске, так что если один из ж`стких дисков выйдет из строя, то будет потеряна только часть данных. Помимо обеспечения отказоустойчивости, правильное использование файлов и групп файлов может повысить производительность выполнения обращений к базе данных. Например, можно расположить на отдельных физических дисках обычные данные, данные типов text, ntext или image и «тяжёлые» индексы. Так как дисковые операции ввода-вывода при использовании отдельных контроллеров выполняются на всех дисках параллельно, то производительность в некоторых случаях может повыситься в несколько раз.
База данных имеет в своем составе файлы следующих типов:
primary – основной файл, который содержит системную информацию о самой базе данных и её объектах; в этом файле размещаются системные таблицы и описание объектов базы данных; в основном файле могут также храниться и данные; каждая база данных имеет в своем составе файл типа primary, причём только один файл в базе данных может относиться к этому типу; по умолчанию файлам типа primary присваивается расширение .mdf;
secondary – вторичный файл, который не содержит системную информацию и используется только для хранения данных; все данные, которые не были размещены в основном файле, располагаются во вторичных файлах; база данных может вообще не иметь файла типа secondary или, наоборот, иметь их несколько; часто в базе данных создаётся множество файлов secondary, чтобы распределить данные среди нескольких физических дисков; по умолчанию файлам типа secondary присваивается расширение .ndf;
transaction log – файл журнала транзакций; файлы этого типа используются для хранения информации о транзакциях, выполненных в базе данных; каждая база данных имеет, как минимум, один файл журнала транзакций; можно использовать несколько файлов для ускорения операция дискового ввода-вывода, так как данные о транзакциях записываются параллельно во все файлы; это напоминает чередующийся набор дисков для файловой системы NTFS; по умолчанию файлам типа transaction log присваивается расширение .ldf.
Расширения .mdf, .ndf и .ldf, назначаемые файлам базы данных, не являются обязательными. Допустимы произвольные расширения для каждого файла. Всё же рекомендуется использовать стандартные расширения, чтобы избежать путаницы. Каждый файл, используемый в базе данных, имеет два имени:
Logical File Name – логическое имя файла, оно используется в командах Transact-SQL при ссылке на конкретный файл;
File Name – имя файла в операционной системе, под этим именем файл хранится на жёстком диске.
В MS SQL Server предусмотрена возможность автоматического роста базы данных. Все файлы самой базы данных (как файлы данных, так и файлы журнала транзакций) могут автоматически увеличиваться. Эта возможность определяется при создании файла. Шаг прироста можно устанавливать в процентах от первоначального размера или в мегабайтах. Дополнительно можно указать максимальный размер, до которого файлу разрешено увеличиваться. Если максимальный размер не указывается, файл будет увеличиваться до тех пор, пока не займет все свободное пространство на диске.
Возможность автоматического увеличения файлов снимает необходимость постоянного контроля размера файлов базы данных. Пользователи, не имеющие административных полномочий, могут беспрепятственно работать с базой данных, не испытывая неудобств при её критическом заполнении.
Рекомендуется размещать файлы базы данных на всех доступных физических дисках. «Тяжёлые» данные и индексы лучше всего размещать на разных физических дисках. Как было сказано выше, файлы могут объединяться в группы для упрощения администрирования и управления физическим размещением объектов базы данных. В некоторых системах правильное использование групп файлов может дать значительное увеличение производительности. Группы файлов бывают следующих типов:
Primary File Group – основная группа файлов; эта группа файлов содержит файл типа primary и все файлы, не включённые в другие группы; все страницы системных таблиц базы данных располагаются в основной группе файлов; база данных может иметь только одну основную группу файлов;
User-defined File Group – пользовательская группа файлов; в пользовательские группы файлов включаются все файлы, указанные в параметре FREGROUP при создании (CREATE DATABASE) или изменении (ALTER DATABASE) базы данных; в базе данных можно создать несколько пользовательских групп файлов с произвольным набором файлов;
Default File Group – группа файлов по умолчанию; одна из групп файлов, созданных в базе данных, назначается в качестве группы файлов по умолчанию; если явно не указано иное, то группой файлов по умолчанию при создании базы данных становится основная группа файлов; если при создании объекта базы данных (таблицы или столбца) не указано явно, к какой группе файлов он будет принадлежать, то этот объект создаётся в группе файлов по умолчанию; владелец базы данных может назначить любую группу файлов в качестве группы файлов по умолчанию; только одна группа файлов может быть группой файлов по умолчанию.
Каждый файл может быть включён только в одну группу файлов. Кроме того, нельзя определять группы файлов для файлов журнала транзакций.
Когда данные записываются в какую-то группу файлов, они распределяются между всеми файлами в этой группе. То есть вместо того, чтобы записывать данные сначала в первый файл, пока он не заполнится, потом во второй файл и т. д., производится параллельная запись данных во все файлы группы. Причём количество данных, записываемых в каждый файл, пропорционально размеру файла. Например, если в группе определено три файла размером соответственно 1 Мбайт, 2 Мбайт и 3 Мбайт, то при записи 24 строк данных они будут распределены следующим образом: в первый файл будет записано 4 строки, во второй – 8 строк, а в третий – 12 строк. Если в группе определено множество файлов, то файлы не будут увеличиваться до тех пор, пока все они полностью не заполнятся. Если один из файлов будет заполнен, то и другие файлы также будут заполнены. Увеличение размера файлов в группе выполняется циклическим способом. Например, пусть группа состоит из 3 файлов, для которых разрешён автоматический рост. Когда все файлы в группе заполнены, SQL Server увеличивает размер первого файла на установленный для него шаг приращения (в процентах или мегабайтах). Все новые данные будут записываться в первый файл, пока он снова не заполнится. После этого сервер увеличивает размер второго файла и записывает данные в него. После того как третий файл будет также увеличен и заполнен, сервер снова увеличит первый файл.
Использование групп файлов не является обязательным требованием при проектировании базы данных. Если в базе данных не создаются группы файлов, то все объекты располагаются в основной группе файлов, создаваемой по умолчанию. Если в базе данных был создан единственный файл, то он будет содержать все данные.
Любая группа файлов, включая основную, может быть установлена в режим «только для чтения». Если группа файлов маркирована только для чтения, никакие изменения, добавления и удаления данных не разрешаются. Пользователи могут только считывать информацию. Например, данные отчётов за прошедший год могут быть установлены в режим «только для чтения», чтобы предотвратить возможность их изменения.
Если основная группа файлов маркирована «только для чтения», то в базу данных не могут быть добавлены никакие новые объекты, также нельзя удалять или изменять ранее созданные объекты. Резервная копия группы файлов, помеченной «только для чтения», может быть восстановлена на другом сервере без необходимости восстановления журнала транзакций.
Использование возможности отсоединения базы данных совместно с установкой режима «только для чтения» позволяет безболезненно переносить базу данных на множество серверов. Например, администратор в центральном офисе может создать базу данных, скопировав в неё данные обо всех торговых операциях за прошедший год. Для рассылки этих сведений всем филиалам он может установить базу данных в режим «только для чтения» и выполнить отсоединение. После этого файлы базы данных можно записать на компакт-диски и разослать копии во все филиалы. Администраторы филиалов выполнят присоединение базы данных с компакт-диска, после чего они будут иметь возможность чтения данных.