- •«Московский технический университет связи и информатики»
- •Содержание
- •Основная информация о Ozon
- •Стандарты и протоколы
- •Системное мат. Обеспечение
- •1. Рекомендации.
- •Алгоритм ближайших соседей работает следующим образом:
- •Влияние системы рекомендаций Ozon
- •Влияние системы фильтрации Ozon
- •3. Прогнозирование спроса.
- •2. Фильтрация.
- •Развитие системы прогнозирования спроса Ozon
- •4. Ценовая оптимизация.
- •5. Анализ данных.
- •Развитие системы анализа данных Ozon
- •Фронтенд
- •Бэкенд Система управления базами данных
- •Технологии
- •Сервисы
- •Инструментарий сервисов
- •Инструменты создания программно-аппаратной части сервиса на примере ozon Travel
- •Центры обработки данных
- •Кабельная и сетевая часть
- •Подсистемы кабельной системы здания и кампуса.
- •Подсистема скс (Структурированная кабельная система) Ozon
- •Управление и системы диагностики
- •Кабельные тестеры и анализаторы на разных уровнях osi
Подсистема скс (Структурированная кабельная система) Ozon
Помещения (HC, IC, MC), в которых находятся кабельные соединительные устройства, называют телекоммуникационными клозетами — TC, а помещения, в которых размещается сетевое оборудование, называют аппаратными — ER (в небольших системах их объединяют с телекоммуникационным шкафом).
Рисунок 4 - Организация кампусной системы
Подсистемы СКС показаны на рисунке 5.
Рисунок 5 - Подсистемы СКС
Подсистема рабочего места служит для присоединения терминала большой машины, компьютера (PC) или телефона к горизонтальной подсистеме. Среда передачи — UTP cat.6. Присоединение осуществляется с помощью розетки рабочего места. Розетка может содержать специальный адаптер, согласующий сопротивление различных кабельных систем (balun).
Горизонтальная подсистема — это часть кабельной системы, которая соединяет телекоммуникационную розетку в зоне рабочих мест с административной подсистемой этажа в телекоммуникационном клозете. Среда передачи — UTP cat.6.
Административная подсистема состоит из совокупности коммутационных кабелей (патчкордов), устройств (патчпанелей), соединительных разъемов и блоков, которые подсоединяют горизонтальную подсистему к вертикальной системе здания. Административная подсистема располагается в телекоммуникационных шкафах.
Магистральная подсистема здания (building backbone) — вертикальная магистраль здания. Она обеспечивает соединение между узлами административной подсистемы. Подсистема имеет топологию звезда, в которой каждый горизонтальный клозет соединен кабелем с главным или промежуточным клозетом.
Campus backbone (metropolitan backbone) — кампусная магистраль соединяет различные здания на ограниченной территории. В табл. Кабели1 показано, что согласно стандартам протяженность этой магистрали определяется видом оптоволокна и составляет не более 2000 м для многомодового волокна и 3000 м для одномодового. В общем, такая ограниченная территория соответствует территории локальной сети. Средой передачи обычно является оптоволокно. Топология подсистемы — звезда, в центральном здании находится главный кросс. В главном клозете здания или кампуса осуществляется подключение к городской магистрали или глобальной сети (WAN). Если в кампусе несколько зданий, то главный клозет устраивают в том здании, к которому подходит городская магистраль, а в каждом из остальных зданий устраивается промежуточный клозет.
Управление и системы диагностики
Системы диагностики - инструменты для мониторинга, анализа и управления в компьютерных системах, сетях и программном обеспечении. Они выявляют проблемы, ошибки и предоставляют информацию для оптимизации производительности систем.
Основная часть:
Системы управления и мониторинга в маркетплейсе Озон, включая Prometheus, Thanos, Opentelemetry и другие, обеспечивают контроль, анализ и оптимизацию сетевых служб. Эти инструменты поддерживают непрерывную работу системы, повышают производительность и обеспечивают оперативное реагирование на проблемы.
Протоколы и стандарты:
Для обмена информацией между системами управления и мониторинга в Озоне используются различные протоколы. Одним из таких протоколов является FCAPS.
FCAPS - это платформа сетевого управления, созданная Международной организацией по стандартизации (ISO). Основной целью данной модели сетевого управления является лучшее понимание основных функций систем сетевого управления. FCAPS обеспечивает полный набор возможностей для эффективного контроля и управления сетью. Это аббревиатура, в которой отражены ключевые функции администрирования и управления сетями:
(F) - Fault Management / Управление отказами
(C) - Configuration Management / Управление конфигурацией
(A) - Accounting Management / Учёт
(P) - Performance Management / Управление производительностью
(S) - Security Management / Управление безопасностью
Рассмотрим каждый уровень поподробнее:
Управление отказами (fault management) является важным аспектом эффективного функционирования и поддержки информационной системы. В процессе управления отказами осуществляется поиск, диагностика и исправление ошибок и сбоев, которые могут возникнуть в системе.
Управление конфигурацией (configuration management) - это процесс управления изменениями в информационной системе, чтобы обеспечить ее целостность и стабильность. Он включает учет и контроль всех компонентов и настроек системы, а также управление изменениями, чтобы минимизировать риски и обеспечить соответствие требованиям.
Учет (accounting management) является неотъемлемой частью эффективного управления информационной системой. Этот процесс включает в себя запись и отслеживание всех операций и ресурсов, связанных с системой, включая использование ресурсов, доступ и изменения данных. Учет позволяет эффективно управлять ресурсами и обеспечить прозрачность и отчетность.
Управление производительностью (performance management) - это процесс оптимизации работы информационной системы для достижения максимальной производительности и эффективности. Он включает в себя мониторинг, анализ и оптимизацию всех аспектов системы, включая производительность аппаратного и программного обеспечения, сетевые ресурсы и обработку данных.
Управление безопасностью (security management) - это важный аспект работы информационной системы, который обеспечивает защиту от угроз и несанкционированного доступа. Он включает в себя разработку и реализацию политик и мер безопасности, мониторинг и обнаружение уязвимостей, а также реагирование на инциденты безопасности.
Используемое оборудование:
Для оптимальной производительности и надежности систем управления и мониторинга в Озоне используется современное оборудование, включая серверы, коммутаторы, маршрутизаторы от ведущих производителей, таких как Cisco, Juniper, Huawei. Дополнительные устройства, такие как сетевые протокол-анализаторы, применяются для мониторинга состояния сетевых служб.
Инструменты систем управления и мониторинга:
Prometheus является системой мониторинга и тревожного оповещения, которая собирает и анализирует метрики и предоставляет гибкую настройку уведомлений. Thanos предоставляет возможность долгосрочного хранения метрик и обеспечивает высокую отказоустойчивость. Opentelemetry используется для сбора и упаковки телеметрии в приложениях, что обеспечивает подробное мониторинга приложений и инфраструктуры. Jaeger является распределенной системой трассировки для отслеживания и анализа производительности приложений. Grafana обеспечивает визуализацию данных из различных источников, а Graylog предоставляет возможность агрегирования, анализа и поиска логов. Opsgenie используется для управления событиями и оповещений, а osquery позволяет выполнение SQL-подобных запросов к операционной системе для мониторинга и проверки безопасности.
Модули для проверки сетевых служб DTX:
1. Модуль DTX Network Service Module (NSM) определяет режим работы сетевого соединения на полнодуплексный или полудуплексный.
2. Модуль DTX NSM для статуса порта хаба/коммутатора по цвету (оранжевый) помогает определить проблемы в сети.
3. Модуль ID Locator локализует уникальные идентификаторы устройств в сети.
4. Ручной режим DTX позволяет создать список IP-адресов для проверки связи при помощи пинга.
5. Модуль CableAnalyzer с индикатором цвета порта DTX NSM выявляет кроссовер-кабели.
6. DTX NSM измеряет напряжение Power over Ethernet (PoE).
7. Модуль Negotiation Details Results отображает детали взаимодействия устройств при проверке сетевого соединения.
8. Модуль Network Connectivity IP Address Ping Results предоставляет результаты проверки связи сетевых устройств по IP-адресам.
9. Network Traffic Monitoring мониторит сетевой трафик для выявления активности в сети.
10. Overview of the Network Connectivity Test обеспечивает обзор результатов тестирования сетевой связи.
11. Ping Result Details Screen предоставляет подробные результаты теста пинга.
12. Модуль Port Speed and Duplex определяет скорость и дуплексный режим работы порта.
13. Setting the IP Address устанавливает IP-адрес для конфигурации сетевого соединения.
14. SFP Selection выбирает и проверяет совместимость оптических модулей SFP.
15. Virus Susceptibility проверяет устойчивость к вирусам и предоставляет информацию о безопасности сетевых соединений.
