Работа с сервисом бизнес-аналитики Yandex DataLens. Учебное пособие
.pdfрасширенной аналитики и автоматизированных возможностей машинного обучения.
Масштаб развития продукта. Microsoft продолжает инвестировать в широкий набор перспективных возможностей и интегрировать их с Power BI.
Слабые стороны платформы
Функциональные пробелы в локальной версии. По сравнению с облачной службой Power BI, локальная версия имеет значительные функциональные пробелы, в том числе в отношении разработки информационных панелей, использования потоковой аналитики, встроенного контента, естественного языка. Ни одна из этих функций не поддерживается в Power BI Report Server.
Использование платформы только в облачном сервисе Azure. Корпорация Microsoft не предоставляет клиентам возможности выбирать другие облачные приложения, кроме облака Azure.
Процесс продвижения и публикации контента. То, как Power BI обрабатывает продвижение и публикацию контента, может привести к значительным административным издержкам для клиентов. Организации могут столкнуться с ситуацией, когда им придётся вручную управлять многими сотнями рабочих пространств. Задним числом устранять эту проблему –довольно сложная задача.
Компания Tableau и платформа Tableau Analytics. Второй лидер в Магическом квадранте для платформ для бизнес-аналити- ки. Платформа Tableau Analytics предлагает широкие визуальные возможности для исследования данных, которые позволяют биз- нес-пользователям получать доступ, подготавливать, анализировать и представлять результаты в своих данных.
Tableau регулярно расширяет возможности платформы по подготовке и управлению данными. Для подготовки данных добавлены расширенные возможности моделирования данных, которые упрощают анализ данных в нескольких таблицах на разных уровнях детализации за счёт построения связей между таблицами с помощью простого визуального интерфейса в браузере.
Сильные стороны платформы
Пользовательский интерфейс Analytics. Хотя компания Tableau продолжает добавлять новые возможности к своей платформе, она
31
всегда стремится поддерживать удобство работы пользователей. Визуальные исследования широко используются на сегодняшнем рынке, и всё же платформа компании Tableau отличается от многих других продуктов в лучшую сторону, предлагая интуитивно понятный аналитический инструмент с более широкими возможностями на основе своего запатентованного движка VizQL.
Лояльность клиентов. Многие клиенты демонстрируют преданное отношение к продуктам компании Tableau. Tableau Public – бесплатная платформа для публичного обмена и изучения данных в Интернете – насчитывает более 3 миллионов интерактивных визуализаций. Дизайн, ориентированный на пользовательский опыт, означает, что продукты компании Tableau привлекательны для многих пользователей, особенно для аналитиков.
Слабые стороны платформы
Слабые облачные решения. Компания Tableau предлагает облачные решения (Tableau Online и Tableau CRM), но основное преимущество компании заключается в локальных продуктах. Платформа Tableau Analytics не имеет облачной архитектуры, поэтому клиенты не могут воспользоваться всеми преимуществами облачных вычислений.
Высокие цены. По сравнению с продуктами других поставщиков платформ для бизнес-аналитики продукты компании Tableau стоят дорого.
Проблемы интеграции. В настоящее время пользователи сталкиваются с проблемами интеграции, если они хотят воспользоваться преимуществами расширенных функций аналитики, применяя платформу компании Tableau.
Фирма Qlik и платформа Qlik Sence. Qlik также относится к группе лидеров в Магическом квадранте для платформ бизнес-аналитики. У компании есть чёткое видение развития своего продукта на основе методов машинного обучения и искусственного интеллекта, но пока у неё более низкая рыночная динамика, чем у двух других лидеров.
Ведущее решение для бизнес-анализа фирмы Qlik – платформа Qlik Sense работает на уникальном движке Qlik Associative Engine, который поддерживает продукты Qlik на протяжении последних 25 лет. Qlik Cognitive Engine добавляет к продукту функциональные возможности на основе искусственного интеллекта и машинного обучения. Компания Qlik продолжает совершенствовать открытую архитектуру
32
своей платформы и возможности работы с несколькими облаками. Расширяет весь спектр возможностей пользователя в Qlik Sense с помощью визуального анализа на основе поиска, диалоговой аналитики, ассоциативного анализа, ускоренного создания и подготовки данных.
Сильные стороны платформы
Гибкость развёртывания. Qlik обеспечивает высокую гибкость для развёртывания своей платформы в локальном варианте или с любым крупным поставщиком облачных вычислений, с несколькими облаками или с использованием комбинации этих подходов.
Обширный портфель возможностей. Платформа Qlik Sense предоставляет возможности для визуального анализа данных для аналитиков или бизнес-пользователей, а также поддерживает встроенную аналитику разработчика.
Информационная грамотность и ориентация на клиента. Программа Qlik Data Literacy Programme помогает пользователям всех уровней, независимо от того, являются ли они клиентами Qlik или нет, понимать и грамотно использовать данные. Qlik’s Executive Insights Center – это портал для руководителей, который помогает клиентам связать аналитику с бизнес-результатами.
Слабые стороны платформы
Сложность ценообразования продукта. Компания Qlik предлагает основные аналитические возможности и возможности платформы в рамках одной лицензии, но также предлагает ряд дополнительных возможностей, таких как Qlik Catalog, Qlik Insight Advisor Chat для взаимодействия с чат-ботами и Qlik NPrinting для создания отчётов. При локальном развёртывании платформы это влечёт за собой дополнительное лицензирование и дополнительные расходы.
Низкая динамика рынка. По сравнению с другими лидерами в области платформ для бизнес-анализа динамика распространения использования платформы Qlik Sence пока остаётся самой низкой.
В исследовании отечественных BI-систем, проведённом С. Л. Громовым и его командой, были использованы следующие критерии оценки1:
1Обзор BI-систем (системы класса business intelligence), созданных российскими разработчиками. URL: https://russianbi.ru/ (дата обращения: 22.08.2022).
33
1.Администрирование, безопасность и архитектура платформы: оценивает возможности обеспечения безопасности работы в системе, а также наличие функционала для администрирования пользователей и аудита доступа.
2.Подключение к источникам данных: оценивает возможности загружать в систему структурированные и неструктурированные данные, находящиеся в источниках различных типов, в частности в реляционных и нереляционных базах данных, плоских и табличных файлах, на различных веб-ресурсах и др.
3.Трансформация и хранение данных: подразумевает оценку наличия в системе различных инструментов обработки исходных данных для приведения их в вид, пригодный к реализации дальнейших алгоритмов анализа. В частности, оценивалось наличие стандартных функций операций с таблицами, таких как соединение, объединение, а также некоторых основных операторов работы с данными.
4.Гибкость системы при работе с данными: оценивает функциональные особенности и возможности взаимодействия системы с ранее подготовленными данными и использования их для реализации различных задач анализа. Основное внимание уделялось оценке принципов работы системы с наборами или моделью данных, а также возможностей и ограничений в системе при создании аналитических показателей на основе этих данных.
5.Расширенная аналитика: критерий наличия в системе встроенных алгоритмов расширенного анализа данных, таких как прогнозирование, корреляционный анализ, анализ текста и др., а также функциональные возможности этих алгоритмов.
6.Функциональность аналитических объектов: при оценке учитывалось наличие в системе некоторых аналитических объектов (диаграмм) различного типа, объём доступных для настройки параметров этих объектов, а также существующие ограничения в их настройках.
7.Интерактивное визуальное исследование: учитывает возможности системы, позволяющие осуществлять анализ данных интерактивно – путём взаимодействия пользователя с объектами аналитического отчёта. В рамках критерия особое внимание уделялось оценке наличия в системе различных инструментов, которые позволяют сделать процесс работы пользователя с ана-
34
литическими отчётами более простым и удобным, таких как поиск, простые конструкторы отчётов, иерархические измерения в диаграммах и др.
8.Функциональность на мобильных устройствах: критерий учитывает наличие возможностей взаимодействия с системой и её модулями с мобильных устройств, а также степень адаптивности интерфейса системы под экраны мобильных устройств.
9.Расширенное взаимодействие с аналитическим контентом: оценивает доступность возможностей для создания собственных или использования сторонних расширений и применения их в системе, а также возможностей передачи данных и аналитических объектов во внешние системы.
10.Обеспечение взаимодействия с пользователями: предполагает наличие в системе возможностей взаимодействия пользователей внутри и вне системы, таких как автоматическая рассылка уведомлений, интеграция с чатами, комментирование результатов анализа внутри отчёта и др.
11.Простота освоения и удобство использования системы: в рамках критерия оценивались свойства и характеристики системы, которые определяют степень сложности системы для освоения неподготовленными пользователями.
12.Информационное сопровождение продукта: даёт оценку наличия у вендора ресурсов, направленных на помощь в освоении системы, таких как служба поддержки или база статей и рекомендаций по использованию, а также наличие руководств по использованию системы, их полноту и достаточность.
13.Кастомизация свойств объектов интерфейса: оценка наличия в системе возможностей, которые позволяют выполнить настройку различных визуальных элементов интерфейса с учётом требований клиента. В частности, это оформление границ объектов, создание цветовой палитры и настройка цветов элементов диаграмм, а также настройка фона отчёта и объектов и расположения объектов на макете отчёта.
14.Экспорт отчётов: изучает и оценивает возможности системы реализовывать экспорт данных готовых аналитических отчётов в различные файловые форматы.
15.Продуктовые критерии: наличие плана развития, а также соответствие вендора высокому уровню качества производства ИТ.
35
Самые заметные отечественные BI-решения на рынке 2022 г.:
•Visiology;
•Modus BI;
•«Форсайт» (аналитическая платформа);
•«Триафлай»;
•«Криста BI»;
•PolyAnalyst;
•N3.аналитика (аналитическая платформа);
•Polymatica;
•Alpha BI;
•Analytic Workspace;
•Yandex DataLens;
•Almaz BI;
•Cubisio.
Visiology – аналитическая платформа, предназначенная для построения информационно-аналитических систем, вышла на рынок российского ПО в 2016 г. Разработчик платформы – компания Visiology, специализирующаяся на решениях для визуализации и анализа данных. Компания работает на российском и зарубежном рынках: за время работы она завоевала доверие более 100 партнёров по всему миру. Вендор предоставляет поддержку в режиме Live Chat для всех пользователей, организует обучение и митапы на тему биз- нес-аналитики.
Сильные стороны платформы:
–кастомизация свойств объектов интерфейса – очень широкий набор настроек визуализаций, начиная от шрифта, размера, цвета текста и заканчивая возможностью применения любого CSS свойства, используя JavaScript. Возможно кастомизировать не только приложения, но и сам портал с приложениями;
–обеспечение взаимодействия с пользователями – широкий набор настроек для формирования и отправки регламентных отчётов с возможностью включения данных из нескольких дашбордов;
–возможность использовать в диаграммах данные, рассчитанные «на лету»;
–простое, интуитивное освоение системы.
Слабые стороны платформы:
–отсутствие полноценного ETL-модуля, хотя есть возможность легко подключить сторонний;
36
–слабая стандартная реализация установки ограничений для вы-
вода данных в объекты визуализаций. Все сложные ограничения нужно прописывать в скрипте кастомной визуализации.
Modus BI – платформа для бизнес-аналитики, позволяющая собирать и визуализировать данные из различных источников, формировать отчётность и создавать прогнозы для принятия эффективных управленческих решений и мониторинга наиболее важной информации для бизнеса.
Платформа Modus BI входит в реестр отечественного ПО и является полностью импортонезависимым программным обеспечением с использованием технологий локальной разработки и сборки релизов. Работа платформы поддерживает ОС семейства Linux и СУБД PostgreSQL.
Разработчик платформы – компания «БиАй Про», выступает вендором программного обеспечения в области BI и Big Data для корпоративного сектора и государственных органов власти и выстраивает профессиональные взаимоотношения с партнёрами. Более 20 компаний являются компетентными партнёрами по внедрению платформы Modus BI.
Сильные стороны платформы:
–потоковый ETL Data Boring обладает широким набором инструментов для загрузки и преобразования данных и позволяет наглядно построить цепочки доставки и преобразования данных от источников во внутренние хранилища LuxmsBI;
–структура работы с данными предполагает возможность как выполнения расчётов «на лету», так и предрасчёта данных на стороне внутренних/внешних источников. Формулы могут быть определены как на этапе построения кубов, так и непосредственно в интерфейсе. В качестве горячего слоя поддерживается CliсkHouse, в том числе многоузловые кластерные инсталляции;
–широкие возможности по созданию/подключению новых кастомных объектов визуализации помогут реализовать даже са-
мые сложные запросы в части визуализации данных, хотя и потребуют ресурсов разработки.
Слабые стороны платформы:
–функционал тонкой настройки «коробочных» аналитических объектов требует конфигурирования в формате JSON объекта. По информации вендора, в настоящее время идёт активная ра-
37
бота по развитию возможностей визуального конфигурирования аналитических объектов;
–на текущий момент возможно визуальное построение моделей данных, но оно не в полной мере покрывает все потребности
аналитика. Вендор анонсировал планы по развитию данного направления и возможности построения в системе некоторого аналога «ассоциативной» модели, применяемой в платформе Qlik Sense.
«Форсайт – аналитическая платформа» – цифровая аналитическая платформа, объединяющая инструментарий классической и продвинутой аналитики (Data Mining), а также управления биз- нес-процессами (BPM). Включает технологии: ML, Big Data, алгоритмы ИИ, построение прогнозных и оптимизационных моделей. Платформа относится к решениям класса Enterprise BI.
Программный комплекс полностью обеспечивает заказчика всеми инструментами для сбора, обработки, мониторинга, анализа данных, решения задач предиктивной аналитики, автоматизации процессов. Используется для масштабных задач – уровня страны, региона, холдинга. Отличается высокой производительностью, обеспечивает выполнение сложных оптимизационных расчётов на больших данных. Позволяет создавать аналитические системы с любой отраслевой спецификой: используется на предприятиях энергетики, металлургии, нефтегазовой отрасли, фармацевтики, ритейла, пищевой промышленности, а также в госсекторе. Сокращение сроков внедрения обеспечивается благодаря развитым средствам интеграции и принципу «low-code/no-code».
На базе платформы разработано большое количество прикладных решений: управление бюджетированием, управление инвестиционными программами и проектами, консолидация отчётности, кредитный конвейер (решение для банковского сектора), ситуационные центры, оптимизация производственной деятельности, предиктивное обслуживание, управление проверками, управление рисками, мобильный склад, голосовой помощник и многие др.
Платформа является альтернативой зарубежным решениям и предоставляет широкие возможности для импортозамещения. Базируется полностью на российском стеке технологий, совместима с open-source решениями, легко интегрируется с российским ПО.
38
Сильные стороны платформы:
–широкие возможности администрирования системы: настройки различных прав доступа для пользователей и групп пользователей;
–широкий функционал ETL: реализованы возможности импорта данных из различных источников, а также множество методов реализации задач по обработке данных;
–продвинутая аналитика: система имеет широкий перечень операций по реализации расширенного анализа данных, таких как кластеризация, прогнозирование, анализ ассоциаций и т. д. Также есть отдельный тип объектов для осуществления моделирования и прогнозирования (контейнер моделирования);
–система также имеет функционал для выполнения и мониторинга бизнес-процессов, построения форм ввода;
–в блоке построения отчётов доступны инструменты для форми-
рования экспресс-отчётов.
Слабые стороны платформы:
–требуется детальное освоение: поскольку система имеет широкий функционал, то для реализации ряда сложных операций понадобится глубокое изучение документации.
«Триафлай» – кроссплатформенная масштабируемая система для сбора, обработки, анализа и визуализации данных, состоящая из набора модулей: «Администрирование», «Загрузка данных», «Подключение к внешним системам», «Построение отчётов», «Построение форм ввода», «Построение аналитических панелей», «Коллективная работа», «Маршруты согласования», «Моделирование», «Прогнозирование». Доступ пользователей ко всем функциям системы осуществляется через веб-интерфейс, без специальных знаний по программированию.
Платформа «Триафлай» разработана как комплексная система обеспечения управленческого звена компании, корпорации или холдинга всеми необходимыми инструментами быстрой автоматизации, доавтоматизации бизнес-процессов, связанных с принятием управленческих решений – обеспечением поддержки принятия управленческих решений.
Разработчиком платформы является российская компания
ООО «Доверенная среда», позиционирующая ее как единый инстру- мент-конструктор, в котором реализованы функции BI (Business Intelligence) и DSS (Decision Support System).
39
Продукт разрабатывается без иностранного участия, с применением исключительно open source технологий. Платформа неоднократно прошла тематические и специальные исследования в рамках проектов. Имеются сертификаты ФСТЭК, подтверждающие высокий уровень надёжности хранения данных.
Сильные стороны платформы:
–подключение к источникам данных: имеется как большой набор встроенных коннекторов к разным источникам, так и возможность использования Python-коннектора прямо в интерфейсе системы для выгрузки данных из произвольных источников. Имеется большая библиотека готовых стабильных скриптов Python для выгрузки данных;
–гибкость системы при работе с данными: все данные хранятся в системе в виде показателей, присутствует огромное количество встроенных функций агрегирования и расчёта показателей, функций обработки значений и возможность написания кастомных функций для расчёта показателей с использованием языка Python;
–управление данными в системе: можно не только загружать и трансформировать данные с помощью функционала системы, но и корректировать, добавлять, удалять любые значения любых показателей и справочников, при этом имея возможность узнать о том, что данные были изменены вручную и какие значения были до корректировки. Есть функционал ретроспекции, позволяющий видеть аналитику по состоянию данных на интересующую дату, даже если потом данные были добавлены, удалены или изменены;
–визуализация данных в системе: на момент тестирования системы набор объектов визуализации достаточно многочисленный, но имеет сравнительно небольшой набор встроенных функций стилизации;
–безопасность разработки: в системе реализован функционал создания точек восстановления, включающий возможность от-
ката к любой из них с восстановлением данных.
Слабые стороны платформы:
–функциональность на мобильных устройствах: нет адаптивной вёрстки, при работе с платформой со смартфона некоторые элементы интерфейса могут накладываться друг на друга, из-за чего невозможно их использовать;
40