Analytic Workspace BI-платформа

Основные статьи:

• Определение Business Intelligence
• SaaS - История. Философия. Драйверы развития

Российская Self-service BI-система Analytic Workspace (AW) - это многопользовательский инструмент для эффективного сбора, интерактивного анализа и визуализации данных. Позволяет устранить человеческий фактор при получении статистики, оперативно проверять гипотезы и ускорить принятие управленческих решений на основе актуальных данных.

2024

Analytic Workspace 1.29 с адаптивными дашбордами

2 сентября 2024 года компания Analytic Workspace объявила о выходе релиза 1.29: адаптивные дашборды, взаимозависимые фильтры и история изменений объектов.

По информации компании, в релизе AW BI 1.29 появился виджет «Текст», были оптимизированы информационные панели, модели и виджеты, а также внесён ряд общих изменений. Особое внимание разработчики уделили оптимизации процесса администрирования.

Виджет «Текст»

В релизе 1.29 AW BI реализовано следующее:

Добавлена возможность создания адаптивных дашбордов

В версии 1.29 реализована функция представления дашборда в 4 режимах:

• Компьютер — 1440px и выше;
• Ноутбук — 1200px и выше;
• Планшет — 768px и выше;
• Телефон — до 768px.

Пользователи могут настраивать свои дашборды под различные устройства, что обеспечивает удобный доступ к данным в любом месте и в любое время. В зависимости от разрешения экрана, элементы интерфейса будут автоматически адаптироваться, сохраняя при этом максимальную информативность и удобство использования. TAdviser выпустил новую Карту «Цифровизация ритейла»: 280 разработчиков и поставщиков услуг 13.6 т

Обновлена форма редактирования информационной панели

Панель «Вид» теперь расположена в правой части интерфейса, что оптимизирует удобство управления структурой дашборда и его элементами. Функциональность аналогична Figma. В обновленную версию добавлена возможность скрытия и раскрытия блока «Конструктор».

Реализован виджет «Текст»

Виджет даёт возможность размещать заголовки, наборы ссылок и поясняющие надписи на дашборде. В будущем планируется расширение функционала виджета, включая поддержку вывода значений расчётных агрегатов в тексте.

В фильтры агрегатов добавлены операторы «Топ» и «Антитоп»

Теперь в режиме редактирования виджета с помощью этих операторов можно ограничить выборку категорий до заданного количества, оставляя только максимальные или минимальные значения.

Добавлена возможность создания ETL-блоков через клиентскую библиотеку

В версии 1.28 появилась опция подключения ETL-блоков из внешнего репозитория. В обновлении 1.29 реализован функционал для удобного создания собственных ETL-блоков с использованием библиотеки analytic-workspace-client.

В центре управления добавлен подраздел «Действия пользователей»

Теперь технический администратор может просматривать историю изменений всех сущностей объектов системы. В разделе «Действия пользователей», доступном через «шестерёнку» на дашборде, отображаются все изменения с указанием времени, действий и пользователя, который их выполнил. Отмена этих действий пока недоступна, но возможность отката (ctrl+z) уже в планах. Администратор также может увидеть полный список действий, включая конкретные изменения значений.

Подраздел «Действия пользователей»

Добавлена взаимная фильтрация значений справочников в иерархии

В форму создания и изменения иерархии добавлено свойство «Взаимозависимость полей», которое обеспечивает взаимную фильтрацию значений справочников. При установке фильтра в одном из полей иерархии с активированной «Взаимозависимостью полей», значения других полей-справочников этой иерархии будут автоматически отфильтрованы. В информационных панелях взаимная фильтрация также применяется при использовании полей из иерархии в системных виджетах-фильтрах.

Analytic Workspace 1.28: ETL, работа с переменными и обновленная лицензионная политика

Компания Analytic Workspace 29 июля 2024 года представила релиз 1.28 своей одноименной BI-платформы. В обновлении 1.28 появилась возможность работать с QVD-файлами — это формат, разработанный для хранения таблиц данных, экспортированных из Qlik Sense или QlikView.

Analytic Workspace 1.28

По информации компании, все метаданные полей моделей теперь унифицированы и записываются строчными буквами. Это не только устраняет возможные несоответствия, но и позволяет корректно использовать параметризованные запросы в виджетах. Как отметили разработчики, в некоторых случаях для восстановления работы виджетов и панелей потребуется повторная синхронизация моделей.

В функционал кастомизации синхронизации модели добавлена возможность удаления данных. В частности, функция pusher. delete_rows даёт возможность удалить записи текущего инкремента из Clickhouse. Полное удаление модели теперь сопровождается удалением всех связанных внутренних файлов, включая статистику, ETL-скрипты и «битые» объекты. Этот процесс будет выполняться при очистке удалённых объектов из «Корзины». Релиз 1.28 открывает возможность интеграции ETL-блоков из внешних репозиториев. Это позволяет использовать сторонние модули для обработки данных, что делает систему более гибкой и масштабируемой.

Реализовано управление количеством ядер для spark-задач по синхронизации моделей. В частности, добавленная переменная "ETL_SPARK_MAX_CORES" позволяет точно управлять количеством ядер, доступных для каждой Spark-задачи на ETL-сервере. Это помогает оптимизировать использование ресурсов и предотвращает перегрузку системы. Теперь можно использовать ранее созданные переменные в виджетах, что оптимизирует настройку и экономит время.

В версии 1.28 появилась возможность делиться переменными с другими пользователями. Если пользователь являетесь автором переменной или имеет права на её администрирование, то может настроить общий доступ. Добавлен тип переменной «Редактируемая». Пользователи могут в реальном времени менять значения и видеть, как это влияет на результаты расчётов.

Для реализации нового типа переменных добавлены параметризованные запросы в Cube и миграции по унификации регистра в мете полей виджетов.

С помощью системного виджета «Изображение» можно разместить на дашборде логотипы, фоны и любые другие изображения без необходимости встраивать HTML-код. Системный виджет «Переменные» позволяет вывести редактируемую переменную на панели в качестве самостоятельного элемента, после чего она будет скрыта во всех виджетах, где использовалась ранее.

Теперь у технического администратора есть возможность очищать хранилище от объектов, помеченных на удаление, с помощью обновленного API. В свою очередь, лицензионная политика стала более гибкой. Как отметили в компании, теперь можно устанавливать ограничения на количество активных объектов, таких как источники данных, модели, виджеты и панели, что особенно полезно при встраивании Analytic Workspace в другие ИТ-сервисы.

Дополнительные изменения:

• Устранена недоступность S3 хранилища после запуска ML сервисов на дефолтных значениях переменных;
• Исправлены неточности в работе ручной публикации виджетов;
• Доработано сохранение пароля при просмотре объекта по публичной ссылке;
• Доработан метод GET /export;
• Скорректирован просмотр объекта по публичной ссылке, при использовании значений редактируемых переменных из модели;
• Функционал по передаче параметров и событий перенесён на просмотр объектов по публичным ссылкам;
• Устранены серверные неточности, обнаруженные в ходе тестирования версии 1.27;
• Добавлена возможность регулировки отображения информации о сайте на странице авторизации;
• Добавлен вывод ошибки получения данных вместо validation error for ModelObjectTestData log при запуске ETL-блока;
• Устранена бесконечная загрузка виджета при выборе полей в фильтре-справочнике;
• Добавлена проверка на нахождение объектов, доступных группе пользователей, в личном каталоге при удалении пользователя из группы пользователей;
• Скорректировано отображение виджетов на информационной панели с учётом наследуемых прав доступа от каталогов;
• Добавлены обработчики для типов полей bool и LowCardinality при чтении данных из БД Clickhouse;
• Добавлен обработчик на заглавные буквы в расчётных агрегатах виджета.

Analytic Workspace 1.27

Компания Analytic Workspace 14 мая 2024 года объявила о выходе релиза 1.27 одноименной BI-системы. В релизе AW BI 1.27 появилась возможность делиться дашбордами и виджетами публично, были улучшены модели и виджеты, а также внесён ряд общих изменений.

Analytic Workspace 1.27

По информации компании, переходя по ссылке, пользователи могут открыть объект на просмотр и экспортировать его при наличии разрешения в ссылке. Для одного объекта можно сформировать неограниченное количество ссылок, но действующая будет только одна. Созданная ссылка может быть снята с публикации вручную пользователем или автоматически по истечении срока действия, и удалена.

Analytic Workspace 1.27

В разделе «Центр управления» появился подраздел «Публичные ссылки» для настройки параметров доступа к функционалу. В этом подразделе технический администратор может включать/отключать функцию по генерации публичных ссылок, а также у него есть возможность определять пользователей, которым будет также доступен этот функционал. Генерация публичных ссылок доступна пользователям с типами «Разработчик» и «Аналитик» при наличии свободных квот на публичные ссылки из числа доступных по лицензии.

Подраздел также добавлен в раздел «Администрирование». Здесь размещён реестр всех сгенерированных публичных ссылок, а также доступна возможность снятия этих ссылок с публикации техническим администратором.

Расширены возможности ETL-блока «SQL-блок», добавлено обращение к нескольким объектам внутри SQL-запроса. Это позволяет сделать CROSS JOIN нескольких таблиц (в том числе из разных источников).

Analytic Workspace 1.27

Появилась возможность кастомизации инкрементальной загрузки через ETL-редактор. Кастомизация ETL-процесса модели выполняется определением специальных функций в ETL-скрипте этой модели. Теперь можно перехватить загрузку каких-либо данных и задать, как именно она должна происходить (это в Python-редакторе). Например, в ETL один источник будет грузиться инкрементально, а другой нет. Или, например, можно забирать каждый день из источника данные только за 30 дней (таков размер очередного инкремента), однако перед загрузкой нужно будет удалять записи в Clickhouse AW за эти 30 дней текущего инкремента, чтобы избежать задвоений.

Общие изменения:

• Всплывание и перемещение тултипа стало более плавным.
• Скорректировано формирование запроса на выгрузку виджета с правилами доступа.
• Скорректировано заполнение table_name для полей sql-запросов к моделям.
• Устранены неточности в работе интерфейса, обнаруженные в ходе тестирования.
• Скорректирована работа переменных и расчётных агрегатов.
• Исправлены неточности в работе функционала фильтрации данных по дате.
• Перенесены настройки табличных виджетов в функционал экспорта данных в файл формата .xlsx после изменения функционала.

Analytic Workspace 1.26

29 марта 2024 года компания Analytic Workspace объявляет о выходе релиза Analytic Workspace 1.26. В релизе AW BI 1.26 разработчики оптимизировали модели, виджеты и информационные панели, а также внесли ряд общих изменений.

Analytic Workspace 1.26

По информации компании, для превью модели добавлено 4 воркера (и для обычных, и ML-запросов), что позволяет более эффективно управлять, блокирующими запросами в сервисе etl-data-preview.

В контексте разработки программного обеспечения, термин «воркер» (worker) обычно относится к отдельному процессу или потоку, выполняющему задачи асинхронно или в фоновом режиме. Воркер выполняет задачи, которые не требуют взаимодействия с пользователем или даже не предполагают нахождение в активной вкладке браузера. Воркер предназначен для обработки более ресурсоемких задач, чтобы основной процесс или поток не заблокировался.

В случае запросов, поступающих в etl-data-preview, воркеры применяются для их выполнения. Увеличение их числа позволяет равномерно распределить запросы между ними, что оптимизирует производительность и обработку запросов. В результате блокирующие запросы оказывают меньшее воздействие на работу сервиса, поскольку они могут обрабатываться параллельно несколькими воркерами.

Analytic Workspace 1.26

В рамках обновления в блоке «Классификация/регрессия ML» была внедрена поддержка запуска мультирегрессионных моделей. Эти модели способны предсказывать сразу несколько значений на выходе, в отличие от привычных моделей, которые прогнозируют лишь одно значение.

Это расширение позволяет использовать мультирегрессионные модели для различных задач, где необходимо прогнозировать и анализировать сразу ряд переменных. Например, в сфере продаж мультирегрессионные модели могут быть применены для прогнозирования нескольких ключевых показателей продаж одновременно, — объем продаж различных товаров, сезонные колебания спроса, влияние маркетинговых кампаний и другие факторы, которые оказывают влияние на выручку компании.

В обновленной версии ввели ограничения на установку признака «Является справочником», для полей модели с типами данных «Дата» и «float», чтобы предотвратить возможные ошибки и несоответствия при работе с такими полями.

В виджет «Сводная таблица» был добавлен блок «Показатели» в настройке «Заголовки». Этот блок дает возможность задать параметры отображения строк заголовков для промежуточных и итоговых показателей в сводной таблице. При создании сводной таблицы часто возникает потребность в отображении дополнительных показателей в строке заголовка (таких как сумма, среднее значение, количество и т. д.). Блок «Показатели» позволяет добавить эти дополнительные показатели в строку заголовка сводной таблицы и настроить их отображение в соответствии с потребностями пользователя.

В обновлении появилась настройка «Данные» для виджетов «Таблица» и «Сводная таблица». С помощью этой настройки можно задать параметры отображения промежуточных и итоговых агрегатов, группировки (групп-строк для сводных таблиц) и первичных данных (атрибутов для сводных таблиц). Настройка «Данные» позволяет гибко настраивать, какие данные будут отображаться и как они будут представлены в таблице или сводной таблице. Например, для итоговых и промежуточных агрегатов можно указать необходимые операции агрегации (такие как сумма, среднее, максимум, минимум и другие) и определить формат отображения (например, числовой или в процентах).

Также для сводных таблиц можно настроить группировку строк и атрибуты, которые будут отображаться как первичные данные. Например, при работе с данными о продажах можно группировать информацию по годам и кварталам, а первичные данные могут содержать информацию о продуктах, регионах и прочих атрибутах.

Analytic Workspace 1.26

В графических виджетах добавлены опции:

• сокращение подписей в блоке «Группировка»;
• регулировка угла наклона подписей.

Появилась возможность экспорта виджетов в форматах .pdf и .png для сохранения их визуального представления.

В информационную панель добавлена возможность управлять элементами информационной панели с клавиатуры, обеспечивая их пиксельную точность.

• Можно выделить виджет на дашборде и с помощью стрелок на клавиатуре двигать его попиксельно. А если при этом зажать Shift, то двигать виджет с шагом 10 px.
• Можно зажать ctrl (или cmd на Mac), выделить сразу несколько виджетов и передвинуть их все разом. Причем двигать можно как стрелками на клавиатуре, так и мышкой.
• Почти для всех виджетов добавлена возможность явно указать координаты или размер на дашборде.

Общие обновления:

• Появилась функция переходов между объектами для удобства навигации. Теперь при переходе из виджета в редактирование модели есть возможность вернуться обратно в виджет с помощью кнопки «стрелочка». Аналогично, если пользователь переходит из редактирования информационной панели в редактирование виджета. И когда пользователь переходит к объекту из раздела «Центр уведомлений», также можно вернуться обратно к уведомлению.
• Добавлен раздел «Наследуемые права» в настройках администрирования объектов. Полезная функция с точки зрения анализа и контроля доступа, которая позволяет увидеть, кто именно имеет доступ к просмотру или изменению объекта на основе иерархии каталогов и наследования прав доступа.

Analytic Workspace 1.25

Компания Analytic Workspace 4 марта 2024 года представила релиз 1.25 BI-системы Analytic Workspace. Модернизация и изменения в релизе 1.25 коснулись практически всех разделов системы: модели, виджеты, информационные панели и общие настройки.

Добавлен тестовый запуск ETL-блока из окна ввода параметров

По информации компании, построение быстрых превью переведено на Spark, переделан механизм получения метаданных для SQL-запросов к файлам.

Список доступных для использования ETL-блоков пополнился: «JSON-блок» — блок позволяет преобразовать значения из JSON-поля в новые строки или столбцы. Работает со значениями полей как в виде объектов, так и массивов.

В окно ввода параметров ETL-блока добавлена кнопка «Выполнить», по нажатию которой выполняется тестовый запуск блока внутри текущей модели. Результаты выполнения (выходная из блока таблица) отобразится в блоке «Результаты запуска».

На форме редактирования ETL-блоков часто встречаются параметры, в которых нужно указывать поля из вложенного в блок объекта. Для этого добавлены:

• Возможность выбирать поля из выпадающего списка;
• Например, в блоках «Разворот иерархии Parent-Child», «Прогнозирование временного ряда», «Классификация/регрессия с ML-моделью», «JSON-блок»;
• Вспомогательное средство при написании SQL — скрипта в виде появляющихся справочников (IntelliSense) по названию полей вложенного в ETL-блок объекта. Например, в блоках «SQL-блок», «Вычисляемые поля».

Добавлена возможность запуска блока с прогнозированием временных рядов без использования ML-инфраструктуры. Внесены изменения в параметры блока. Добавлена возможность управления дискретностью генерации будущих точек — автоматическая генерация (это значение по умолчанию) не всегда работает, в процессе синхронизации может выйти ошибка с предложением указать требуемое значение явно.

Для объектов с источником типа «Файл» настройки инкрементальности игнорируются. Независимо от того, что настроено в интерфейсе Системы, в Airflow для таких объектов будет выполняться полная выгрузка данных.

Для графических виджетов при добавлении форматирования по умолчанию определен оператор форматирования «Диаграмма». Для круговых диаграмм добавлена возможность форматирования по агрегатам операторами «Диаграмма», «Цвет ячейки», «Значки», «Гистограмма (градиент по столбцу)».

Внесены дополнения в функциональность форматирования данных виджетов

Кеш заголовков сократил время формирования пивотной таблицы.

Для типов виджетов «Таблица» и «Сводная таблица» добавлена настройка «Итоги», позволяющая задать параметры отображения строки/столбцов итоговых агрегатов.

В список шрифтов добавлено значение «По умолчанию», при установке этого значения будет применен шрифт, указанный в настройках «Вид».

Внедрена поддержка экспорта в файл формата .csv данных виджетов из live-моделей, построенных на различных подключениях к БД ClickHouse.

При открытии информационной панели данные для виджетов подгружаются только для активной вкладки и кешируются до изменении фильтров в самих виджетах. Выполненные работы позволили уменьшить количество элементов на странице браузера — получают данные только виджеты на активной вкладке.

Провайдер с типом «LDAP kerberos» реализовывался под проект и будет работать в частных случаях с соответствующей инфраструктурой, работает по тому же принципу что и тип провайдера «OpenID Cookie».

Каталог — объект в файловой системе, предоставляющий способ группировки объектов реестра с целью облегчения поиска этих объектов по какому-то признаку и предоставления массового доступа к сгруппированным объектам. В основные разделы системы добавлен функционал по работе с двумя видами каталогов:

• Каталог с личным доступом (доступен только автору);
• Каталог с общим доступом (доступен всем пользователям и группам пользователям, которым предоставлен доступ).

В каталог с общим доступом можно переместить объект, если каталог доступен с правом на «Редактирование"/"Администрирование» (в т.ч. с авторским правом) и на перемещаемый объект у пользователя имеется индивидуальное/групповое право на его администрирование (в т.ч. авторское право).

Каталог с общим доступом позволяет предоставить массовый доступ к содержимому с помощью настройки прав доступа. Объект, помещенный в такой каталог, наследует права доступа от ключей доступа к содержимому каталога, если для пользователя не были назначены индивидуальные или групповые права на объект.

Настройки по управлению доступом отдельных пользователей (индивидуальные права) и групп пользователей (групповые права) объединены в единую форму «Общий доступ».

Обновлена настройка доступа к объектам

Analytic Workspace 1.24

Analytic Workspace 10 января 2023 года сообщила о выходе релиза 1.24 AW BI.

В релизе появились ETL-блоки, расширены возможности визуализации и управления дашбордами.

Описание релиза AW BI 1.24 начнем с обновления стратегии работы с источниками данных: ETL-puller для работы с БД ClickHouse заменен на java-puller.

Существенные изменения также коснулись работы с моделями: появились встроенные ETL-блоки:

• «Разворот иерархии Parent-Child» — выносит уровни иерархии в отдельные столбцы из таблицы с parent-child иерархией;
• «Прогнозирование временного ряда (авто)» — прогнозирует временной ряд на основе автоматически обучаемой статистической модели;
• «ML-модель в ручном режиме» — применяет модель машинного обучения для обогащения вложенного объекта;
• «Классификация/регрессия с ML-моделью» — предсказывает классификацию или регрессию для вложенной в него таблицы на основе внутренней ML-модели.

В ETL-блоке «Временная серия»появилась возможность выделения компонентов (год, месяц, день, час, минута, секунда) в отдельные столбцы. Кроме того, в правила доступа к данным модели добавлена связь «многие-ко-многим», открывающая новые возможности классификации пользователей и объектов.

Серьезные улучшения коснулись визуализации данных. Так, появилась возможность редактирования виджета прямо на информационной панели. Обогащены варианты позиционирования виджетов на дашборде и группировки их в контейнеры. Внесенные улучшения позволяют в несколько кликов создавать нетиповые KPI стандартными средствами. Кроме того, появилась возможность произвольным образом изменять расположение и вид вкладок меню дашборда и задавать фон меню.

Добавлены дополнительные настройки для экспорта данных виджета в формат .xlsx. Теперь можно:

• переносить заголовки;
• переносить тексты;
• выделять границы.

Для типов виджетов «Таблица» и «Сводная таблица» добавлены настройки, позволяющие задать параметры отображения строки заголовков и отображения порядковой нумерации.

Описанные настройки будут учитываться при экспорте данных в формат .xlsx В расширенной фильтрации по группе и столбцу для строковых полей добавлены операторы, с помощью которых можно проверить, входит ли значение поля в определенное множество значений. На вкладку «Данные» выведены фильтры по типам полей и признаку иерархии, добавлена возможность сортировки полей модели, расчетных агрегатов и переменных. Кроме того, появилась возможность переименования полей, добавленных в структуру виджета. Также появилась возможность просмотра истории выгрузок, отключения автопубликации виджетов и прерывания процесса экспорта данных виджета.

Кроме того, проведены работы по улучшениям продукта по итогам нагрузочных тестов, обновлен компонент поиска данных и проведена оптимизация переполучения данных виджета.

2023

Analytic Workspace 1.22

31 октября 2023 года компания Analytic Workspace сообщила о выходе обновленного релиза BI-системы Analytic Workspace (AW BI).

По информации компании, в релизе 1.22 реализована поддержка дополнительных типов источников, добавлены встроенные ETL-блоки для обработки данных через готовые скрипты, и другие функции.

Источники:

• Реализованы коннекторы для работы с данными источников Red Database и Firebird. Добавлена возможность подключения к СУБД Ред База Данных и БД Firebird.
• Расширен перечень форматов подключаемых файлов. Установлено расширения для чтения файлов формата .xlsb, добавлена возможность использования файлов с расширениями .txt, .tsv, .xlsb, .ods, .odf, .jsonl.
• Реализована поддержка чтения csv-файлов без строки заголовка. Добавлена комбинация параметров, которая позволит читать .csv файлы без строки заголовка внутри.
• Добавлены дополнительные параметры для чтения файлов из папок. Параметры позволяют управлять загрузкой файлов из папок по произвольно заданным критериям фильтра, а также автоматически задать для считанного набора данных название сгенерированного столбца по имени исходного файла.

Модели:

• Внедрена функциональность "ETL-блоки" - широкий шаг навстречу self-service ETL."ETL-блоки" - это инструмент, который позволяет трансформировать и обрабатывать данные, используя готовые скрипты. Избавляет пользователя от необходимости вручную программировать стандартные операции с данными, оптимизирует работу с моделями. Каждый ETL-блок - это:
  • Скрипт, который содержит функцию определения списка полей объекта и функцию сборки данных блока;
  • Список настраиваемых параметров модели при использовании ETL-блока.

В версии AW BI 1.22 добавлены следующие встроенные ETL-блоки:

• • "SQL-блок";
  • "Временная серия";
  • "Вычисляемые поля";
  • "Декоратор";
  • "Функция".

Список ETL-блоков будет расширен в следующих версиях системы.

Виджеты:

• Добавлен дополнительный тип виджета "Датчик". Тип виджета "Датчик" или "Спидометр" отображает значения одной меры и помогает интерпретировать эти значения на основе цветовой шкалы. "Датчик" часто используется для отображения ключевых показателей эффективности на информационных панелях управления. С помощью сегментации и кодировки цветом, виджет отображает достигнутые результаты. "Датчик" позволяет считывать и понимать значения, а также предоставляет общую информацию о работе в определенной области.
• Внедрена поддержка построения виджетов на данных live-моделей из сторонних БД ClickHouse. Появилась возможность подключения к внешним базам данных ClickHouse и строить виджеты, используя данные из этих баз.
• Появилась возможность регулирования HTML-виджета в зависимости от текущей темы приложения. В html-виджетах стало доступно определение цветов по отдельности для светлой и темной тем приложения.
• Добавлена функция для проброса фильтра из HTML-виджета. Реализована функция для проброса фильтра из HTML-виджета, которая позволяет сохранить заданную фильтрацию данных в создаваемом дашборде.

Администрирование:

• Реализован обновленный внешний REST провайдер. Провайдер с типом "Внешний REST" применяется для бесшовного перехода в систему внутри стороннего приложения через единую точку входа.
• Добавлено логирование действий пользователей в основные разделы AW BI. Теперь действия пользователей логируются в следующих разделах системы:
  • "Источники данных";
  • "Модели";
  • "Виджеты";
  • "Информационные панели".

Отчеты и выгрузки:

• Реализована вторая очередь работ по массовым рассылкам виджетов и информационных панелей на почтовые адреса пользователей системы. Теперь можно экспортировать и отправлять на почтовые адреса пользователей данные виджета или дашборда в графическом формате - .pdf или .png.

Новая глава в мире российских BI-систем

Импортозамещение затрагивает самые разные сферы в области ПО, и Business Intelligence не стал исключением. Реализованное на базе отечественной платформы и включенное в Единый реестр российского ПО BI-решение охватывает полный цикл работы с данными: сбор и консолидация, анализ и трансформация, визуализация и распространение.. Подробнее о платформе аналитики и визуализации Analytic Workspace (AW BI) — в этой статье. Подробнее здесь.

Analytic Workspace релиз 1.21 с настройкой обновления live-моделей по планировщику

27 августа 2023 года компания Analytic Workspace (ОСТ) представила Analytic Workspace релиз 1.21.

В релизе 1.21 BI-системы Analytic Workspace (AW BI) реализована настройка обновления live-моделей по планировщику, внедрена возможность рассылки на почту виджетов и дашбордов, добавлена возможность выгрузки табличных виджетов в формат .xlsx и другие функции.

Реализована настройка обновления структуры live-модели по планировщику

Добавлен виджет "Облако тегов".

Виджет позволяет визуализировать категорийные данные. Чем больше агрегированное значение категории, тем крупнее тег, что дает мгновенное представление о категориях, которые приносят больший вклад по показателю.

Добавлена возможность выгрузки табличных виджетов в файл формата .xlsx

Выгрузить данные можно в трех состояниях. Поддерживается выгрузка с форматированием оператором "Цвет ячейки".

В систему добавлена возможность рассылки на почту виджетов и информационных панелей (дашбордов). Пока отправляется ссылка на виджет или дашборд, а уже в следующем релизе можно будет отправлять и файлы со снимком отчета в момент рассылки.

Analytic Workspace 1.20: live-модели и управление стилем приложения

В версии 1.20 BI-системы Analytic Workspace (AW BI) внедрен функционал по работе с live-моделями, добавлены настройки для кастомизации диаграмм, появилась автоматическая синхронизация зависимых моделей и другие улучшения. Об этом 30 июня 2023 года сообщили в Analytic Workspace.

Модели

• Внедрен функционал по работе с live-моделями. Если у организации уже есть аналитическое хранилище (витрина) в ClickHouse, то AW BI может использовать его в качестве своего хранилища. Можно сразу приступать к этапу визуализации, минуя ETL и перегрузку уже подготовленных данных во внутреннее хранилище AW BI.
• Добавлен функционал по автоматической синхронизации зависимых моделей. Позволяет настроить обновление данных по событию - завершение синхронизации выбранных из списка моделей будет служить сигналом к запуску синхронизации зависимой модели.
• Внедрены представления (view) во внутреннее хранилище ClickHouse. Для работы с динамически изменяющимися таблицами из внутреннего хранилища AW BI внедрен функционал по созданию представлений, что позволяет использовать в сторонних системах ClickHouse AW как источник данных.

Виджеты

• Для виджета "Карта" добавлена возможность перехода к населенным пунктам, входящим в состав муниципальных образований.
• Добавлены настройки для кастомизации круговых, кольцевых и полярных диаграмм: "Пропорции" позволяют регулировать размер диаграммы относительно рабочей области, изменять размер отверстия в кольцевой диаграмме, определять расстояние между секторами и задавать скругление углов секторов; В настройку "Подписи" добавлена возможность вывода значений и процентов как вместе, так и по отдельности; "Итого" выводит итоговый агрегат и текстовые поля в кольцевой диаграмме; "Отрицательные значения" предоставляют возможности по регулировке вывода секторов с отрицательным агрегатом.
• Добавлен тип виджета "Комбинированная диаграмма с накоплением (горизонтальная)".
• Добавлены новые настройки для кастомизации типа виджета "Тренд": "Подписи" позволяют задать заголовок и подзаголовок для отображения в виджете; "Агрегаты" - группа настроек регулирует вывод промежуточных агрегатов; "Итоговый агрегат" включает и изменяет форматирование итогового агрегата; "Фон" изменяет фон тренда из числа предложенных вариантов; "Границы" позволяют настраивать отображение, скругление и цвет границы тренда.
• В HTML-виджет добавлена поддержка прямых переходов по ссылкам (относительным и абсолютным), с помощью чего возможно создавать навигационные виджеты.

Администрирование

В настройки центра управления добавлена возможность смены стиля приложения. Это особенно актуально для ИТ-систем, интегрирующихся с Analytic Workspace для реализации встроенного модуля BI-аналитики (подробнее об этом можно почитать здесь), так как у каждой системы есть свой стиль, в котором хочется выдержать все имеющиеся модули.

Версия 1.19 с модернизированным виджетом карты России

Компания Analytic Workspace 15 июня 2023 года объявила о выходе релиза 1.19: улучшены карты, добавлена статистика в реальном времени.

В обновленной версии BI-продукта Analytic Workspace модернизирован виджет карты России, появилась возможность разработки ETL-скриптов на локальном компьютере, добавлен сбор статистики по измененным моделям в реальном времени и внедрен ряд других улучшений.

Источники

• Добавлены дополнительные параметры для возможности чтения excel-файлов с данными из кросс-таблиц

Модели

• В ETL-редактор добавлено безопасное хранилище чувствительных параметров
• Появилась возможность разработки ETL-скриптов на локальном компьютере
• Сервис etl-stats стал получать статистику по измененным моделям в реальном времени

Виджеты

• Добавлена техническая возможность по обслуживанию и поддержанию в актуальном состоянии карт России
• Внедрена настройка подписей для отдельных показателей
• Добавлены настройки при форматировании виджета:

Настройка «цвет текста»

• Опция добавить цвет при настройке групп условий
• Свойство «Применить ко всем столбцам» для цвета ячейки или текста
• Дляоператора «Значки» добавлена возможность задать интервал.

Администрирование

• Обновлена форма изменения пользовательских групп

Модернизация построения моделей и расчетных полей

Компания Analytic Workspace (ОСТ) 15 мая 2023 года сообщила о том, что в BI-решении Analytic Workspace за первый квартал 2023 года реализовано более 40 обновлений и улучшений.

Модернизировано построение моделей и расчетных полей. В частности, обновлены формы задания структуры вычисляемых таблиц, в ETL-редактор добавлена библиотека с драйвером MongoDB.

Улучшено построение виджетов и информационных панелей. Добавлены новые типы визуализаций, расширен список поддерживаемых агрегатных функций, внедрен обновленный синтаксис (аналогичный используемому в Yandex DataLens), добавлена возможность создания расчетных агрегатов и переменных в виджетах.

Внедрен также ряд общих изменений. В частности, внедрен новый вид лицензии по типу доступа "Облачный" с автоматическим режимом получения и активации лицензии через новый сервис интеграции для систем, развернутых на Cloud серверах. Кроме того, добавлена поддержка установки Analytic Workspace в Kubernetes и выпущена специальная сборка продукта для клиентов с БД ClickHouse.

Возможности и Архитектура Analytic Workspace. Ценовая политика и тарифы

Возможности BI-системы Analytic Workspace (на апрель 2023 г)

Работа с источниками данных:

• Одновременное подключение к нескольким источникам:
  • СУБД: Oracle, Clickhouse, MySQL, Microsoft SQL, Greenplum, PostgreSQL, Vertica, MariaDB, MongoDB. Доступно добавление своих JDBC-коннекторов.
  • Файлы или архивы с файлами: xlsx, csv xml, json.
  • Web-сервисы (API)
  • Dнутреннее хранилище AW

• Просмотр физических моделей данных в подключенном источнике данных
• Управление доступом к источнику данных

Анализ и трансформация данных:

В Analytic Workspace для задач обработки и трансформации данных реализован полноценный ETL-слой на базе связки сервисов, бесшовно встроенных в интерфейс и процесс: Apache Airflow, Apache Spark, Apache Drill. Также можно предварительно просмотреть результаты моделирования, что ускоряет работу с большими объемами данных.

Построение моделей и расчетные поля:

Построение логических моделей данных в Analytic Workspace осуществляется drag-and-drop способом (захват и перенос элемента курсором), что не требует углубленных навыков программирования. Вычисляемые поля заполняются с помощью SQL-запросов, используется синтаксис, аналогичный применяемому в Yandex DataLens.

Визуализация:

В Analytic Workspace представлены более 20 видов встроенных визуальных элементов. Среди них:

• таблица:
• столбчатая диаграмма (вертикальная и горизонтальная)
• столбчатая диаграмма с накоплением (вертикальная и горизонтальная)
• линейный график
• круговая диаграмма
• кольцевая диаграмма
• полярная диаграмма
• радар
• тренд
• карта
• древовидная карта
• тепловая карта

Кроме того, можно создавать собственные виджеты с использованием HTML, CSS и JS благодаря встроенной интеграции с Echarts, где доступно 400+ видов изуализации.

Имеется возможность получения доступа к виджету по прямой ссылке и выгрузки данных визуального элемента в CSV-формате, а также управления доступом к виджету.

Командная работа:

• веб-интерфейс
• многопользовательский режим
• разграничение прав доступа
• безопасность данных

Преимущества Analytic Workspace

Работа с данными в режиме self-service:

• BI-решение Analytic Workspace имеет интуитивно понятный интерфейс: можно легко загружать данные, создавать модели и массивы данных, а также создавать виджеты и дашборды drag-n-drop способом.

Быстрое внедрение и обучение пользователей:

• Внедрение Analytic Workspace в бизнес занимает от 1 месяца, обучение сотрудников - от 1 недели.

Возможность глубокой кастомной аналитики данных:

• Несмотря на простоту использования, Analytic Workspace имеет полноценный ETL-модуль, позволяющий реализовать сложные сценарии подготовки и визуализации данных путем внедрения программных скриптов.

Ролевая модель доступа:

• В Analytic Workspace ролевая модель доступа к данным реализована вплоть до уровня отдельных виджетов с возможностью расширения полномочий. Разграничение доступа к данным осуществляется по принципу ABAC (доступ к атрибутам).

Самое доступное BI-решение на российском рынке:

• Невысокая стоимость для конечного пользователя, возможность оплатить подписку как на месяц, так и на год. Подходит для крупного, среднего и даже малого бизнеса.

Бесплатный демо-доступ на 14 дней:

• Можно попробовать поработать в Analytic Workspace самостоятельно: загрузить свои данные и убедиться, как это удобно.

Активное коммьюнити от вендора:

• Пользователи могут задавать вопросы, обсуждать возможности, делиться кейсами.

Уже используют:

Министерство здравоохранения и демографической политики Магаданской области, АО `БАРС Груп` (г. Казань), Инженерная группа `Общество Малышева 73` (г. Екатеринбург), ГК `Робот Икс` (г. Калининград), государственное автономное учреждение Иркутской области «Центр оценки профессионального мастерства, квалификаций педагогов и мониторинга качества образования», Министерство Здравоохранения Брянской области.

Ценовая политика и тарифы

Система предоставляется с возможностью использования либо на серверах компании-заказчика (on-premise), либо в облаке партнёров компании Analytic Workspace. Функциональность системы одинаковая для любого варианта использования.

Минимально необходимо приобретение одной лицензии с ролью разработчик.

При необходимости возможно докупить дополнительные пользовательские лицензии в любое время использования сервиса, при использовании любого пакета.

Существует три типа пользователей: разработчик, аналитик, специалист.

Стоимость лицензий:

• На собственных серверах заказчика:
  • Разработчик - 56 000 руб/год; 140 000 руб - бессрочная
  • Аналитик - 36 000 руб/год; 90 000 руб - бессрочная
  • Специалист - 8 000 руб/год; 20 000 руб - бессрочная

• На облачных серверах (Cloud):
  • Разработчик - 5 000 руб/месяц
  • Аналитик - 3 500 руб/месяц
  • Специалист - 700 руб/месяц

Стоимость для каждого типа разная в связи с тем, что они имеют разные возможности. Разработчик может пользоваться всей функциональностью сервиса, аналитик может все, исключая работу с источниками и моделями, а специалист может только просматривать виджеты и дашборды без возможности редактирования.

Архитектура платформы Analytic Workspace

Разработка приложений производится с помощью следующих языков программирования: Golang, PHP, Python.

Для функционирования BI-платформы на сервере необходимо следующее программное обеспечение:

• CentOS, версия 7 и выше — сервер приложения;
• Docker, версия 20 .10 .1 и выше — контейнеризация.

Требования к обеспечению клиентских рабочих мест:

• веб-браузеры:
  • Microsoft Edge версии 12 или выше;
  • Google Chrome версии 64 или выше;
  • Mozilla Firefox версии 52 или выше;
  • Safari версии 11 или выше;
  • Opera версии 43 или выше;
  • Яндекс.Браузер версии 19 .6 .1 и выше;

• одна из следующих ОС:
  • Microsoft Windows,
  • Linux (Unix),
  • MacOS,
  • iOS и других, поддерживающих работу указанных веб-браузеров.

2022

Возможности Analytic Workspace

Analytic Workspace (AW) — BI-система, которая относится к классу self-service и предназначена для анализа и визуализации данных, проверки гипотез и поддержки в принятии управленческих решений. Инструмент входит в «Единый реестр российских программ для ЭВМ и баз данных» (№13135). Система учитывает особенности российских операционных систем, таких как Astra Linux, "Ред ОС" и совместима с продуктами других российских компаний-разработчиков.

По информации на декабрь 2022 года, система Analytic Workspace (AW) позволяет снять нагрузку с сотрудников при расчете ключевых метрик эффективности организации и подготовки отчетности минимум в 2 раза, а также сократить ошибки при ручном сборе на 99%.

Analytic Workspace использует данные из информационных систем организации и файлов, преобразует данные и предоставляет возможность работать со всеми данными организации в одной системе и анализировать их. После чего данные можно визуализировать в наглядный дашборд для оперативного мониторинга.

Решение позволяет снять нагрузку с ИТ-отделов, так как бизнес-пользователи без навыков программирования могут проводить быструю разведку данных и получать результаты самостоятельно. На основе полученной аналитики руководитель может проводить: пересмотр объемов производства, планирование продаж, оптимизацию издержек, логистику и т.д.

Использование провайдера IaaS/PaaS- и AI/ML-сервисов Cloud

Сервис Analytic Workspace теперь использует услуги провайдера IaaS/PaaS- и AI/ML-сервисов компании Cloud (ООО «Облачные технологии»)», о чем последняя сообщила 28 октября 2022 года. В рамках сотрудничества подключены аналитические сервисы платформы Advanced от компании Cloud для эффективной работы BI-системы Analytic Workspace, благодаря чему качество предоставляемых клиентам услуг повысилось, а запуски проектов заказчиков стали более быстрыми.

Мы делаем наш продукт на базе современных технологий, предлагая государственным и коммерческим заказчикам инструменты полного цикла работы с данными. Фактически руководители получают возможность быстро и точно реагировать на изменения и выбирать перспективный вектор развития для компании. Мы уверены в гибкой масштабируемой вычислительной инфраструктуре Cloud и безопасности данных наших клиентов, - прокомментировал Ильдар Райманов, директор направления BI Analytic Workspace.

Платформа Advanced поможет клиентам сервиса Analytic Workspace снизить трудозатраты на поддержку и обслуживание инфраструктуры. Они получат возможность проводить оплату по факту потребления без капитальных вложений, а также смогут гибко масштабировать компоненты системы, развивать платформы данных с помощью высокотехнологичных облачных сервисов и реализовывать задачи в области data mining (интеллектуальный анализ данных, выявление скрытых полезных фактов и связей в крупных массивах информации).

Нам интересно развивать цифровые инструменты партнёров и повышать качество их услуг — в этом мы видим миссию Cloud как ведущего российского провайдера облачных услуг. Мы рады, что такое технологическое партнерство смогло расширить работу российской BI-системы и упростило работу с данными при помощи нашего облака. Думаю, впереди нас ждут новые вызовы и интересные кейсы с использованием облачных технологий, - прокомментировал Михаил Лобоцкий, директор по продуктам Cloud.

Платформа Advanced компании Cloud – это более 50 продвинутых облачных сервисов, уже зарекомендовавших себя во многих странах как надежные и высокотехнологичные решения. С помощью платформы Advanced можно создавать облачные продукты и сервисы в самых разных областях экономики, науки и образования. От простых и надежных систем резервного копирования и ИТ-инфраструктуры целых предприятий до разворачивания умных систем электронной коммерции, аналитики на основе искусственного интеллекта и образовательных платформ дистанционного обучения.

Совместимость с "Ред ОС"

Российский разработчики ОСТ и «РЕД СОФТ» подтвердили совместимость аналитической BI-платформы Analytic Workspace с операционной системой РЕД ОС. Импортонезависимое решение предназначено для использования в органах государственной власти, финансовом секторе и в других организациях, нуждающихся в big data. Об этом 11 июля 2022 года сообщила компания «Ред Софт».

Analytic Workspace относится к классу self-service bi и предназначена для работы с данными (анализ и визуализация), проверки гипотез и поддержки в принятии решений. Продукт позволяет снять нагрузку с ИТ-отделов: бизнес-пользователи без навыков программирования могут проводить быструю разведку данных и получать первые результаты менее чем за час. Входит в Единый реестр российских программ для ЭВМ и баз данных (№13135).

Высокотехнологичные продукты позволяют усовершенствовать и оптимизировать бизнес-процессы. Расширение экосистемы РЕД ОС за счёт таких технологий демонстрирует, что российский ИТ-рынок готов предоставить качественное импортонезависимое ПО для самых разных задач, – прокомментировал Рустам Рустамов, заместитель генерального директора РЕД СОФТ.

Для нашей компании является приоритетным не только развитие возможностей самого продукта, но и обеспечение функционирования платформы на ведущих отечественных операционных системах, что обеспечивает покрытие полного спектра вопросов информационной безопасности. Мы создаем комфортные условия для развития бизнеса, а широкая доступность технологий Analytic Workspace в экосистеме РЕД ОС показывает ценность сотрудничества российских разработчиков, — рассказал Ильдар Райманов, директор направления BI, Analytic Workspace.