Замена Qlik Sense. Переход на отечественный технологический стек

8 апреля 2024
0 комментариев

Опыт перехода Novo BI с Qlik Sense на отечественный продукт. Рассмотрим, как удалось создать новую систему, и какие трудности возникли перед компанией.

Novo BI — российский разработчик программных продуктов для прогнозирования спроса и интегрированного планирования в цепях поставок.

На конец 2023 года Novo BI в цифрах:

  • 12+ лет опыта;
  • 200+ клиентов;
  • 12 000 пользователей.

Компания Novo BI с 2020 года официально является резидентом инновационного центра Сколково.

Ситуация до старта проекта

С начала 2015 года аналитический процесс был внедрен на платформе Qlik Sense. Данными решениями пользовались десятки клиентов. Были построены сотни решений, способных обрабатывать впечатляющие объемы данных — от 100 миллионов до 3 миллиардов записей.

В 2023 году возникла потребность перехода на отечественное программное обеспечение, что стало предметом серьезного обсуждения и принятия мер по поиску нового продукта.

Встал вопрос замены Qlik Sense. Задача — найти замену с набором понятных и явных преимуществ для действующих клиентов.

Необходим был инструмент, который не просто заменит визуальную часть, но закроет 80% трудоемкости — это подготовка данных. Самая большая сложность — это ETL.

В сложившийся ситуации был рассмотрен отечественный рынок. Была проведена следующая последовательность этапов в поиске альтернативы:

  • Проведено изучение BI-систем на рынке, результатом чего был составлен ТОП-5.
  • Подготовлен тестовый пример — датасет 20 млн записей, самое популярное приложение Qlik Sense с 3-мя дашбордами.
  • Проведены интервью и знакомства с поставщиками BI решений в России. Передан тестовый пример.

В ходе демонстрации задачи некоторые вендоры отказались решать ее из-за объема данных. Даже те, кто согласился, не смогли справиться с таким количеством записей. Novo BI столкнулась с трудностью в поиске бизнес-интеллект инструмента, способного полностью заменить Qlik Sense.

Система Novo Forecast Enterprise в ИТ-архитектуре предприятия

Необходим был продукт, который закроет «Сервер аналитики».

Решение

После поиска единой системы было принято стратегическое решение отказаться от единого инструмента BI и вместо этого обратить внимание на инструменты для каждого компонента — ETL, хранилища данных и визуализации.

В результате выбрали следующие продукты:

  • Для ETL — Loginom;
  • Для хранилища данных — ClickHouse;
  • Для визуализации — Superset.

Loginom проявил свою эффективность в обработке и сохранении массивов данных, что стало важным фактором в стремлении к оптимизации процессов.

Результаты

За два месяца было построено первое демо, которое показало плюсы использования платформы Loginom с связке с ClickHouse и Superset.

Loginom смог обработать 3 миллиарда записей с поражающей скоростью. Такие ключевые моменты необходимы клиентам Novo BI.

Новая архитектура

В сравнении с Loginom компания Novo BI выявила у Qlik Sense следующие недостатки:

  • Ограниченность последовательной подготовки данных;
  • Использование скриптов, аналогичных SQL;
  • Сохранение подготовленных данных исключительно во внутреннем хранилище, ограничивая возможность использования преобразованных данных в сторонних приложениях в соответствии с лицензионной политикой.

Платформа Loginom предоставила значительные преимущества:

  • В два раза более быстрая подготовка данных благодаря распараллеливанию потоков;
  • Интерфейс low-code, no-code, делающий процессы более доступными;
  • Возможность сохранения обработанных данных обратно в источники, предоставляя гибкость в использовании результатов обработки.

Новое решение

Опыт миграции с западных BI-систем на российское ПО оказался для компании не только вызовом, но и возможностью раскрыть новые горизонты в области аналитики. Этот переход стал ключом к повышению эффективности и укреплению безопасности данных.

Подробнее о системе Novo Forecast Enterprise в ИТ-архитектуре предприятия в выступлении Алексея Батурина, технического директора Novo BI:

pdfЗамена Qlik Sense на Loginom. Переход на отечественный технологический стек.pdf

Если вы хотите применять аналитическую low-code платформу Loginom для решения задач бизнеса, свяжитесь с нами.

Другие материалы по теме:

Отличия платформ продвинутой аналитики от BI-систем

Простой визуальный ETL для BI. Интеграция Loginom и Visiology. Вебинар

Магические атрибуты Data Driven бизнеса: построение единого хранилища данных

#loginom day 2023

Смотрите также