Технически разлики между BI системи (Power BI, Qlik Sense, Tableau)

Времето необходимо за прочитане е 11 минути

Ние и квадратът на Гартнър 2019 BI 🙂

Целта на тази статия е да сравни три водещи BI платформи, които са в лидерската позиция на квадранта на Гартнър:

— Power BI (Microsoft)
— Tableau
— Qlik

Илюстрация 1. Магическия квадрант на BI на Гартнър 2019

Наричам се Жданов Андрей, ръководител на отдела по анализи в компанията Аналитикс Групп (www.analyticsgroup.ru). Ние изграждаме визуални отчети в областта на маркетинга, продажбите, финансите, логистиката; с други думи, занимаваме се с бизнес анализи и визуализация на данни.

Аз и моите колеги работим с различни BI платформи от няколко години. Разполагаме с доста добър опит от проекти, който ни позволява да сравняваме платформите от гледна точка на разработчиците, анализаторите, бизнес потребителите и внедрителите на BI системи.

Ще имаме отделна статия за сравнение на цените и визуалното оформление на тези BI системи, затова тук ще се опитаме да оценим системите точно от гледна точка на анализатора и разработчика.

Ще изберем няколко направления за анализ и ще ги оценим по 3-балова система:

— Праг на достъпност и изисквания към анализатора;
— Източници на данни;
— Почистване на данни, ETL (Extract, Transform, Load)
— Визуализации и разработка
— Корпоративна среда — сървър, отчети
— Поддръжка на мобилни устройства
— Вградена (embedded) аналитика в трети приложения/сайтове

1. Праг на достъпност и изисквания към анализатора

Power BI

Срещал съм много потребители на Power BI, които не са били ИТ специалисти, но са могли да създадат приличен отчет. Power BI използва същия език за заявки, какъвто е и Excel — Power Query и езика на формули DAX. Много анализатори добре познават Excel, така че преминаването към тази BI система им се получава доста лесно.

Повечето действия се изпълняват сравнително лесно в редактора за заявки. Плюс, има разширен редактор с езика M за професионалисти.

Илюстрация 2. Конструктор на заявки на Power BI

Qlik Sense

Qlik Sense изглежда много дружелюбно — малко настройки, бърза възможност за създаване на отчет, възможност за използване на конструктора за зареждане на данни.

Първоначално изглежда по-лесен от Power BI и Tableau. Но от опит мога да кажа, че след известно време, когато анализаторът създаде няколко прости отчета и му е необходимо нещо по-сложно, той ще се сблъска с необходимостта да програмира.

Qlik притежава много мощен език за зареждане и обработка на данни. Има собствен език на формули Set Analysis. Поради това аналитикът трябва да умее да пише заявки и връзки, да помага на данните да попадат в виртуални таблици и активно да използва променливи. Възможностите на езика са много широки, но ще изискват изучаване. Вероятно всички аналитика на Qlik, които познавам, имат сериозен ИТ опит.

Интеграторите на Qlik, като нас, често обичат да разказват за асоциативния модел, при който при зареждане на данни всичко се поставя в оперативната памет, а връзките между данните се осъществяват чрез вътрешния механизъм на платформата. Когато се избират стойности, няма вътрешни подзапитвания, както в класическите бази данни. Данните се подават почти незабавно благодарение на предварително индексираните стойности и връзки.

На практика това обаче води до създаване на автоматични връзки между таблиците, при съвпадение на имената на полетата. Например, не е възможно да имате различни таблици без връзки, които имат едно и също поле. Трябва да свикнете с това. Или трябва да преименувате колоните и да следите да не съвпадат имената, или да обедините всичките таблици на факти в една и да ги заобиколите с справочни таблици от типа „звезда“. Вероятно на начинаещите им е удобно, а на опитните анализатори вече им е без значение.

Типичният интерфейс за зареждане и обработка на данни за аналитик изглежда така.

Рисунок 3. Редактор за зареждане на данни Qlik Sense, таблица Календар

Забележка: В Power BI ситуацията обикновено изглежда различно, оставяш различни таблици на факти и справочници, можеш ръчно да свързваш таблиците по класическия начин, т.е. съпоставяш колоните ръчно.

Tableau

Разработчиците на Tableau го позиционират като BI с удобен и приятелски интерфейс, който позволява на аналитика самостоятелно да изучава своите данни. Да, в нашата компания имаше анализатори, които без ИТ опит можеха да правят своите отчети. Но оценката на Tableau ще я понижа по няколко причини:
— Слаба локализация на руски език
— Сървърите на Tableau Online не се намират в РС
— Доста простият конструктор за зареждане започва да създава проблеми, когато е необходимо да се изградят доста сложни модели на данни.

Рисунок 4. Конструктор за зареждане на данни Tableau

Един от въпросите, които задаваме по време на интервюто с анализатори по Tableau, е “Как да изградим модел на фактическите таблици с справочни таблици, без да обърнем всичко в единна таблица?!” Сливането на данни изисква внимателно използване. Многократно съм корigирал грешки на своите анализатори, свързани с дублирането на данни след подобни обединения.

Плюсът на Tableau е доста своеобразна система, когато всяка графика се прави на отделен лист, а след това създаваш Dashboard, където започваш да разполагаеш създадените листове. После може да създадеш Story, комбинация от различни Dashboard. Разработката в Qlik и Power BI в това отношение е по-лесна, веднага скицираш шаблони за графики, задаваш мерките и измеренията, и Dashboard е готов. Изглежда, че трудоемкостта за подготовка в Tableau поради това нараства.

2. Източници на данни и зареждане

В този раздел няма явен лидер, но ще откроим Qlik заради няколко приятни особености.

Tableau в безплатната си версия е ограничен в източниците, но в нашите статии повече се ориентираме към бизнеса, а бизнесът може да си позволи търговски продукти и анализатори. Затова не намалихме оценката на Tableau по този параметър.

Рисунок 5. Списък на възможните източници на Tableau

В останалото, списъкът на източниците навсякъде е впечатляващ — всички таблични файлове, всички стандартни бази данни, уеб подключения, всичко работи без проблем. Не съм се сблъсквал с нестандартни хранилища на данни, там вероятно има свои нюанси, но в повечето случаи няма да имате проблеми с зареждането на данни. Изключение е, може би, 1С. Няма директни конектори за 1С.

Партньорите на Qlik в Русия продават собствените си конектори за 100 000 — 200 000 рубли, но в повечето случаи е по-евтино да се направят извлечения от 1С на FTP в Excel или базата данни SQL. А може да публикувате базата 1С в уеб и да се свързвате с нея чрез протокола Odata.

PowerBI и Tableau стандартно могат да направят това, а Qlik ще поиска платен конектор, така че и тук е по-лесно да се извлече данни в междинна база данни. Във всеки случай можете да решите всички въпроси свързани с връзките.

Рисунок 6. Списък на възможните източници на Qlik Sense

Допълнително си заслужава да се отбележи особеността на Qlik, че те предлагат като отделен продукт както платени, така и безплатни конектори.

Рисунок 7. Допълнителни конектори на Qlik Sense

От опита си добавям, че при големи обеми данни или многобройни източници не винаги е целесообразно да се свързва веднага BI системата. В сериозни проекти обикновено се използва хранилище за данни, база данни с вече подготвени за анализ данни и т.н. Не може просто да вземете и изтеглите, да речем, 1 милиард записа в BI системата. Тук вече е нужно да се обмисли архитектурата на решението.


Рисунок 8. Източници на данни в Power BI

Но защо избрахме Qlik? Много ми харесват 3 неща:
— QVD файлове
Собствен формат за съхранение на данни. Понякога могат да бъдат изградени сериозни търговски проекти само на основата на QVD файлове. Например, първото ниво — сурови данни. Второто ниво — обработени файлове. Третото ниво — агрегирани данни и т.н. Тези файлове могат да се използват в различни приложения, за тях могат да отговарят различни служители и услуги. Скоростта на зареждане от такива файлове е десет пъти по-бърза, отколкото от обикновени източници на данни. Това позволява икономия на база данни и обмен на информация между различни приложения Qlik.

— Инкрементално зареждане на данни
Да, Power BI и Tableau също могат да го правят. Но Power BI ще изисква скъпа Premium версия, а в Tableau няма същата гъвкавост, както в Qlik. В Qlik на QVD файловете може да правите копия на системите за различно време и след това да обработвате тези данни както искате.

— Свързване на външни скриптове
Освен QVD файловете за съхранение на данни, в Qlik кодът на скрипта също може да бъде изнесен извън приложението и да се свързва с командата Include. Това вече позволява организиране на екипна работа, използване на системи за контрол на версиите, управление на единен код за различни приложения. В Power BI има разширен редактор на заявки, но такова екипно сътрудничество не успяхме да настроим както в Qlik. Всички BI системи имат проблеми с това — ефикасното управление на данни, код и визуализации от едно място е просто невъзможно. Максимумът, който успяхме да направим, е да изнесем QVD файловете и кода на скриптовете. Визуалните елементи трябва да се редактират вътре в самите отчети, което не позволява масово промяна на визуализациите при всички клиенти едновременно.

А какво ще кажете за механизма Live свързване? Tableau и Power BI поддържат LIVE свързване към редица източници, за разлика от Qlik. Отнасяме се доста безразлично към тази функция, тъй като практиката показва, че когато става въпрос за големи данни, работата с LIVE свързване става просто невъзможна. А BI в повечето случаи е необходим за големи данни.

3. Почистване на данни, ETL (Извличане, Преобразуване, Зареждане)

В този раздел имам два лидера, Qlik Sense и Power BI.
Да кажем, че Qlik е мощен, но сложен. Разберете SQL-подобния им език и ще можете да правите почти всичко — виртуални таблици, свързвания и обединение на таблици, минаване с цикъл през таблицата и генериране на нови таблици, множество команди за обработка на редове. Например, поле в 1 клетка, което съдържа данни от вида “Иванов 851 Белый”, може на момента да бъде разложено не само на 3 колони (както всички умеят), а и на 3 реда, например. Същото на момента да се направи обединение на 3 реда в 1 също е лесно.

Рисунок 9. Как да заредите и транспонирате таблица в Qlik Sense от Google Sheets

Power BI в това отношение изглежда по-просто, но повечето задачи лесно се решават чрез конструктора за заявки. Задавате ред параметри, транспонирате таблицата, работите с данните, и всичко това без нито един ред код.

Рисунок 10. Как да заредите и транспонирате таблица в Power BI от AmoCRM

При Tableau ми се струва, че идеологията е различна. Те залагат повече на естетиката и дизайна. Свързването на множество различни източници и обработването им в Tableau ми се струва много сложно. В търговските проекти в повечето случаи данните за Tableau вече се подготвят и събират в хранилища и бази данни.

Рисунок 11. Как да заредите и транспонирате таблица в Tableau

4. Визуализации

В този раздел не изтъкваме лидер. Ще имаме отделна статия, в която на примера на един случай ще покажем един и същ отчет във всичките 3 системи (Статия „Аналитика на момичета с ниска социална отговорност „). Тук въпросът повече е за вкус и майсторство на аналитика. В интернет можете да намерите много красиви картинки, изградени на база на всяка от тези системи. Основните възможности за визуализации са приблизително еднакви за всички. Останалото се решава с помощта на Extensions. Има платени и безплатни. Има разширения както от самите вендори, така и от фрийлансъри и интегратори. Можете сами да напишете собствено разширение за визуализация за всяка платформа.

Харесвам стила на Tableau, смятам го за строг и корпоративен. Но да получите наистина красива снимка в Tableau е трудно. Отличен пример за визуализация в Tableau, където са използвани само разширения. Не мога да го повторя, тъй като нямам тези разширения, но изглежда красиво.

Рисунок 12. Външен вид на отчетите Tableau с Extensions

Power BI може също да стане интересно.

Рисунок 13. Външен вид на отчетите Power Bi с Extensions

Единственото, което не разбирам в Power BI, е защо имат такива странни цветове по подразбиране. На всеки график съм принуден да променям цвета на своя фирмен, корпоративен и се учудвам на стандартната цветова схема.

Qlik Sense също зависи от Extensions. Използването на добавки може да промени отчетите до неузнаваемост. Можете също така да наложите своя тема и оформление.

Рисунок 14. Външен вид на отчетите Qlik Sense с Extensions

От гледна точка на разработчика, Qlik Sense ми е по-удобен заради стандартните опции като алтернативни измерения и мерки. В настройките на визуализацията можете да зададете няколко измерения и мерки, и потребителят може лесно сам да зададе какво да гледа на този или онзи график.

В Power Bi и Tableau ми се налага да настройвам параметри, бутони, да програмирам поведението на системата в зависимост от тези параметри. Уча се, защо е толкова сложно. Същото е и с възможността да промените вида на визуализациите.

В Qlik можете в един обект да скриете различни видове визуализации, докато в Power BI и Tableau с това е по-трудно. Отново, тук повече зависи от умението на изпълнителя. Можете да направите шедьовър в всяка система, а без опит навсякъде ще получавате неясни графики.

5. Корпоративна среда — сървър, отчети

Всички продукти имат корпоративни версии за сървъри. Работил съм с всички издания и мога да кажа, че всяко от тях има своите силни и слаби страни. Изборът на продукт трябва да бъде съобразен с вашите изисквания към софтуера, като се вземат предвид техните нюанси. При всички доставчици можете да раздавате права както на ниво потребителски акаунти и групи, така и на ниво Data Row Level Security. Достъпно е автоматичното обновление на докладите по график.

Qlik Sense Enterprise е отлична възможност за изграждане на аналитика вътре във вашата организация за малкия и среден бизнес. Може да изглежда по-скъпо от Power BI Pro, но не трябва да забравяте, че сървърите на Power BI Pro са в облака на Microsoft и не можете да влияете на производителността, а когато ви е необходим Power BI Premium, който може да се инсталира на вашите сървъри, цената започва от 5000 $ на месец.

Qlik Sense Enterprise стартира от 230 000 рубли за 5 лицензии (плащането е годишно, след което само техническа поддръжка), което е значително по-достъпно от Power BI Premium. А Qlik Sense Enterprise ще ви позволи да използвате всичките възможности на Qlik. Освен може би една. По неизвестна причина Qlik реши, че функцията за изпращане на отчети в PDF по имейл трябва да се предлага като отделен сервис NPrinting.

Но Qlik Sense Enterprise е по-мощен от Power BI Pro и затова можем да направим следното сравнение.

Qlik Sense Enterprise = Power BI Premium, с равни възможности, но по-евтино при средни внедрявания. Големите внедрения обикновено се изчисляват на страна на доставчика, където те могат да предложат индивидуални условия за вашата компания.

В това отношение ще дадем предпочитание на Qlik Sense Enterprise, там има всички възможности за изграждане на сериозна аналитика на огромни данни. На нашето мнение, Qlik ще работи по-бързо от Power BI на големи масиви, на конференции сме срещали клиенти, които първоначално тествали данните си в милиарди записи и Power BI е показвал по-лоши резултати.

Рисунка 15. Външен вид на отчетите на сървъра Qlik Sense Enterprise

Qlik Sense Cloud = Power BI Pro. Qlik Sense Cloud е 1.5 пъти по-скъпо* и има доста съществени ограничения, които не ни позволяват да използваме тази платформа. Не може да се използват Extensions, дори и вградени. А без разширения Qlik губи част от визуалната си красота.

Рисунка 16. Външен вид на контролния панел на Power BI Pro

*Алтернативен вариант е използването на Qlik Sense Enterprise по абонамент. Но за да не бъде тази статия възприета като реклама, няма да обсъждаме нашето ценообразуване.

Tableau малко стои настрана за нас. Те предлагат както облачни абонаменти за 70$ на разработчик и 15$ на наблюдател, така и скъпи решения за сървъри. Но основната идея на Tableau е, че за големи данни е нужно обработването и съхраняването на данните да се организират извън системата. Обективно по-малките функции не позволяват сериозно обработване на данни в Tableau. Визуализиране и анализиране, да. Но за малкия и средния бизнес обикновено е проблематично да се създаде отделно хранилище. Аз бих намалил оценката на Tableau за това, ако не беше тяхната 1 характеристика. Tableau сървърът без проблеми изпраща имейли по график с приложения във формат CSV или PDF. Освен това могат да се разпределят права, автофилтри и др. Power BI и Qlik по някаква причина не могат да направят това, а за някои хора това може да е критично. Поради това Tableau запазва позицията си в нашия спор.

Рис. 17. Външният вид на контролния панел на Tableau Server

Също така в корпоративната среда трябва да се помисли за разходите по внедряване и поддръжка. В Русия съществува практика, че Power BI е по-широко разпространен в малкия бизнес. Това доведе до появата на много обяви за работа и автобиографии, появата на малки интегратори. Това ще улесни намирането на специалисти за малки проекти. Но вероятно повечето от тях нямат опит с големи внедрявания и работа с големи данни. Qlik и Tableau са точно обратното. Партньорите на Qlik са малко, а на Tableau още по-малко. Тези партньори са специализирани в големи внедрявания с висок среден чек. Обявите за работа и автобиографии на пазара не са много, а входният праг за тези продукти е по-висок, отколкото за Power BI. Но в Русия има успешни внедрявания на тези продукти за хиляди потребители и те показват добри резултати при работа с големи данни. Просто е необходимо да се разберат слабите и силните страни на продуктите, съобразно именно с вашия бизнес.

6. Подкрепа за мобилни устройства.

В този раздел ще подчертаем Power BI и Tableau. Можете да инсталирате мобилни приложения и те ще изглеждат доста адекватно на екраните на мобилни устройства. Въпреки това, анализът на мобилни устройства все пак остава по-слаб в сравнение с този на ПК. Не е толкова удобно да се използват филтри, изображенията са малки, а цифрите трудно се виждат и т.н.

Фигура 18. Външен вид на отчета Power BI на iPhone

Фигура 19. Външен вид на отчета Tableau на iPhone

Фигура 20. Външен вид на отчета Qlik Sense на iPhone

Защо понижихме оценките на Qlik? По непонятни за нас причини мобилният клиент е достъпен само на iPhone, на Android ще трябва да се използва обикновен браузър. Освен това, при използване на Qlik, веднага трябва да се разбере, че някои разширения или визуализации не се намаляват или авто позиционират на мобилни устройства, както се очаква. Отчет, който изглежда много добре на ПК, на малък екран изглежда значително по-лошо. Налага се да се правят отделни отчети за мобилни устройства, където да се премахват филтри, KPI и още редица обекти. Това важи също и за Power BI или Tableau, но в Qlik се проявява особено силно. Надяваме се Qlik все още да работи по своя мобилен клиент.

Ако планирате да прекарвате много време в аналитика именно от мобилни устройства, има смисъл да инсталирате всичките 3 клиента и на тестови отчети да проверите тяхното представяне. Всеки търговец в своето сайт има галерия с тестови отчети за запознаване.

7. Вградена (Embedded) аналитика в странични приложения/сайтове

Използването на аналитика като странична услуга не винаги е удобно. Може би разработвате свой продукт, но не сте готови да се занимавате с разработка на визуализации и аналитичен двигател от нулата. Може би искате да внедрите аналитика на вашия сайт, така че клиентът самостоятелно да се регистрира, да зарежда своите данни и да провежда анализ в личния си кабинет. За това е необходима вградена аналитика (Embedded).
Всички продукти позволяват това да се направи, но в тази категория изтъкваме Qlik.

Power Bi и Tableau категорично твърдят, че за такива цели трябва да се закупи отделен продукт Tableau Embedded Analytics или Power BI Embedded. Това не са евтини решения, а с хиляди долари на месец, което веднага ограничава тяхното използване. Повечето проекти веднага стават неикономически ефективни за нашите клиенти. Идеята е, че трябва не просто да публикувате отчет в целия интернет, а да осигурите публикуването на отчети в съответствие с определени права за достъп, с защита на данните, авторизация на потребители и т.н.

А Qlik ще ви помогне. Разбира се, те също имат Qlik Analytics Platform, който се лицензира на сървър и организира неограничен брой връзки. Това също ще бъде скъпо, както и конкурентите Tableau и Power Bi. И в случай на неограничени връзки, опциите не са много.

Но в Qlik има концепция, наречена Mashup. Да предположим, че имате Qlik Sense Enterprise и 10 лиценze. Стандартната аналитика, външният вид, всичко това вече е скучно. Вие създавате собствен сайт или приложение и можете да вградите цялата си аналитика точно там. Идеята е, че опростено казано, Mashup е визуализация в програмния код. Чрез API можете програмно да зададете създаването на визуализация вътре в приложението или сайта си. Qlik Sense Enterprise все още ще ви е необходим за лицензиране (лицензии за връзки със сайта = лицензи за връзки с BI), за зареждане на данни и т.н., но визуализациите ще се показват не на страна на този сървър, а ще се вграждат в приложението или сайта ви. Можете да използвате CSS стилове, да задавате нови шрифтове, цветове. Вашите 10 потребители вече няма да влизат в сървъра за аналитика, а ще ползват вашия корпоративен портал или приложение. Аналитиката ще премине на ново ниво.

Рисунок 21. Външният вид на отчета Qlik Sense, внедрен на уебсайт.

Стане трудно да се разбере къде са елементите на сайта и къде започва Qlik Sense.
Разбира се, ще ви е необходим програмист, а най-вероятно и няколко. Един за уеб програмиране, един за работа с API Qlik. Но резултатът си струва.

Изводи. Обобщаваме.

Трудно е категорично да се каже кой е по-добър, а кой по-лош. Power BI и Qlik са наравно в нашето състезание, Tableau малко изостава. Но за вашия бизнес резултатът може да бъде различен. В BI платформите визуалната част е много важна. Ако сте разгледали десетки демо отчети и изображения в интернет за всички BI системи и не ви харесва как изглежда една от платформите, вероятно няма да я внедрите, дори и цената или техническите характеристики да ви устройват.

Следва задължително да изчислите стойността на лицензите, внедряването и поддръжката на BI платформата. Възможно е при вас да бъде определен лидер. Голямо значение има и изпълнителят или възможността да наемете подходящ специалист. Без професионалисти в която и да е платформа, резултатът ще бъде плачевен.

Желая ви успешни BI интеграции, Андрей Жданов и Владимир Лазарев, Аналитикс Груп

Източник: habr.com