Vrijeme potrebno za čitanje 11 minuta
Mi i Gartnerov kvadrat 2019 BI 🙂
Cilj ovog članka je usporedba tri vodeće BI platforme koje se nalaze u vodstvu Gartnerovog kvadranta:
— Power BI (Microsoft)
— Tableau
— Qlik
Slika 1. Gartnerov BI Magic Quadrant 2019
Zovem se Ždanov Andrej, vodim odjel za analitiku u tvrtki Analytics Group (). Gradimo vizualne izvještaje za marketing, prodaju, financije, logistiku, drugim riječima, bavimo se poslovnom analitikom i vizualizacijom podataka.
Moji kolege i ja već nekoliko godina radimo s raznim BI platformama. Imamo vrlo dobar iskustvo s projektima, što nam omogućava da uspoređujemo platforme iz perspektive programera, analitičara, poslovnih korisnika i implementatora BI sustava.
Imat ćemo poseban članak o usporedbi cijena i vizualnog dizajna ovih BI sustava, pa ćemo ovdje pokušati ocijeniti te sustave s aspekta analitičara i programera.
Istaknuti ćemo nekoliko područja za analizu i ocijeniti ih sa sustavom od 3 boda:
— Ulazne prepreke i zahtjevi za analitičara;
— Izvori podataka;
— Čišćenje podataka, ETL (Izvadi, Transformiraj, Učitaj)
— Vizualizacije i razvoj
— Korporativno okruženje — server, izvještaji
— Podrška mobilnim uređajima
— Ugrađena (embedded) analitika u vanjske aplikacije/web stranice
1. Ulazne prepreke i zahtjevi za analitičara
Power BI
Vidjela sam mnogo korisnika Power BI koji nisu bili IT stručnjaci, ali su mogli stvoriti dobar izvještaj. Power BI koristi isti jezik upita kao Excel — Power Query i jezik formula DAX. Mnogi analitičari dobro poznaju Excel, pa im prebacivanje na ovaj BI sustav ide prilično lako.
Većina radnji se prilično jednostavno izvodi u uređivaču upita. Plus postoji napredni uređivač s jezikom M za profesionalce.
Slika 2. Uređivač upita Power BI
Qlik Sense
Qlik Sense izgleda vrlo prijateljski — malo postavki, brza mogućnost stvaranja izvještaja, može se koristiti graditelj učitavanja podataka.
U početku se čini jednostavnijim od Power BI i Tableau. No, iz iskustva ću reći da nakon nekog vremena, kada analitičar stvara nekoliko jednostavnih izvještaja i zatreba nešto složenije, suočit će se s potrebom za programiranjem.
Qlik ima vrlo moćan jezik za učitavanje i obradu podataka. Ima vlastiti jezik formula Set Analysis. Stoga analitičar mora biti sposoban pisati upite i veze, smještati podatke u virtualne tablice, aktivno koristiti varijable. Mogućnosti jezika su vrlo široke, ali će zahtijevati njegovo proučavanje. Vjerojatno svi Qlik analitičari koje poznajem imaju neki ozbiljni IT background.
Qlik integratori, poput nas, često vole pričati o asocijativnom modelu, kada se pri učitavanju podataka svi oni smještaju u radnu memoriju, a veza između podataka ostvaruje se unutarnjim mehanizmom platforme. Kada se biraju vrijednosti, ne provode se unutarnji podupitni zahtjevi, kao u klasičnim bazama podataka. Podaci se isporučuju gotovo trenutno zahvaljujući unaprijed indeksiranim vrijednostima i vezama.
Ipak, u praksi to dovodi do stvaranja automatskih veza među tablicama, kada se imena polja podudaraju. Na primjer, ne možeš imati različite tablice bez veza koje imaju isto polje. Na to se treba priviknuti. Moraš ili preimenovati stupce i paziti da imena ne budu ista, ili sve tablice faktora spojiti u jednu te ih okružiti referentnim tablicama tipa 'zvijezda'. Vjerojatno je to ugodno za početnike, dok iskusnim analitičarima više nije važno.
Tipični korisnički sučelje za učitavanje i obradu podataka za analitičara izgleda ovako.
Slika 3. Uređivač učitavanja podataka Qlik Sense, tablica Calendar
Napomena: U Power BI situacija obično izgleda drugačije, ostavljaš različite tablice faktora i referentne tablice, možeš ručno povezivati tablice klasičnim načinom, tj. ručno uspoređivati stupce jedni s drugima.
Hvala. Zato sam ga i nazvao Tabix, jer se prve slova poklapaju.
Tableau programeri ga pozicioniraju kao BI s ugodnim i prijateljskim sučeljem, koji će omogućiti analitičaru da samostalno proučava svoje podatke. Da, u našoj kompaniji su bili analitičari koji su mogli izrađivati svoje izvještaje bez IT iskustva. No, ocjenu Tableau smanjujem iz nekoliko razloga:
— Slaba lokalizacija na ruski jezik
— Tableau Online poslužitelji nisu u RF
— Prilično jednostavan konstruktor učitavanja počinje izazivati probleme kada je potrebno izgraditi prilično složen model podataka.
Slika 4. Konstruktor učitavanja podataka Tableau
Jedno od pitanja koje postavljamo tijekom intervjua za analitičare za Tableau je: "Kako izgraditi model tablica činjenica s referentnim tablicama, ne spajajući sve u jednu tablicu?!" Data Blending zahtijeva pažljivo korištenje. Mnoge sam puta ispravljao pogreške svojih analitičara u vezi s dupliciranjem podataka nakon takvih spajanja.
Osim toga, Tableau ima prilično jedinstven sustav, gdje svaki grafikon radite na zasebnom listu, a zatim stvarate Dashboard gdje počinjete slagati postojeće listove. Kasnije možete stvoriti Story, što je kombinacija različitih Dashboarda. Razvoj u Qliku i Power BI-u u ovom pogledu je jednostavniji; odmah možete staviti šablone grafikona na list, definirati mjere i dimenzije i Dashboard je gotov. Čini mi se da se zbog toga povećavaju troškovi rada na pripremi u Tableau-u.
2. Izvori podataka i učitavanje
U ovom odjeljku nema očitog vođe, ali izdvojit ćemo Qlik zbog nekoliko ugodnih značajki.
Tableau je u besplatnoj verziji ograničen u izvorima, ali se u našim člancima više fokusiramo na poslovanje, a poslovanje si može priuštiti komercijalne proizvode i analitičare. Stoga nismo snizili ocjenu Tableau-a prema ovom parametru.
Slika 5. Popis mogućih izvora za Tableau
U ostalom, popis izvora svugdje je impresivan — svi tablični datoteke, sve standardne baze podataka, web povezivanja, sve svugdje radi. Nisam se susretao s nestandardnim skladištima podataka; tamo možda postoje svoje niuansi, ali u većini slučajeva nećete imati problema s učitavanjem podataka. Izuzetak je možda samo 1C. Nema izravnih konektora za 1C.
Partneri Qlik-a u Rusiji prodaju svoje vlastite konektore po cijeni od 100 000 do 200 000 rubalja, ali u većini slučajeva je jeftinije napraviti eksport iz 1C na FTP u Excel ili SQL bazu podataka. Također možete objaviti 1C bazu na webu i povezivati se s njom putem Odata protokola.
PowerBI i Tableau to podržavaju standardno, dok Qlik zahtijeva plaćeni konektor, stoga je također jednostavnije izvesti u međubaznu. U svakom slučaju, svi problemi vezani uz povezivanje mogu se riješiti.
Slika 6. Popis mogućih izvora za Qlik Sense
Dodatno, vrijedi napomenuti osobitost Qlik-a, da kao zaseban proizvod nude i plaćene i besplatne konektore.
Slika 7. Dodatni konektori za Qlik Sense
Iz vlastitog iskustva dodajem da pri velikim količinama podataka ili brojnim izvorima nije uvijek racionalno odmah povezivati BI sustav. U ozbiljnim projektima obično se koristi skladište podataka, baza podataka s već pripremljenim analiziranim podacima itd. Nije moguće samo tako izvući recimo 1 milijardu zapisa u BI sustav. Ovdje je već potrebno promisliti arhitekturu rješenja.
Slika 8. Izvori podataka Power BI
Ali zašto je Qlik istaknuta? Vrlo mi se sviđaju 3 stvari:
— QVD datoteke
Vlastiti format za pohranu podataka. Ponekad se mogu izgraditi ozbiljni komercijalni projekti samo na QVD datotekama. Na primjer, prvi nivo — sirovi podaci. Drugi nivo — obrađene datoteke. Treći nivo — agregirani podaci itd. Ove se datoteke mogu koristiti u različitim aplikacijama, za njih mogu biti odgovorni razni zaposlenici i servisi. Brzina učitavanja iz takvih datoteka je deset puta brža nego iz običnih izvora podataka. To omogućuje uštedu na bazi podataka i razmjenu informacija između različitih Qlik aplikacija.
— Inkrementno učitavanje podataka
Da, Power BI i Tableau također to mogu raditi. No Power BI će zahtijevati skupu Premium verziju, dok u Tableau nema te fleksibilnosti kao u Qlik. U Qlik-u na QVD datotekama možete raditi snimke sustava u različitim vremenskim razdobljima i zatim obrađivati te podatke kako vam je volja.
— Povezivanje vanjskih skripti
Osim QVD datoteka za pohranu podataka, u Qlik-u se kôd skripti također može iznijeti izvan aplikacije i povezati pomoću naredbe Include. To već omogućuje organizaciju timskog rada, korištenje sustava kontrole verzija, upravljanje jedinstvenim kodom za različite aplikacije. U Power BI postoji napredni uređivač upita, ali takav timski rad nismo mogli postaviti kao u Qlik-u. Uopće svi BI imaju s tim problema, upravljati istovremeno i podacima, i kodom, i vizualizacijama u svim aplikacijama iz jednog mjesta jednostavno je nemoguće. Maksimum što smo uspjeli učiniti je iznijeti QVD datoteke i kôd skripti. Vizualne elemente moramo uređivati unutar samih izvještaja, što nam ne omogućava masovno mijenjanje vizualizacija svih klijenata istovremeno.
Što se tiče mehanizma kao što je Live povezivanje? Tableau i Power BI podržavaju LIVE povezivanje s nekim izvorima podataka, za razliku od Qlik-a. Ovu opciju doživljavamo s određenim indiferentizmom, jer praksa pokazuje da kada su u pitanju veliki podaci, rad s LIVE povezivanjem postaje jednostavno nemoguć. A BI je u većini slučajeva i potreban za velike podatke.
3. Čišćenje podataka, ETL (Ekstrakt, Transformacija, Učitavanje)
U ovom odjeljku imam 2 lidera, Qlik Sense i Power BI.
Recimo ovako, Qlik je moćan, ali složen. Ako se upoznate s njihovim SQL sličnim jezikom, moći ćete gotovo sve — virtualne tablice, povezivanje i spajanje tablica, prolaz kroz tablicu u petlji i generiranje novih tablica, mnoštvo komandi za obradu redaka. Na primjer, polje u 1 ćeliji koje sadrži podatke poput "Ivanov 851 Bijeli" može se odmah razdvojiti ne samo na 3 stupca (kao što to svi znaju), već i na 3 retka, na primjer. Isto tako, jednostavno je spojiti 3 retka u 1.
Slika 9. Kako učitati i transponirati tablicu u Qlik Sense iz Google Sheets
Power BI na ovom području čini se jednostavnijim, ali većina zadataka lako se rješava putem konstruktora upita. Postavite niz parametara, transponirate tablicu, radite s podacima, i sve to bez jedne jedine linije koda.
Slika 10. Kako učitati i transponirati tablicu u Power BI iz AmoCRM
Čini mi se da Tableau ima drugačiju ideologiju. Oni su više usmjereni na estetiku i dizajn. Povezivanje raznih izvora, njihovo objedinjavanje i obrada unutar Tableaua čini se vrlo složenim. U komercijalnim projektima, u većini slučajeva, podaci za Tableau se već pripremaju i akumuliraju u skladištima i bazama podataka.
Slika 11. Kako učitati i transponirati tablicu u Tableau
4. Vizualizacije
U ovom odjeljku nismo isticali lidera. Imaćemo poseban članak u kojem ćemo na primjeru jednog slučaja prikazati isti izvještaj u sve 3 sistemu. . Ovdje se radi više o ukusu i vještini analitičara. Na internetu možete pronaći vrlo lijepe slike, izgrađene na temelju bilo kojeg od ovih sustava. Osnovne mogućnosti vizualizacija su otprilike jednake za sve. Ostalo se rješava korištenjem ekstenzija. Postoje plaćene i besplatne. Ima ekstenzija od samih vendora, kao i od freelancera i integratora. Možete sami napisati svoju vlastitu vizualizacijsku ekstenziju za bilo koju platformu.
Sviđa mi se stil Tableau, smatram ga strogo korporativnim. No, teško je dobiti stvarno lijep prikaz u Tableauu. Izvrstan primjer vizualizacije Tableau koji koristi samo ekstenzije. Neću moći to ponoviti, jer nemam te ekstenzije, ali izgleda lijepo.
Slika 12. Izgled Tableau izvještaja s ekstenzijama
Power BI također može biti vrlo zanimljiv.
Slika 13. Izgled Power BI izvještaja s ekstenzijama
Jedino što ne razumijem u Power BI-u je zašto imaju takve čudne boje prema zadanim postavkama. Na svakom grafikonu moram promijeniti boju u svoju korporativnu, i iznenađujem se standardnoj shemi boja.
Qlik Sense također ovisi o ekstenzijama. Korištenje dodataka može promijeniti izvještaje do neprepoznatljivosti. Također možete primijeniti svoju temu i dizajn.
Slika 14. Izgled Qlik Sense izvještaja s ekstenzijama
S gledišta programera, Qlik Sense mi je prikladniji zbog standardnih opcija poput alternativnih dimenzija i mjera. U postavkama vizualizacije možete postaviti nekoliko dimenzija i mjera, a korisnik može lako sam odabrati što želi vidjeti na određenom grafikonu.
U Power BI-u i Tableauu moram namještati opcije, gumbe, programirati ponašanje sustava prema tim parametrima. Iznenađen sam zašto je to tako komplicirano. Ista stvar s mogućnostima promjene izgleda vizualizacija.
U Qliku možete u jednom objektu sakriti različite vrste vizualizacija, a u Power BI-u i Tableauu je to teže. Opet, ovdje više ovisi o vještini izvođača. U bilo kojem sustavu možete napraviti remek-djelo, a bez iskustva će svuda dolaziti do neizražajnih grafikona.
5. Korporativno okruženje — poslužitelj, izvještaji
Svi proizvodi imaju verzije za korporativne poslužitelje. Radio sam sa svim izdanjima i mogu reći da svaki ima svoje prednosti i slabosti. Odabir proizvoda treba se temeljiti na vašim zahtjevima za softverom uzimajući u obzir njihove specifičnosti. Svi dobavljači omogućuju dodjelu prava na razini korisničkih računa i grupa, kao i na razini sigurnosti podataka. Dostupno je automatsko ažuriranje izvještaja prema rasporedu.
Qlik Sense Enterprise predstavlja odličnu priliku za izgradnju analitike unutar vaše organizacije za srednje poduzeće. Može se činiti skupljim od Power BI Pro, no ne zaboravite da se poslužitelji Power BI Pro nalaze u oblaku na teritoriju Microsofta i da na performanse ne možete utjecati, dok je kada vam bude potrebna Power BI Premium, koja se može instalirati na vašim poslužiteljima, cijena od 5000 $ mjesečno.
Qlik Sense Enterprise započinje od 230.000 rubalja za 5 licenci (godišnja naknada, nakon toga samo tehnička podrška), što je znatno povoljnije od Power BI Premium. I Qlik Sense Enterprise omogućava korištenje svih mogućnosti Qlik-a. Možda osim jedne. Iz nekog razloga Qlik je odlučio da funkcija slanja izvještaja u PDF putem e-pošte treba biti dostupna kao poseban servis NPrinting.
Međutim, Qlik Sense Enterprise je snažniji od Power BI Pro, stoga možemo napraviti sljedeće usporedbe.
Qlik Sense Enterprise = Power BI Premium, uz jednake mogućnosti, ispada povoljniji kod srednjih implementacija. Velike implementacije obično se računaju već na strani dobavljača, gdje mogu dati individualne uvjete za vašu tvrtku.
U ovom smislu, dati ćemo prednost Qlik Sense Enterprise-u, jer pruža sve mogućnosti za izgradnju ozbiljne analitike na ogromnim podacima. Po našem mišljenju, na velikim skupovima podataka, Qlik će raditi brže od Power BI, na konferencijama Qlik smo susretali klijente koji su prvotno testirali svoje podatke u milijardama zapisa, a Power BI je pokazivao lošije rezultate.
Slika 15. Izgled izvještaja poslužitelja Qlik Sense Enterprise
Qlik Sense Cloud = Power BI Pro. Qlik Sense Cloud ispada 1.5 puta skuplji* i tu postoji značajno ograničenje koje nam ne dopušta korištenje te platforme. Ne može se koristiti proširenja, čak ni ugrađena. A bez proširenja Qlik gubi svoju vizualnu privlačnost.
Slika 16. Izgled kontrolne ploče Power BI Pro
*Alternativna opcija je korištenje Qlik Sense Enterprise na pretplatu. No, kako ova stranica ne bi bila shvaćena kao reklama, nećemo raspravljati o našim cijenama.
Tableau nam je pomalo udaljen. Imaju i cloud pretplate od 70 USD za developera i 15 USD za preglednika, kao i skupa server rješenja. Međutim, osnovna ideja Tableaua je da se za velike podatke organizira obrada i pohrana podataka s jedne strane. Objektivno, manja funkcionalnost ne omogućava ozbiljnu obradu podataka u Tableauu. Vizualizirati, analizirati, da. No, za mala i srednja poduzeća obično je problematično stvoriti zasebnu pohranu. Smanjio bih ocjenu za Tableau zbog toga, da nije njihove jedne osobitosti. Tableau server bez problema šalje e-poštu prema rasporedu s privicima u CSV ili PDF formatu. Također se mogu dodijeliti prava, automatski filtri i drugo. Power BI i Qlik to iz nekog razloga ne mogu, a nekome to može biti presudno. Zbog toga Tableau zadržava poziciju u našoj raspravi.
Slika 17. Izgled kontrolne ploče Tableau Servera
Također, u korporativnom okruženju treba razmisliti o troškovima implementacije i održavanja. U Rusiji se razvila praksa da je Power BI više zastupljen u malom poduzeću. To je dovelo do pojave velikog broja oglasa za posao i životopisa, te manjih integratora. To će omogućiti pronalaženje stručnjaka za manje projekte. No, vjerojatno nijedan od njih neće imati iskustva s velikim implementacijama i radom s velikim podacima. Suprotno tome, Qlik i Tableau imaju malo partnera, a posebno Tableau. Ovi partneri se specijaliziraju za velike implementacije s visokim prosječnim troškovima. Na tržištu nema mnogo oglasa za posao i životopisa, a ulazna barijera za ove proizvode je teža nego za Power BI. No, u Rusiji postoje uspješne implementacije ovih proizvoda za tisuće korisnika i ovi proizvodi dobro se pokazali s velikim podacima. Jednostavno je potrebno razumjeti slabe i jake strane proizvoda u odnosu na vaše poslovanje.
6. Podrška za mobilne uređaje.
U ovom odjeljku ističemo Power BI i Tableau. Možete instalirati mobilne aplikacije koje će se prilično dobro prikazivati na mobilnim uređajima. Iako se čini da analitika na mobilnim uređajima zaostaje u odnosu na analitiku na PC-u. Nije tako lako koristiti filtre, slike su male, a brojevi slabo vidljivi itd.
Slika 18. Izgled Power BI izvještaja na iPhone-u
Slika 19. Izgled Tableau izvještaja na iPhone-u
Slika 20. Izgled Qlik Sense izvještaja na iPhone-u
Zašto su smanjeni bodovi Qlik-u? Iz neobjašnjivih razloga, mobilni klijent je dostupan samo na iPhone-u, dok na Android-u morate koristiti obični preglednik. Osim toga, pri korištenju Qlik-a odmah morate shvatiti da se niz proširenja ili vizualizacija ne smanjuje ili se automatski ne pozicionira na mobilnim uređajima kako se očekuje. Izvještaj koji izgleda vrlo lijepo na PC-u, na malom ekranu izgleda mnogo lošije. Morate napraviti odvojene izvještaje za mobilne uređaje gdje ćete ukloniti filtre, KPI-eve i niz drugih objekata. To također vrijedi za Power BI ili Tableau, ali se u Qlik-u to posebno ističe. Nadamo se da će Qlik dodatno raditi na svom mobilnom klijentu.
Ako planirate provesti puno vremena radeći analitiku s mobilnih uređaja, ima smisla instalirati svih 3 klijenta i na testnim izvještajima provjeriti njihovo prikazivanje. Bilo koji dobavljač na svojoj stranici ima galeriju testnih izvještaja za pregled.
7. Ugrađena analitika u vanjske aplikacije/web stranice
Korištenje analitike kao vanjske usluge nije uvijek praktično. Možda razvijate svoj proizvod, ali niste spremni potpuniti razvoj vizualizacija i analitičkog motora od nule. Možda želite implementirati analitiku na svojoj web stranici, kako bi se klijent sam registrirao, učitao svoje podatke i provodio analizu unutar svog osobnog računa. Za to vam je potrebna ugrađena analitika (Embedded).
Svi proizvodi to omogućuju, ali u ovoj kategoriji ističemo Qlik.
Power BI i Tableau nedvojbeno naglašavaju da za takve svrhe morate kupiti zaseban proizvod Tableau Embedded Analytics ili Power BI Embedded. To nisu jeftina rješenja, koštaju tisuće dolara mjesečno, što odmah ograničava njihovu upotrebu. Većina projekata odmah postaje neisplativa za naše klijente. Ovo podrazumijeva da ne trebate samo objaviti izvještaj na cijelom internetu, već osigurati objavljivanje izvještaja prema određenim pristupima, s zaštitom podataka, autorizacijom korisnika itd.
Qlik će vam omogućiti da se snađete. Naravno, oni takođe imaju Qlik Analytics Platformu koja se licencira na server i omogućuje neograničen broj povezanih korisnika. To će također biti skupo poput konkurenata Tableau i Power BI. I u slučaju neograničenih povezivanja, nema previše opcija.
Ali u Qlik-u postoji pojam Mashup. Pretpostavimo da imate Qlik Sense Enterprise i 10 licenci. Standardna analiza, izgled i sve to već su vam dosadili. Pokrećete vlastitu web stranicu ili aplikaciju, i možete integrirati sve svoje analitike direktno tamo. Suština je da, pojednostavljeno rečeno, Mashup predstavlja vizualizaciju u programskom kodu. Putem API-ja možete programatski odrediti stvaranje vizualizacije unutar vaše aplikacije ili web stranice. Qlik Sense Enterprise će vam i dalje biti potreban za licenciranje (licencije za povezivanje na stranicu = licencijama za povezivanje na BI), za učitavanje podataka itd., ali vizualizacije će se sada prikazivati ne na strani ovog servera, već će se integrirati u vašu aplikaciju ili web stranicu. Možete koristiti CSS stilove, postavljati nove fontove, boje. Vaših 10 korisnika sada neće odlaziti na server analitike, već će koristiti vaš korporativni portal ili aplikaciju. Analitika će preći na novu razinu.
Slika 21. Izgled izvještaja Qlik Sense integriranog na web stranicu
Već će biti teško razumjeti gdje se nalaze elementi stranice, a gdje počinje Qlik Sense.
Naravno, trebat će vam programer, a vjerojatno i nekoliko njih. Jedan za web programiranje, jedan za rad s Qlik API-jem. No, rezultat je vrijedan truda.
Zaključci. Sumirajmo.
Teško je odrediti tko je bolji, a tko lošiji. Power BI i Qlik su u našem natjecanju izjednačeni, dok Tableau malo zaostaje. No, možda će rezultat za vaše poslovanje biti drugačiji. U BI platformama vizualni aspekt je vrlo važan. Ako ste pregledali desetke demo izvještaja i slika na internetu za sve BI sustave i ne sviđa vam se izgled jedne od platformi, vjerojatno je nećete implementirati, čak i ako vam cijena ili tehničke karakteristike odgovaraju.
Nakon toga obavezno trebate izračunati troškove licenci, implementacije i održavanja BI platforme. Moguće je da će u vašem slučaju isplivati lider. Veliku važnost ima izvođač radova ili mogućnost zapošljavanja odgovarajućeg stručnjaka. Bez profesionalaca, rezultati na bilo kojoj platformi će biti poražavajući.
Želimo vam uspješnu BI integraciju, Andrey Zhdanov i Vladimir Lazarev, Analytics Group
Izvor: habr.com
