Tempo necessário para ler 11 minutos
Nós e o Gartner Square 2019 BI :)
O objetivo deste artigo é comparar três plataformas líderes de BI que estão entre os líderes do quadrante Gartner:
- Power BI (Microsoft)
-Quadro
-Qlik
Figura 1. Quadrante Mágico do Gartner BI 2019
Meu nome é Andrey Zhdanov, sou chefe do departamento de análise do Analytics Group (). Construímos relatórios visuais de marketing, vendas, finanças, logística, ou seja, realizamos análises de negócios e visualização de dados.
Meus colegas e eu trabalhamos com diversas plataformas de BI há vários anos. Temos uma experiência muito boa em projetos, o que nos permite comparar plataformas do ponto de vista de desenvolvedores, analistas, usuários empresariais e implementadores de sistemas de BI.
Teremos um artigo separado sobre comparação de preços e design visual desses sistemas de BI, então aqui tentaremos avaliar esses sistemas do ponto de vista de um analista e desenvolvedor.
Vamos destacar várias áreas para análise e avaliá-las usando um sistema de 3 pontos:
— Limite de entrada e requisitos para um analista;
- Fontes de dados;
— Limpeza de dados, ETL (Extrair, Transformar, Carregar)
— Visualizações e desenvolvimento
— Ambiente corporativo — servidor, relatórios
- Suporte para dispositivos móveis
— Análises incorporadas (integradas) em aplicativos/sites de terceiros
1. Limite de entrada e requisitos para um analista
Power BI
Já vi muitos usuários do Power BI que não eram profissionais de TI, mas conseguiam criar um relatório muito bom. O Power BI usa a mesma linguagem de consulta do Excel – Power Query e a linguagem de fórmula DAX. Muitos analistas conhecem bem o Excel, então mudar para este sistema de BI é bastante fácil para eles.
A maioria das ações é bastante fácil de executar no editor de consultas. Além disso, existe um editor avançado com linguagem M para profissionais.
Figura 2. Construtor de consultas do Power BI
QlikSense
O Qlik Sense parece muito amigável - um pequeno número de configurações, uma capacidade rápida de criar um relatório, você pode usar o designer de carregamento de dados.
A princípio parece mais simples que Power BI e Tableau. Mas por experiência própria direi que depois de um tempo, quando o analista criar alguns relatórios simples e precisar de algo mais complexo, ele se deparará com a necessidade de programar.
Qlik possui uma linguagem muito poderosa para carregar e processar dados. Possui sua própria linguagem de fórmula, Set Analysis. Portanto, o analista deve ser capaz de escrever consultas e conexões, colocar dados em tabelas virtuais e usar variáveis ativamente. As capacidades do idioma são muito amplas, mas exigirão aprendizado. Provavelmente todos os analistas da Qlik que conheço têm algum tipo de experiência séria em TI.
Integradores Qlik, como nós, muitas vezes gostam de falar sobre o modelo associativo, quando ao carregar os dados, todos eles são colocados na RAM, e a conexão entre os dados é feita pelo mecanismo interno da plataforma. Que ao selecionar valores não são realizadas subconsultas internas, como nos bancos de dados clássicos. Os dados são fornecidos quase instantaneamente devido a valores e relacionamentos pré-indexados.
É verdade que, na prática, isso leva à criação de junções automáticas de tabelas quando os nomes dos campos coincidem. Por exemplo, você não pode ter tabelas diferentes sem relacionamentos que tenham o mesmo campo. Você tem que se acostumar com isso. Você deve renomear as colunas e certificar-se de que os nomes não correspondam ou combinar todas as tabelas de fatos em uma e cercá-las com diretórios do tipo estrela. Provavelmente é conveniente para iniciantes, mas para analistas experientes isso não importa.
Uma interface típica para carregar e processar dados para um analista é semelhante a esta.
Figura 3. Editor de carregamento de dados do Qlik Sense, tabela Calendário
Nota: No Power BI a situação geralmente parece diferente, você deixa tabelas de fatos e referências diferentes, pode unir tabelas manualmente da maneira clássica, ou seja. Eu comparo as colunas entre si manualmente.
Quadro
Os desenvolvedores posicionam o Tableau como um BI com uma interface conveniente e amigável que permitirá ao analista estudar seus dados de forma independente. Sim, na nossa empresa existiam analistas que, sem experiência em TI, conseguiam fazer os seus relatórios. Mas vou diminuir minha classificação do Tableau por vários motivos:
— Localização fraca com idioma russo
— Os servidores do Tableau Online não estão localizados na Federação Russa
— Um construtor de carga bastante simples começa a causar problemas quando você precisa construir um modelo de dados bastante complexo.
Figura 4. Criador de carregamento de dados do Tableau
Uma das perguntas que fazemos aos analistas do Tableau durante as entrevistas é “Como construir um modelo de tabelas de fatos com tabelas de referência sem colocar tudo em uma única tabela?!” A combinação de dados requer um uso cuidadoso. Corrigi erros de duplicação de dados muitas vezes entre meus analistas após essas fusões.
Além disso, o Tableau possui um sistema bastante único, onde você cria cada gráfico em uma planilha separada e depois cria um painel, onde começa a colocar as planilhas criadas. Então você pode criar uma história, que é uma combinação de diferentes painéis. O desenvolvimento em Qlik e Power BI é mais simples nesse aspecto: você imediatamente joga modelos de gráficos na planilha, define medidas e medidas e o Dashboard está pronto. Parece-me que os custos de mão-de-obra para preparação no Tableau estão aumentando por causa disso.
2. Fontes de dados e download
Não há um vencedor claro nesta seção, mas destacaremos o Qlik por causa de alguns recursos interessantes.
O Tableau na versão gratuita é limitado em fontes, mas em nossos artigos nos concentramos mais nos negócios, e as empresas podem pagar por produtos comerciais e analistas. Portanto, o Tableau não reduziu sua classificação para este parâmetro.
Figura 5. Lista de possíveis fontes do Tableau
Caso contrário, a lista de fontes é impressionante em todos os lugares - todos os arquivos de tabela, todos os bancos de dados padrão, conexões da web, tudo funciona em qualquer lugar. Não encontrei armazenamentos de dados fora do padrão, eles podem ter suas próprias nuances, mas na maioria dos casos você não terá problemas para carregar dados. A única exceção é 1C. Não há conectores diretos para 1C.
Os parceiros Qlik na Rússia vendem seus próprios conectores por 100 a 000 rublos, mas na maioria dos casos é mais barato fazer uploads de 200C para FTP para Excel ou banco de dados SQL. Ou você pode publicar um banco de dados 000C na web e conectar-se a ele usando o protocolo Odata.
PowerBI e Tableau podem fazer isso como padrão, mas o Qlik solicitará um conector pago, por isso também é mais fácil carregá-lo em um banco de dados intermediário. De qualquer forma, todos os problemas de conexão podem ser resolvidos.
Figura 6. Lista de possíveis fontes do Qlik Sense
Além disso, é importante observar um recurso do Qlik: eles fornecem conectores pagos e gratuitos como um produto separado.
Figura 7. Conectores adicionais do Qlik Sense
Por experiência própria, acrescentarei que, com grandes volumes de dados ou inúmeras fontes, nem sempre é aconselhável conectar imediatamente o sistema de BI. Projetos sérios costumam utilizar um data warehouse, um banco de dados com dados já preparados para análise, etc. Você não pode pegar e carregar, digamos, 1 bilhão de registros em um sistema de BI. Aqui você já precisa pensar na arquitetura da solução.
Figura 8. Fontes de dados do Power BI
Mas por que o Qlik foi escolhido? Eu gosto muito de 3 coisas:
- arquivos QVD
Formato próprio de armazenamento de dados. Às vezes é possível construir projetos comerciais sérios apenas em arquivos QVD. Por exemplo, o primeiro nível são os dados brutos. O segundo nível são arquivos processados. O terceiro nível são dados agregados, etc. Esses arquivos podem ser usados em diferentes aplicações, e diferentes funcionários e serviços podem ser responsáveis por eles. A velocidade de download desses arquivos é dez vezes mais rápida do que a de fontes de dados convencionais. Isso permite economizar em custos de banco de dados e compartilhar informações entre diferentes aplicativos Qlik.
— Carregamento incremental de dados
Sim, o Power BI e o Tableau também podem fazer isso. Mas o Power BI requer uma versão Premium cara e o Tableau não tem a flexibilidade do Qlik. No Qlik, usando arquivos QVD, você pode fazer instantâneos de sistemas em momentos diferentes e depois processar esses dados como desejar
— Conectando scripts externos
Além dos arquivos QVD para armazenamento de dados, no Qlik o código do script também pode ser retirado do aplicativo e incluído no comando Incluir. Isso já permite organizar o trabalho em equipe, utilizar sistemas de controle de versão e gerenciar um único código para diferentes aplicações. O Power BI possui um editor de consultas avançado, mas não conseguimos configurar o trabalho em equipe como no Qlik. Em geral, todo BI tem problemas com isso; é simplesmente impossível gerenciar simultaneamente dados, códigos e visualizações em todas as aplicações a partir de um único local. O máximo que conseguimos fazer foi extrair os arquivos QVD e o código do script. Os elementos visuais devem ser editados dentro dos próprios relatórios, o que não nos permite alterar massivamente as visualizações de todos os clientes ao mesmo tempo.
Mas e um mecanismo como a conexão Live? O Tableau e o Power BI oferecem suporte à conectividade LIVE para diversas fontes, diferentemente do Qlik. Somos bastante indiferentes a esta característica, porque... a prática mostra que quando se trata de big data, trabalhar com uma conexão LIVE torna-se simplesmente impossível. E o BI, na maioria dos casos, é necessário para big data.
3. Limpeza de dados, ETL (Extrair, Transformar, Carregar)
Nesta seção tenho 2 líderes, Qlik Sense e Power Bi.
Digamos apenas que o Qlik é poderoso, mas complexo. Depois de entender sua linguagem semelhante ao SQL, você pode fazer quase tudo - tabelas virtuais, junções e junções de tabelas, percorrer a tabela e gerar novas tabelas, vários comandos para processar linhas. Por exemplo, um campo em 1 célula preenchido com dados como “Ivanov 851 Bely” dinamicamente pode ser decomposto não apenas em 3 colunas (como todos podem fazer), mas também em 3 linhas ao mesmo tempo, por exemplo. Também é fácil fazer a mesma coisa na hora, combinando 3 linhas em 1.
Figura 9. Como carregar e transpor uma tabela no Qlik Sense do Planilhas Google
O Power BI parece mais simples nesse aspecto, mas a maioria dos problemas pode ser facilmente resolvida por meio do designer de consultas. Defini vários parâmetros, transpus a tabela, trabalhei nos dados e tudo isso sem uma única linha de código.
Figura 10. Como carregar e transpor uma tabela para o Power BI do AmoCRM
O Tableau me parece ter uma ideologia diferente. Eles são mais sobre beleza e design. Parece muito difícil conectar várias fontes diferentes, combiná-las todas e processá-las dentro do Tableau. Em projetos comerciais, na maioria dos casos, os dados já estão preparados e acumulados para o Tableau em armazéns e bancos de dados.
Figura 11. Como carregar e transpor uma tabela no Tableau
4. Visualizações
Nesta seção não destacamos o líder. Teremos um artigo separado onde, usando o exemplo de um caso, mostraremos o mesmo relatório em todos os 3 sistemas . É mais uma questão de gosto e habilidade do analista. Na Internet você pode encontrar lindas fotos construídas com base em qualquer um desses sistemas. Os recursos básicos de visualização são aproximadamente os mesmos para todos. O resto é resolvido usando Extensons. Existem pagos e gratuitos. Existem extensões dos próprios fornecedores, bem como de freelancers e integradores. Você pode escrever sua própria extensão de visualização para qualquer plataforma.
Gosto do estilo do Tableau, acho rígido e corporativo. Mas é difícil obter uma imagem verdadeiramente bonita no Tableau. Um excelente exemplo de visualização do Tableau usando apenas extensões. Não poderei repetir isso, porque... Não tenho essas extensões, mas parece legal.
Figura 12. Aparência dos relatórios do Tableau com extensões
O Power BI também pode se tornar interessante.
Figura 13. Aparência dos relatórios Power Bi c Extensions
A única coisa que não entendo sobre o Power BI é por que eles têm cores padrão tão estranhas. Em qualquer gráfico, sou forçado a mudar a cor para a minha cor corporativa e fico surpreso com a cor padrão.
O Qlik Sense também depende de extensões. O uso de complementos pode alterar os relatórios de forma irreconhecível. Você também pode adicionar seu próprio tema e design.
Figura 14. Aparência dos relatórios do Qlik Sense com extensões
Do ponto de vista do desenvolvedor, prefiro o Qlik Sense por causa das opções padrão, como dimensões e medidas alternativas. Você pode definir diversas dimensões e medidas nas configurações de visualização, e o usuário pode definir facilmente o que deve observar em um determinado gráfico.
No Power Bi e no Tableau tenho que configurar parâmetros, botões, programar o comportamento do sistema em função desses parâmetros. Eu me pergunto por que é tão difícil. O mesmo acontece com a capacidade de alterar o tipo de vilalização.
No Qlik você pode ocultar diferentes tipos de visualizações em um objeto, mas no Power BI e no Tableau isso é mais difícil. Novamente, isso depende mais da habilidade do executor. Você pode fazer uma obra-prima em qualquer sistema, mas sem experiência acabará com gráficos inexpressivos em todos os lugares.
5. Ambiente corporativo – servidor, relatórios
Todos os produtos possuem versões de servidor corporativo. Trabalhei com todas as edições e posso dizer que todas têm pontos fortes e fracos. A escolha do produto deve ser baseada nos seus requisitos de software, levando em consideração suas nuances. Todos os fornecedores podem atribuir direitos tanto no nível da conta e do grupo quanto na segurança em nível de linha de dados. A atualização automática de relatórios de acordo com uma programação está disponível.
O Qlik Sense Enterprise é uma ótima oportunidade para criar análises dentro da sua organização para empresas de médio porte. Isso pode parecer mais caro que o Power BI Pro, mas não se esqueça que os servidores do Power BI Pro estão localizados na nuvem em território da Microsoft e você não pode influenciar o desempenho, e quando precisar do Power BI Premium, que pode ser implantado em seus servidores, então o preço começa em $ 5000 por mês.
Qlik Sense Enterprise começa em RUB 230. por 000 licenças (taxa por ano, depois apenas suporte técnico), que é muito mais acessível que o Power BI Premium. E o Qlik Sense Enterprise permitirá que você use todos os recursos do Qlik. Talvez exceto por um. Por alguma razão, a Qlik decidiu que um recurso como a capacidade de enviar relatórios em PDF por e-mail deveria ser fornecido como um serviço NPrinting separado.
Mas o Qlik Sense Enterprise é mais poderoso que o Power BI Pro e, portanto, a comparação a seguir pode ser feita.
Qlik Sense Enterprise = Power BI Premium, com capacidades iguais fica mais barato para implementações médias. Grandes implementações geralmente são calculadas por parte do fornecedor, onde podem fornecer condições individuais para sua empresa.
Nesse sentido, daremos preferência ao Qlik Sense Enterprise, pois tem todas as oportunidades para construir análises sérias sobre dados enormes. Em nossa opinião, o Qlik funcionará mais rápido que o Power BI em grandes arrays; nas conferências da Qlik encontramos clientes que primeiro testaram seus dados em bilhões de registros e o Power BI apresentou resultados piores.
Figura 15. Aparência dos relatórios do servidor Qlik Sense Enterprise
Nuvem Qlik Sense = Power BI Pro. O Qlik Sense Cloud acaba por ser 1.5 vezes mais caro* e há uma limitação muito significativa que esta plataforma não nos permite. Você não pode usar extensões, mesmo as integradas. E sem extensões, o Qlik perde um pouco sua beleza visual.
Figura 16. Aparência do painel de controle do Power BI Pro
*Uma alternativa é usar uma assinatura do Qlik Sense Enterprise. Mas para que este artigo não seja percebido como publicidade, não abordaremos nossos preços
E o Tableau fica um pouco à parte para nós. Eles têm assinaturas de nuvem por US$ 70 por desenvolvedor e US$ 15 por visualização, além de soluções de servidor caras. Mas a ideia principal do Tableau é que, para big data, você precisa organizar o processamento e o armazenamento de dados paralelamente. Objetivamente, menos funcionalidade não permite um processamento sério de dados no Tableau. Visualize, analise, sim. Mas para pequenas e médias empresas, criar armazenamento separado costuma ser problemático. Eu teria reduzido a pontuação do Tableau, portanto, se não fosse por seu recurso 1. O Tableau Server envia facilmente e-mails programados com anexos CSV ou PDF. Além disso, você pode distribuir direitos, filtros automáticos, etc. Por alguma razão, o Power BI e o Qlik não podem fazer isso, mas para alguns pode ser crítico. Por conta disso, o Tableau mantém posição em nossa disputa.
Figura 17. Aparência do painel de controle do Tableau Server
Também em ambiente corporativo é preciso pensar no custo de implementação e manutenção. Na Rússia, desenvolveu-se a prática de que o Power BI é mais comum em pequenas empresas. Isso levou ao surgimento de um grande número de vagas e currículos, e ao surgimento de pequenos integradores. Isso permitirá que você encontre especialistas para um projeto pequeno. Mas muito provavelmente, todos eles não terão experiência em grandes implementações e em trabalhar com big data. Qlik e Tableau são o oposto. Existem poucos parceiros Qlik e ainda menos parceiros Tableau. Esses parceiros são especializados em grandes implementações com uma grande verificação média. Não há muitas vagas e currículos no mercado, a barreira de entrada nesses produtos é mais difícil do que no Power BI. Mas na Rússia há implementações bem-sucedidas desses produtos para milhares de usuários, e esses produtos funcionam bem em big data. Você só precisa compreender os pontos fortes e fracos dos produtos, pois eles se aplicam especificamente ao seu negócio.
6. Suporte para dispositivos móveis.
Nesta seção destacaremos Power BI e Tableau. Você pode instalar aplicativos móveis e eles parecerão bastante adequados nas telas dos dispositivos móveis. Embora nos pareça que a análise em dispositivos móveis é inferior à análise em PC. Mesmo assim, não é tão conveniente usar filtros, as imagens são pequenas, os números são difíceis de ver, etc.
Figura 18. Aparência de um relatório do Power BI no iPhone
Figura 19. Aparência do relatório do Tableau no iPhone
Figura 20. Aparência de um relatório do Qlik Sense no iPhone
Por que as pontuações do Qlik foram reduzidas? Por razões que desconhecemos, o cliente móvel está disponível apenas no iPhone; no Android você terá que usar um navegador normal. Além disso, ao usar o Qlik, você deve entender imediatamente que uma série de extensões ou visualizações não são reduzidas ou os carros são posicionados em dispositivos móveis conforme o esperado. Um relatório que fica muito bonito em um PC fica muito pior em uma tela pequena. Você deve criar um relatório separado para dispositivos móveis, onde poderá remover filtros, KPIs e vários outros objetos. Isso também se aplica ao Power BI ou Tableau, mas é especialmente pronunciado no Qlik. Esperamos que a Qlik continue trabalhando em seu cliente móvel.
Se você planeja gastar muito tempo realizando análises em dispositivos móveis, faz sentido instalar todos os três clientes e verificar sua exibição nos relatórios de teste. Qualquer fornecedor possui uma galeria de relatórios de teste em seu site para revisão.
7. Análises incorporadas (integradas) em aplicativos/sites de terceiros
Usar análises como serviço de terceiros nem sempre é conveniente. Talvez você esteja desenvolvendo seu próprio produto, mas não esteja pronto para desenvolver um mecanismo de visualização e análise do zero. Talvez você queira implantar análises em seu site para que o cliente se cadastre, carregue seus dados e faça análises dentro de sua conta pessoal. Para fazer isso, você precisa de análises integradas (incorporadas).
Todos os produtos permitem fazer isso, mas nesta categoria vamos destacar o Qlik.
O Power Bi e o Tableau dizem claramente que, para tais fins, você precisa comprar um produto Tableau Embedded Analytics ou Power BI Embedded separado. Estas não são soluções baratas que custam milhares de dólares por mês, o que limita imediatamente a sua utilização. A maioria dos projetos torna-se imediatamente não lucrativa para nossos clientes. Isso significa que você precisa não apenas publicar um relatório em toda a Internet, mas garantir que os relatórios sejam publicados de acordo com determinados acessos, com proteção de dados, autorização do usuário, etc.
E o Qlik permitirá que você saia. Claro, eles também possuem a Qlik Analytics Platform, que é licenciada por servidor e organiza um número ilimitado de conexões. Também será caro como os concorrentes Tableau e Power Bi. E no caso de conexões ilimitadas, não há muitas opções.
Mas no Qlik existe algo como Mashup. Digamos que você tenha o Qlik Sense Enterprise e 10 licenças. Análise padrão, aparência, tudo já é chato. Você cria seu próprio site ou aplicativo e pode implementar todas as suas análises ali mesmo. O truque é que, para simplificar, Mashup é uma visualização no código do programa. Usando a API, você pode criar programaticamente uma visualização em seu aplicativo ou site. Você ainda precisará do Qlik Sense Enterprise para licenciamento (licenças para conexões de site = licenças para conexões com BI), para carregar dados, etc., mas as visualizações não serão mais exibidas na lateral deste servidor, mas serão incorporadas ao seu aplicativo ou site. Você pode usar estilos CSS, definir novas fontes e cores. Seus 10 usuários não farão mais login no servidor analítico, mas usarão seu portal ou aplicativo corporativo. A análise alcançará um novo nível.
Figura 21. Aparência de um relatório do Qlik Sense incorporado em um site
Será difícil entender onde estão os elementos do site e onde começa o Qlik Sense.
Claro, você precisará de um programador ou, mais provavelmente, de vários. Um para programação web, outro para trabalhar com a API Qlik. Mas o resultado vale a pena.
Conclusões. Vamos resumir.
É difícil dizer inequivocamente quem é melhor e quem é pior. Power BI e Qlik estão no mesmo nível da nossa concorrência, o Tableau é um pouco inferior. Mas talvez o resultado seja diferente para o seu negócio. Nas plataformas de BI, a componente visual é muito importante. Se você viu dezenas de relatórios de demonstração e imagens na Internet para todos os sistemas de BI e não gostou da aparência de uma das plataformas, provavelmente não a implementará, mesmo que esteja satisfeito com o preço ou a técnica apoiar. características.
A seguir, você definitivamente precisará calcular o custo de licenças, implementação e manutenção da plataforma de BI. Talvez no seu caso um líder seja identificado. O empreiteiro ou a possibilidade de contratar um especialista adequado é de grande importância. Sem profissionais em nenhuma plataforma o resultado será desastroso.
Integrações de BI bem-sucedidas para você, Andrey Zhdanov e Vladimir Lazarev, Analytics Group
Fonte: habr.com