A Amazon anunciou a aquisição da DuckLabs, que desenvolve o banco de dados aberto DuckDB. O processo de aquisição foi concluído em 31 de agosto, e o valor do negócio não foi divulgado. A equipe de desenvolvedores do DuckDB se unirá à AWS e continuará a trabalhar nas tecnologias do DuckDB sob a orientação dos co-fundadores da DuckLabs.
Os desenvolvimentos do DuckDB serão utilizados para modernizar, simplificar e aumentar a eficiência da pilha analítica oferecida na plataforma AWS. O serviço Amazon S3 pretende se transformar em um repositório com recursos integrados para análise de dados. A base de código do DuckDB continuará a evoluir na forma de um projeto aberto, distribuído sob a licença MIT e supervisionado pela organização sem fins lucrativos DuckDB Foundation. É destacado que a união com a AWS expandirá o público-alvo do DuckDB e permitirá obter recursos adicionais para a implementação de novas ideias para escalar o banco de dados.
O DuckDB é conceitualmente semelhante ao SQLite e combina propriedades como compactação, conexão na forma de uma biblioteca de integração, armazenamento do banco de dados em um único arquivo e uma interface de linha de comando, com recursos e otimizações para a execução de consultas analíticas que abrangem uma parte significativa dos dados armazenados, por exemplo, realizando agregações de todo o conteúdo das tabelas ou combinando várias grandes tabelas. O banco de dados suporta um dialeto SQL expandido, que inclui recursos adicionais para tratar consultas complexas, de longa duração e aninhadas.
O projeto utiliza um shell de SQLite, parser do PostgreSQL, componente de Data Math do MonetDB, sua própria implementação de funções de janelas (baseada no algoritmo Segment Tree Aggregation), um processador de expressões regulares baseado na biblioteca RE2, um otimizador de consultas próprio, um mecanismo MVCC de controle de concorrência (Controle de Concorrência Multi-versão), além de um mecanismo de execução de consultas vetorizado baseado no algoritmo Hyper-Pipelining Query Execution, permitindo que grandes conjuntos de valores sejam processados em uma única operação.
Fonte: opennet.ru
