Olá! Recentemente, foi realizada uma reunião sobre Kafka em nosso escritório. Os lugares à sua frente se espalharam na velocidade da luz. Como disse um dos palestrantes: “Kafka é sexy”.
Com colegas de Booking.com, Confluent e Avito, discutimos a integração e o suporte às vezes difíceis do Kafka, as consequências de cruzá-lo com o Kubernetes, bem como conectores bem conhecidos e escritos pessoalmente para PostgreSQL
Editamos reportagens em vídeo, coletamos apresentações de palestrantes e selecionamos lindas fotos do encontro. Se você estiver interessado em assistir e ouvir, vá até o gato.
Gravações de vídeo de relatórios
Conectores: por que existem tantos de vocês - Anatoly Soldatov, Avito
Anatoly nos contou o que são conectores, quais são as vantagens e desvantagens do JDBC e do Debezium e como nós da Avito tivemos a ideia de escrever nosso próprio conector CDC.
- Apresentação do palestrante
— O que é Kafka Connect, quais conectores existem
— Para que normalmente é usado o Connect?
— Primeiro caso Avito: barramento de dados
— Segundo caso Avito: como fizemos nosso próprio conector CDC
- Respostas às perguntas do ouvinte
→
Como domar o Apache Kafka? Experiência Booking.com - Alexander Mironov, Booking.com
Alexander compartilhou histórias sobre quem e quais dificuldades sua equipe encontrou ao trabalhar com Kafka e como as resolveram.
- Apresentação do palestrante
— Que problemas surgiram com o aumento no número de casos de uso do Kafka?
— Criando abstrações para usuários
— Autenticação e segurança de clusters
— Plano de controle, que conecta tudo
— Histórias engraçadas e não tão práticas
- Respostas às perguntas do ouvinte
→
Kafka no Kubernetes: Juan é um sombrero? - Victor Gamov, Confluente
Victor respondeu à pergunta sobre se vale a pena executar o Apache Kafka e threads de processamento de aplicativos no Kubernetes.
- Apresentação do palestrante
— Problemas ao executar aplicativos com estado no Kubernates
- Pod Kubernetes
— Trabalhando com armazenamento
- Controladores Kubernetes personalizados
– Atualização contínua
- Respostas às perguntas do ouvinte
→
Uma lista de reprodução com todos os vídeos pode ser encontrada .
Fotos
Postamos fotos do encontro и . Veja como foi e marque você e seus amigos caso tenham participado da reunião.
Voltaremos em breve com anúncios de novos eventos no escritório da Avito em Moscou. Ver você de novo!
Fonte: habr.com