Materiais da reunión de Kafka: conectores CDC, dores de crecemento, Kubernetes

Ola! Recentemente, tivo lugar unha reunión sobre Kafka na nosa oficina. Os lugares diante del esparexíanse á velocidade da luz. Como dixo un dos oradores: "Kafka é sexy".

Con colegas de Booking.com, Confluent e Avito, falamos da integración e apoio ás veces difícil de Kafka, as consecuencias de cruzalo con Kubernetes, así como conectores coñecidos e escritos persoalmente para PostgreSQL.

Editamos vídeos, recollemos presentacións dos relatores e seleccionamos fermosas fotografías do encontro. Se che interesa ver e escoitar, vai ao gato.

Gravacións en vídeo de informes

Conectores: por que hai tantos de vós - Anatoly Soldatov, Avito

Anatoly contounos que son os conectores, que vantaxes e desvantaxes teñen JDBC e Debezium e como en Avito se nos ocorreu escribir o noso propio conector CDC.

00:00 - Presentación do orador
04:09 — Que é Kafka Connect, que conectores existen
18:10 — Para que adoita usar Connect?
23:47 — Primeiro caso Avito: bus de datos
28:20 — Segundo caso Avito: como fixemos o noso propio conector CDC
41:28 - Respostas ás preguntas do oínte

→ Presentación de Anatoly

Como domar a Apache Kafka? Experiencia Booking.com - Alexander Mironov, Booking.com

Alexander compartiu historias sobre quen, que dificultades atopou o seu equipo ao traballar con Kafka e como as resolveu.

00:00 - Presentación do orador
06:22 — Que problemas xurdiron co aumento do número de casos de uso para o uso de Kafka?
08:58 — Creación de abstraccións para usuarios
14:15 — Autenticación e seguridade dos clústeres
23:53 — Plano de control, que conecta todo
27:41 — Historias divertidas e non tan prácticas
34:00 - Respostas ás preguntas do oínte

→ Presentación de Alexandre

Kafka en Kubernetes: Juan é un sombreiro? — Víctor Gamov, Confluente

Victor respondeu á pregunta sobre se paga a pena executar Apache Kafka e fíos de procesamento de aplicacións en Kubernetes.

00:00 - Presentación do orador
05:19 — Problemas ao executar aplicacións con estado en Kubernates
17:52 - Pod Kubernetes
22:33 - Traballar con almacenamento
28:24 - Controladores Kubernetes personalizados
48:58 - Actualización continua
58:05 - Respostas ás preguntas do oínte

→ Presentación de Víctor

Pódese atopar unha lista de reprodución con todos os vídeos na nosa canle de YouTube.

Fotos

Publicamos fotos do encontro en Facebook и ВКонтакте. Mira como foi e etiqueta a ti e aos teus amigos se asistiches á reunión.

Volveremos pronto con anuncios de novos eventos na oficina de Avito en Moscova. Verte outra vez!

Fonte: www.habr.com