Materiali dall'incontro di Kafka: connettori CDC, problemi di crescita, Kubernetes

Ciao! Recentemente si è tenuto nel nostro ufficio un incontro su Kafka. I posti davanti a lui si sparpagliarono alla velocità della luce. Come ha detto uno degli oratori: “Kafka è sexy”.

Con i colleghi di Booking.com, Confluent e Avito abbiamo discusso dell'integrazione e del supporto a volte difficili di Kafka, delle conseguenze dell'incrocio con Kubernetes, nonché dei connettori ben noti e scritti personalmente per PostgreSQL

Abbiamo montato report video, raccolto presentazioni dei relatori e selezionato bellissime fotografie dall'incontro. Se sei interessato a guardare e ascoltare, vai al gatto.

Registrazioni video di relazioni

Connettori: perché siete così tanti - Anatoly Soldatov, Avito

Anatoly ci ha spiegato cosa sono i connettori, quali vantaggi e svantaggi hanno JDBC e Debezium e come noi di Avito abbiamo avuto l'idea di scrivere il nostro connettore CDC.

00:00 — Presentazione del relatore
04:09 — Cos'è Kafka Connect, quali connettori esistono
18:10 — A cosa serve solitamente Connect?
23:47 — Primo caso Avito: bus dati
28:20 — Secondo caso Avito: come abbiamo realizzato il nostro connettore CDC
41:28 — Risposte alle domande degli ascoltatori

→ Presentazione di Anatoly

Come domare Apache Kafka? Esperienza su Booking.com - Alexander Mironov, Booking.com

Alexander ha condiviso storie su chi, quali difficoltà ha incontrato la sua squadra lavorando con Kafka e come le ha risolte.

00:00 — Presentazione del relatore
06:22 — Quali problemi sono sorti con l'aumento del numero di casi d'uso per l'utilizzo di Kafka?
08:58 — Creare astrazioni per gli utenti
14:15 — Autenticazione e sicurezza dei cluster
23:53 — Piano di controllo, che collega tutto
27:41 — Storie divertenti e poco pratiche
34:00 — Risposte alle domande degli ascoltatori

→ La presentazione di Alessandro

Kafka su Kubernetes: Juan è un sombrero? — Victor Gamov, Confluent

Victor ha risposto alla domanda se valga la pena eseguire Apache Kafka e i thread di elaborazione delle applicazioni su Kubernetes.

00:00 — Presentazione del relatore
05:19 — Problemi nell'esecuzione di applicazioni stateful su Kubernates
17:52 - Pod Kubernetes
22:33 — Lavorare con l'archiviazione
28:24 - Controller Kubernetes personalizzati
48:58 — Aggiornamento progressivo
58:05 — Risposte alle domande degli ascoltatori

→ La presentazione di Vittorio

È possibile trovare una playlist con tutti i video sul nostro canale YouTube.

Fotografie

Abbiamo pubblicato le foto dell'incontro su Facebook и ВКонтакте. Guarda com'è andata e tagga te stesso e i tuoi amici se hai partecipato all'incontro.

Torneremo presto con l'annuncio di nuovi eventi presso la sede di Avito a Mosca. Ci vediamo!

Fonte: habr.com