Materialer fra Kafka-treffet: CDC-kontakter, voksesmerter, Kubernetes

Hallo! Nylig ble det holdt et møte om Kafka på kontoret vårt. Stedene foran ham spredte seg med lysets hastighet. Som en av foredragsholderne sa: "Kafka er sexy."

Med kolleger fra Booking.com, Confluent og Avito diskuterte vi den til tider vanskelige integreringen og støtten til Kafka, konsekvensene av å krysse den med Kubernetes, samt kjente og personlig skrevne koblinger for PostgreSQL

Vi redigerte videoreportasjer, samlet presentasjoner fra foredragsholdere og valgte flotte bilder fra treffet. Hvis du er interessert i å se og lytte, gå til katten.

Videoopptak av rapporter

Koblinger: hvorfor er det så mange av dere - Anatoly Soldatov, Avito

Anatoly fortalte oss hva kontakter er, hvilke fordeler og ulemper JDBC og Debezium har, og hvordan vi i Avito kom på ideen om å skrive vår egen CDC-kontakt.

00:00 — Foredragsholderinnledning
04:09 — Hva er Kafka Connect, hvilke koblinger finnes
18:10 — Hva brukes Connect vanligvis til?
23:47 — Første Avito-sak: databuss
28:20 — Andre Avito-sak: hvordan vi laget vår egen CDC-kontakt
41:28 — Svar på lytterspørsmål

→ Presentasjon av Anatoly

Hvordan temme Apache Kafka? Booking.com-opplevelse - Alexander Mironov, Booking.com

Alexander delte historier om hvem, hvilke vanskeligheter teamet hans møtte når de jobbet med Kafka, og hvordan de løste dem.

00:00 — Foredragsholderinnledning
06:22 — Hvilke problemer har oppstått med økningen i antall brukssaker for bruk av Kafka?
08:58 — Lage abstraksjoner for brukere
14:15 — Autentisering og sikkerhet for klynger
23:53 — Kontrollplan, som forbinder alt
27:41 — Morsomme og ikke så praktiske historier
34:00 — Svar på lytterspørsmål

→ Alexanders presentasjon

Kafka på Kubernetes: er Juan en sombrero? — Victor Gamov, Confluent

Victor svarte på spørsmålet om det er verdt å kjøre Apache Kafka og applikasjonsbehandlingstråder på Kubernetes.

00:00 — Foredragsholderinnledning
05:19 — Problemer med å kjøre stateful applikasjoner på Kubernates
17:52 - Kubernetes pod
22:33 — Jobber med lager
28:24 - Tilpassede Kubernetes-kontrollere
48:58 — Rullende oppgradering
58:05 — Svar på lytterspørsmål

→ Victors presentasjon

En spilleliste med alle videoer kan bli funnet på vår YouTube-kanal.

bilder

Vi la ut bilder fra treffet på Facebook и ВКонтакте. Se hvordan det gikk og tagg deg selv og vennene dine om du deltok på møtet.

Vi kommer snart tilbake med kunngjøringer om nye arrangementer på Avitos Moskva-kontor. Ser deg igjen!

Kilde: www.habr.com