Materialien vom Kafka-Treffen: CDC-Anschlüsse, Wachstumsschmerzen, Kubernetes

Hallo! Kürzlich fand in unserem Büro ein Treffen zum Thema Kafka statt. Die Orte vor ihm zerstreuten sich mit Lichtgeschwindigkeit. Wie einer der Redner sagte: „Kafka ist sexy.“

Mit Kollegen von Booking.com, Confluent und Avito diskutierten wir über die teilweise schwierige Integration und Unterstützung von Kafka, die Folgen der Kreuzung mit Kubernetes sowie bekannte und persönlich geschriebene Konnektoren für PostgreSQL

Wir haben Videoberichte bearbeitet, Präsentationen von Rednern gesammelt und wunderschöne Fotos vom Treffen ausgewählt. Wenn Sie Interesse am Zuschauen und Zuhören haben, gehen Sie zur Katze.

Videoaufzeichnungen von Berichten

Konnektoren: Warum gibt es so viele von Ihnen – Anatoly Soldatov, Avito

Anatoly erzählte uns, was Konnektoren sind, welche Vor- und Nachteile JDBC und Debezium haben und wie wir bei Avito auf die Idee kamen, unseren eigenen CDC-Konnektor zu schreiben.

00:00 — Vorstellung des Sprechers
04:09 — Was ist Kafka Connect, welche Konnektoren gibt es?
18:10 — Wofür wird Connect normalerweise verwendet?
23:47 — Erster Avito-Fall: Datenbus
28:20 – Zweiter Avito-Fall: Wie wir unseren eigenen CDC-Stecker hergestellt haben
41:28 — Antworten auf Hörerfragen

→ Präsentation von Anatoly

Wie zähmt man Apache Kafka? Booking.com-Erfahrung – Alexander Mironov, Booking.com

Alexander erzählte Geschichten darüber, wer, auf welche Schwierigkeiten sein Team bei der Arbeit mit Kafka stieß und wie sie diese lösten.

00:00 — Vorstellung des Sprechers
06:22 — Welche Probleme sind mit der Zunahme der Anwendungsfälle für die Verwendung von Kafka aufgetreten?
08:58 — Abstraktionen für Benutzer erstellen
14:15 — Authentifizierung und Sicherheit von Clustern
23:53 — Steuerungsebene, die alles verbindet
27:41 — Lustige und nicht so praktische Geschichten
34:00 — Antworten auf Hörerfragen

→ Alexanders Vortrag

Kafka über Kubernetes: Ist Juan ein Sombrero? — Victor Gamov, Confluent

Victor beantwortete die Frage, ob es sich lohnt, Apache Kafka und Anwendungsverarbeitungsthreads auf Kubernetes auszuführen.

00:00 — Vorstellung des Sprechers
05:19 – Probleme beim Ausführen zustandsbehafteter Anwendungen auf Kubernates
17:52 - Kubernetes-Pod
22:33 — Arbeiten mit Speicher
28:24 - Benutzerdefinierte Kubernetes-Controller
48:58 – Fortlaufendes Upgrade
58:05 — Antworten auf Hörerfragen

→ Victors Präsentation

Eine Playlist mit allen Videos ist zu finden auf unserem Youtube-Kanal.

Fotos

Wir haben Fotos vom Treffen gepostet auf Facebook и ВКонтакте. Sehen Sie, wie es gelaufen ist, und markieren Sie sich und Ihre Freunde, wenn Sie an dem Treffen teilgenommen haben.

Wir werden bald mit Ankündigungen neuer Veranstaltungen im Moskauer Büro von Avito zurück sein. Wir sehen uns wieder!

Source: habr.com