Bahan daripada pertemuan Kafka: Penyambung CDC, kesakitan yang semakin meningkat, Kubernetes

helo! Baru-baru ini, satu mesyuarat mengenai Kafka telah diadakan di pejabat kami. Tempat-tempat di hadapannya berselerak dengan kelajuan cahaya. Seperti yang dikatakan oleh salah seorang penceramah: "Kafka seksi."

Bersama rakan sekerja dari Booking.com, Confluent dan Avito, kami membincangkan penyepaduan dan sokongan Kafka yang kadangkala sukar, akibat menyeberanginya dengan Kubernetes, serta penyambung yang terkenal dan ditulis secara peribadi untuk PostgreSQL

Kami menyunting laporan video, mengumpul pembentangan daripada penceramah dan memilih gambar yang cantik daripada pertemuan itu. Jika anda berminat untuk menonton dan mendengar, pergi ke kucing.

Rakaman video laporan

Penyambung: mengapa terdapat begitu ramai daripada anda - Anatoly Soldatov, Avito

Anatoly memberitahu kami apakah penyambung, apakah kelebihan dan kekurangan JDBC dan Debezium, dan bagaimana kami di Avito menghasilkan idea untuk menulis penyambung CDC kami sendiri.

00:00 - Pengenalan penceramah
04:09 — Apakah itu Kafka Connect, apakah penyambung yang wujud
18:10 — Untuk apa Connect biasanya digunakan?
23:47 — Kes Avito pertama: bas data
28:20 — Kes Avito kedua: bagaimana kami membuat penyambung CDC kami sendiri
41:28 - Jawapan kepada soalan pendengar

→ Pembentangan oleh Anatoly

Bagaimana untuk menjinakkan Apache Kafka? Pengalaman Booking.com - Alexander Mironov, Booking.com

Alexander berkongsi cerita tentang siapa, apakah kesukaran yang dihadapi oleh pasukannya semasa bekerja dengan Kafka, dan cara mereka menyelesaikannya.

00:00 - Pengenalan penceramah
06:22 — Apakah masalah yang timbul dengan peningkatan bilangan kes penggunaan untuk menggunakan Kafka?
08:58 — Mencipta abstraksi untuk pengguna
14:15 — Pengesahan dan keselamatan kluster
23:53 — Pesawat kawalan, yang menghubungkan segala-galanya
27:41 — Cerita lucu dan tidak begitu praktikal
34:00 - Jawapan kepada soalan pendengar

→ Penyampaian Alexander

Kafka di Kubernetes: adakah Juan sombrero? - Victor Gamov, Confluent

Victor menjawab soalan tentang sama ada ia berbaloi menjalankan Apache Kafka dan utas pemprosesan aplikasi di Kubernetes.

00:00 - Pengenalan penceramah
05:19 — Masalah menjalankan aplikasi stateful pada Kubernate
17:52 - Kubernetes pod
22:33 — Bekerja dengan storan
28:24 - Pengawal Kubernetes tersuai
48:58 — Naik taraf bergolek
58:05 - Jawapan kepada soalan pendengar

→ Penyampaian Victor

Senarai main dengan semua video boleh didapati di saluran YouTube kami.

Foto

Kami menyiarkan foto dari pertemuan itu di Facebook и ВКонтакте. Lihat bagaimana ia berlaku dan tag diri anda dan rakan anda jika anda menghadiri mesyuarat itu.

Kami akan kembali tidak lama lagi dengan pengumuman acara baharu di pejabat Avito di Moscow. Jumpa lagi!

Sumber: www.habr.com