来自 Kafka 聚会的材料：CDC 连接器、成长的烦恼、Kubernetes

你好！ 最近，我们办公室召开了一场关于Kafka的会议。 眼前的地方以光速散开。 正如一位演讲者所说：“卡夫卡很性感。”

我们与来自 Booking.com、Confluence 和 Avito 的同事讨论了 Kafka 有时难以集成和支持、与 Kubernetes 交叉的后果，以及众所周知的、个人编写的 PostgreSQL 连接器

我们编辑了视频报告，收集了演讲者的演示文稿，并从聚会中选择了精美的照片。 如果你有兴趣看、听，就去找猫吧。

报告视频记录

连接器：为什么你们有这么多人 - Anatoly Soldatov，Avito

Anatoly 告诉我们什么是连接器、JDBC 和 Debezium 有哪些优缺点，以及我们 Avito 是如何想到编写自己的 CDC 连接器的想法。

00:00 — 演讲者介绍
04:09 — 什么是 Kafka Connect，存在哪些连接器
18:10 — Connect 通常用于什么？
23:47 — 第一个 Avito 案例：数据总线
28:20 — 第二个 Avito 案例：我们如何制作自己的 CDC 连接器
41:28 ——回答听众的问题

→ 阿纳托利的演讲

如何驯服阿帕奇卡夫卡？ Booking.com 体验 - 亚历山大·米罗诺夫，Booking.com

Alexander 分享了关于谁、他的团队在与 Kafka 合作时遇到了什么困难以及他们如何解决这些问题的故事。

00:00 — 演讲者介绍
06:22 — 随着使用 Kafka 的用例数量增加，出现了哪些问题？
08:58 — 为用户创建抽象
14:15 — 集群的认证和安全
23:53 — 控制平面，连接一切
27:41 — 有趣但不那么实际的故事
34:00 ——回答听众的问题

→ 亚历山大的演讲

Kubernetes 上的 Kafka：胡安是宽边帽吗？ — 维克多·加莫夫，Confluence

Victor 回答了有关是否值得在 Kubernetes 上运行 Apache Kafka 和应用程序处理线程的问题。

00:00 — 演讲者介绍
05:19 — 在 Kubernetes 上运行有状态应用程序的问题
17:52 - Kubernetes Pod
22:33 — 使用存储
28:24 - 自定义 Kubernetes 控制器
48:58 — 滚动升级
58:05 ——回答听众的问题

→ 维克多的演讲

可以找到包含所有视频的播放列表 在我们的 YouTube 频道上.

照片

我们发布了聚会的照片 在Facebook上 и ВКонтакте。 看看会议进展如何，如果您参加了会议，请标记您自己和您的朋友。

我们很快就会回来宣布 Avito 莫斯科办事处的新活动。 再见！

来源： habr.com