來自 Kafka 聚會的材料：CDC 連接器、成長的煩惱、Kubernetes

你好！ 最近，我們辦公室召開了一場關於Kafka的會議。 眼前的地方以光速散開。 正如一位演講者所說：“卡夫卡很性感。”

我們與來自 Booking.com、Confluence 和 Avito 的同事討論了 Kafka 有時難以整合和支援、與 Kubernetes 交叉的後果，以及眾所周知的、個人編寫的 PostgreSQL 連接器

我們編輯了視訊報告，收集了演講者的演示文稿，並從聚會中選擇了精美的照片。 如果你有興趣看、聽，就去找貓吧。

報告影片記錄

連接器：為什麼你們有這麼多人 - Anatoly Soldatov，Avito

Anatoly 告訴我們什麼是連接器、JDBC 和 Debezium 有哪些優缺點，以及我們 Avito 是如何想到編寫自己的 CDC 連接器的想法。

00:00 — 講者介紹
04:09 — 什麼是 Kafka Connect，有哪些連接器
18:10 — Connect 通常用於什麼？
23:47 — 第一個 Avito 案例：資料匯流排
28:20 — 第二個 Avito 案例：我們如何製作自己的 CDC 連接器
41:28 ——回答聽眾的問題

→ 阿納托利的演講

如何馴服阿帕契卡夫卡？ Booking.com 體驗 - 亞歷山大·米羅諾夫，Booking.com

Alexander 分享了關於誰、他的團隊在與 Kafka 合作時遇到了什麼困難以及他們如何解決這些問題的故事。

00:00 — 講者介紹
06:22 — 隨著使用 Kafka 的用例數量增加，出現了哪些問題？
08:58 — 為使用者建立抽象
14:15 — 叢集的認證和安全
23:53 — 控制平面，連結一切
27:41 — 有趣但不那麼實際的故事
34:00 ——回答聽眾的問題

→ 亞歷山大的演講

Kubernetes 上的 Kafka：胡安是寬邊帽嗎？ — 維克多·加莫夫，Confluence

Victor 回答了有關是否值得在 Kubernetes 上執行 Apache Kafka 和應用程式處理執行緒的問題。

00:00 — 講者介紹
05:19 — 在 Kubernetes 上執行有狀態應用程式的問題
17:52 - Kubernetes Pod
22:33 — 使用儲存
28:24 - 自訂 Kubernetes 控制器
48:58 — 滾動升級
58:05 ——回答聽眾的問題

→ 維克多的演講

可以找到包含所有影片的播放列表 在我們的 YouTube 頻道上.

照片

我們發布了聚會的照片 在臉書上 и ВКонтакте。 看看會議進度如何，如果您參加了會議，請標記您自己和您的朋友。

我們很快就會回來宣布 Avito 莫斯科辦事處的新活動。 再見！

來源： www.habr.com