Kafka ミートアップの資料: CDC コネクタ、成長痛、Kubernetes

こんにちは！ 最近、私たちのオフィスでKafkaに関する会議が開催されました。 目の前の場所が光の速さで散り散りになった。 講演者の一人はこう言いました。「カフカはセクシーです。」

Booking.com、Confluent、Avito の同僚と、時には困難を伴う Kafka の統合とサポート、Kubernetes とのクロスオーバーの結果、および PostgreSQL 用のよく知られた個人的に作成されたコネクタについて話し合いました。

私たちはビデオレポートを編集し、講演者からのプレゼンテーションを収集し、交流会から美しい写真を選びました。 見たり聞いたりすることに興味がある場合は、猫にアクセスしてください。

レポートのビデオ録画

コネクター: なぜこんなにたくさんいるのですか - アナトリー・ソルダトフ、アビト

Anatoly は、コネクタとは何か、JDBC と Debezium にはどのような利点と欠点があるのか​​、そして Avito が独自の CDC コネクタを作成するというアイデアをどのように思いついたのかについて説明してくれました。

00:00 — 講演者紹介
04:09 — Kafka Connect とは何ですか、どのようなコネクタが存在しますか
18:10 — Connectは普段どのような用途に使われているのでしょうか？
23:47 — 最初の Avito のケース: データバス
28:20 — XNUMX 番目の Avito ケース: 独自の CDC コネクタを作成した方法
41:28 — リスナーの質問への回答

→ アナトリーによるプレゼンテーション

Apache Kafka を飼い慣らすにはどうすればよいでしょうか? Booking.com の経験 - アレクサンダー・ミロノフ、Booking.com

アレクサンダーは、カフカと協力するときに誰が、彼のチームがどのような困難に遭遇し、どのようにそれらを解決したかについての話を共有しました。

00:00 — 講演者紹介
06:22 ――Kafkaを利用するユースケースが増えることで、どのような問題が生じていますか？
08:58 — ユーザー向けの抽象化の作成
14:15 — クラスターの認証とセキュリティ
23:53 — すべてを接続するコントロール プレーン
27:41 — 面白いけどあまり実用的ではない話
34:00 — リスナーの質問への回答

→ アレクサンダー氏のプレゼンテーション

Kubernetes 上の Kafka: Juan はソンブレロですか? — Victor Gamov、Confluent

Victor は、Apache Kafka とアプリケーション処理スレッドを Kubernetes 上で実行する価値があるかどうかという質問に答えました。

00:00 — 講演者紹介
05:19 — Kubernates でステートフル アプリケーションを実行する際の問題
17:52 - Kubernetes ポッド
22:33 — ストレージの操作
28:24 - カスタム Kubernetes コントローラー
48:58 — ローリングアップグレード
58:05 — リスナーの質問への回答

→ ビクターのプレゼンテーション

すべてのビデオを含むプレイリストを見つけることができます 私たちの YouTube チャンネルで.

写真

交流会の写真を掲載しました Facebookで и ВКонтакте。 会議に参加した場合は、その様子を確認し、自分自身や友人にタグを付けてください。

Avito のモスクワ オフィスでの新しいイベントの発表とともにすぐに戻ってきます。 またね！

出所： habr.com