Tài liệu từ cuộc gặp gỡ Kafka: Trình kết nối CDC, vấn đề ngày càng tăng, Kubernetes

Xin chào! Gần đây, một cuộc họp về Kafka đã được tổ chức tại văn phòng của chúng tôi. Những nơi trước mặt anh rải rác với tốc độ ánh sáng. Như một trong những diễn giả đã nói: “Kafka rất quyến rũ.”

Với các đồng nghiệp từ Booking.com, Confluent và Avito, chúng tôi đã thảo luận về sự tích hợp và hỗ trợ đôi khi khó khăn của Kafka, hậu quả của việc kết hợp nó với Kubernetes, cũng như các trình kết nối nổi tiếng và được viết riêng cho PostgreSQL

Chúng tôi chỉnh sửa các báo cáo video, thu thập các bài thuyết trình từ các diễn giả và chọn lọc những bức ảnh đẹp từ buổi gặp mặt. Nếu bạn thích xem và nghe, hãy đến với con mèo.

Tài liệu từ cuộc gặp gỡ Kafka: Trình kết nối CDC, vấn đề ngày càng tăng, Kubernetes

Video ghi lại các báo cáo

Người kết nối: tại sao có nhiều bạn như vậy - Anatoly Soldatov, Avito

Anatoly đã cho chúng tôi biết trình kết nối là gì, JDBC và Debezium có những ưu điểm và nhược điểm nào cũng như cách chúng tôi tại Avito nảy ra ý tưởng viết trình kết nối CDC của riêng mình.

00:00 - Giới thiệu diễn giả
04:09 — Kafka Connect là gì, có những trình kết nối nào
18:10 — Connect thường dùng để làm gì?
23:47 — Trường hợp Avito đầu tiên: bus dữ liệu
28:20 — Trường hợp Avito thứ hai: cách chúng tôi tạo trình kết nối CDC của riêng mình
41:28 - Trả lời câu hỏi của người nghe

Bài trình bày của Anatoly

Làm thế nào để thuần hóa Apache Kafka? Trải nghiệm Booking.com - Alexander Mironov, Booking.com

Alexander đã chia sẻ những câu chuyện về ai, những khó khăn mà nhóm của anh gặp phải khi làm việc với Kafka và cách họ giải quyết chúng.

00:00 - Giới thiệu diễn giả
06:22 — Những vấn đề gì đã nảy sinh khi số lượng các trường hợp sử dụng Kafka ngày càng tăng?
08:58 - Tạo sự trừu tượng cho người dùng
14:15 - Xác thực và bảo mật của các cụm
23:53 — Mặt phẳng điều khiển, kết nối mọi thứ
27:41 - Những câu chuyện hài hước và không thực tế
34:00 - Trả lời câu hỏi của người nghe

Bài thuyết trình của Alexander

Kafka trên Kubernetes: Juan có phải là đội mũ rộng vành không? — Victor Gamov, Hợp lưu

Victor đã trả lời câu hỏi liệu có đáng chạy Apache Kafka và các luồng xử lý ứng dụng trên Kubernetes hay không.

00:00 - Giới thiệu diễn giả
05:19 — Sự cố khi chạy các ứng dụng có trạng thái trên Kubernates
17:52 - Nhóm Kubernetes
22:33 - Làm việc với bộ nhớ
28:24 - Bộ điều khiển Kubernetes tùy chỉnh
48:58 - Nâng cấp lăn
58:05 - Trả lời câu hỏi của người nghe

Bài thuyết trình của Victor

Có thể tìm thấy danh sách phát có tất cả các video trên kênh YouTube của chúng tôi.

hình ảnh

Chúng tôi đã đăng ảnh từ cuộc gặp mặt trên Facebook и ВКонтакте. Hãy xem mọi việc diễn ra như thế nào và gắn thẻ chính bạn cũng như bạn bè của bạn nếu bạn tham dự cuộc họp.

Tài liệu từ cuộc gặp gỡ Kafka: Trình kết nối CDC, vấn đề ngày càng tăng, Kubernetes

Chúng tôi sẽ sớm quay lại với thông báo về các sự kiện mới tại văn phòng Avito's Moscow. Hẹn gặp lại!

Nguồn: www.habr.com

Thêm một lời nhận xét