Kafka 모임 자료: CDC 커넥터, 성장 문제, Kubernetes

안녕하세요! 최근 우리 사무실에서 Kafka에 관한 회의가 열렸습니다. 눈앞의 장소는 빛의 속도로 흩어졌다. 연사 중 한 명은 "카프카는 섹시하다"고 말했습니다.

Booking.com, Confluent 및 Avito의 동료들과 함께 Kafka의 때로는 어려운 통합 및 지원, Kafka와 Kubernetes와의 교차 결과, 잘 알려져 있고 개인적으로 작성된 PostgreSQL용 커넥터에 대해 논의했습니다.

우리는 비디오 보고서를 편집하고, 연사로부터 프레젠테이션을 수집하고, 모임에서 아름다운 사진을 선택했습니다. 보고 듣는 데 관심이 있다면 고양이에게 가보세요.

보고서의 비디오 녹화

커넥터: 왜 그렇게 많은가요? - Anatoly Soldatov, Avito

Anatoly는 커넥터가 무엇인지, JDBC와 Debezium의 장점과 단점, Avito에서 어떻게 자체 CDC 커넥터를 작성하려는 아이디어를 생각해 냈는지 설명했습니다.

00:00 — 연사 소개
04:09 — Kafka Connect란 무엇이며, 어떤 커넥터가 존재합니까?
18:10 — Connect는 보통 어떤 용도로 사용되나요?
23:47 — 첫 번째 Avito 사례: 데이터 버스
28:20 — 두 번째 Avito 사례: 자체 CDC 커넥터를 만든 방법
41:28 — 청취자의 질문에 대한 답변

→ 아나톨리의 프레젠테이션

아파치 카프카를 길들이는 방법? Booking.com 경험 - Alexander Mironov, Booking.com

Alexander는 Kafka와 함께 작업하면서 팀이 누구에게, 어떤 어려움을 겪었는지, 그리고 이를 어떻게 해결했는지에 대한 이야기를 공유했습니다.

00:00 — 연사 소개
06:22 — Kafka 사용 사례가 늘어나면서 어떤 문제가 발생했나요?
08:58 — 사용자를 위한 추상화 생성
14:15 — 클러스터 인증 및 보안
23:53 — 모든 것을 연결하는 제어 평면
27:41 — 재미 있고 실용적이지 않은 이야기
34:00 — 청취자의 질문에 대한 답변

→ 알렉산더의 프레젠테이션

Kubernetes의 Kafka: Juan은 솜브레로인가요? — Victor Gamov, Confluent

Victor는 Kubernetes에서 Apache Kafka 및 애플리케이션 처리 스레드를 실행할 가치가 있는지에 대한 질문에 답했습니다.

00:00 — 연사 소개
05:19 — Kubernetes에서 상태 저장 애플리케이션을 실행하는 데 문제가 있습니다.
17:52 - 쿠버네티스 포드
22:33 — 스토리지 작업
28:24 - 맞춤형 Kubernetes 컨트롤러
48:58 — 롤링 업그레이드
58:05 — 청취자의 질문에 대한 답변

→ 빅터의 프레젠테이션

모든 동영상이 포함된 재생목록을 찾을 수 있습니다. 우리 유튜브 채널에서.

사진

모임 사진을 올렸습니다 페이스 북에서 и ВКонтакте. 진행 상황을 확인하고 회의에 참석했다면 자신과 친구를 태그하세요.

우리는 Avito 모스크바 사무소에서 열리는 새로운 이벤트에 대한 공지를 가지고 곧 다시 돌아오겠습니다. 또 보자!

출처 : habr.com