Avito Kafka meetup: конектори, інтеграція, хмари

Вітання! У четвер, 23 січня, пройде наш перший мітап про Apache Kafka. Будемо говорити про інтеграцію, source конектори та запуск масштабованих додатків у Kubernetes. З доповідями виступатимуть інженери Booking.com, Confluent та Авіто.

Зустрічаємось о 18:00. Реєструйтеся самі та запрошуйте колег. Під катом – анонси виступів, посилання на реєстрацію та відеотрансляцію мітапу.

Avito Kafka meetup: конектори, інтеграція, хмари

Доповіді

Конектори: навіщо так багато — Анатолій Солдатов, Авіто

Avito Kafka meetup: конектори, інтеграція, хмари

Нещодавно Мартін Клеппман у своєму твіттері прокоментував статтю Netflix про новий CDC конектор: «Netflix створили власний Change Data Capture (CDC) конектор для MySQL та PostgreSQL… хоча, можливо, було б краще зробити свій внесок у Debezium?». У своєму виступі я зроблю невеликий огляд source конекторів. Далі розглянемо переваги та недоліки відомих конекторів для PostgreSQL, включаючи Debezium. Насамкінець я спробую дати відповідь на твіт Мартіна і розповім, чому ми вирішили зробити свій CDC конектор в Авіто, і що з цього вийшло.


Як приручити Apache Kafka? Досвід Booking.com — Олександр Миронов, Booking.com

Avito Kafka meetup: конектори, інтеграція, хмари

За всіх можливостей Apache Kafka, її непросто інтегрувати та підтримувати. У доповіді розповім, як ми вирішуємо це завдання в Booking.com, де Kafka та збудований навколо неї сервіс використовуються як основний продукт для стримінгу даних. Ми в деталях розглянемо, як порівняно невелика команда утримує контроль над десятками кластерів і забезпечує безпеку даних, а також разом посміємося чи поплачемо над багами та проблемами, які нам довелося вирішувати.


Kafka на Kubernetes: а чи по Хуану сомбреро? - Віктор Гамов, Confluent

Avito Kafka meetup: конектори, інтеграція, хмари

Якщо потрібно вибрати найбільш ефективну розподілену платформу потокової обробки даних, що надходять у реальному часі, на сьогоднішній день відповідь очевидна – це Apache Kafka! Якщо потрібно розгорнути масштабовану програму у хмарі, з високою стійкістю, резервуванням, розподілом навантажень та контейнерами, вам потрібний Kubernetes.

А якщо схрестити цих вужа і їжака, ви отримаєте масштабовану програму, що обробляє потоки в реальному часі в хмарі. Здорово, чи не так? Але чи все так просто? Чи достатньо цегли Lego, які надає базовий Kubernetes, щоб запускати серйозні розподілені системи, що вимагають зберігання стану?

Я Віктор Гамов, Developer Advocate з компанії Confluent, допоможу вам розібратися в усьому цьому зоопарку, а також спробую відповісти на запитання «Чи варто запускати Apache Kafka та інші її компоненти, а також обробляючі потоки програми на Kubernetes?».

Паролі та явки

Мітап розпочнеться 23 січня о 18:00. Участь безкоштовна, але потрібна зареєструватися. Будь ласка, вказуйте ваше справжнє ім'я та прізвище в анкеті. Не забудьте взяти з собою паспорт або посвідчення водія, щоб отримати перепустку на ресепшені в день заходу.

Адреса: офіс Авіто, Лісова 7.

Якщо не зможете прийти на зустріч, дивіться пряму трансляцію на ютуб-каналі AvitoTech. У прямому ефірі можна буде поставити запитання, які ми озвучимо спікерам.

До зустрічі!

Джерело: habr.com

Купити надійний хостинг для сайтів із захистом від DDoS, VPS VDS сервери 🔥 Купити надійний хостинг для сайтів із захистом від DDoS, VPS VDS сервери | ProHoster