Avito Kafka meetup : connecteurs, intégration, clouds

Bonjour ! Jeudi 23 janvier, nous tiendrons notre premier meetup sur Apache Kafka. Nous parlerons de l'intégration, des connecteurs source et du déploiement d'applications évolutives dans Kubernetes. Des ingénieurs de Booking.com, Confluent et Avito présenteront leurs exposés.

Rendez-vous à 18h00. Inscrivez-vous vous-même et invitez vos collègues. Sous ce message, vous trouverez les annonces des présentations, le lien pour l'inscription et la diffusion vidéo du meetup.

Avito Kafka meetup : connecteurs, intégration, clouds

Conférences

Connecteurs : pourquoi êtes-vous si nombreux ? — Anatoly Soldatov, Avito

Avito Kafka meetup : connecteurs, intégration, clouds

Récemment, Martin Kleppmann a commenté sur Twitter un article de Netflix concernant le nouveau connecteur CDC : « Netflix a créé son propre connecteur Change Data Capture (CDC) pour MySQL et PostgreSQL… bien qu'il aurait peut-être été préférable de contribuer à Debezium ? ». Dans ma présentation, je donnerai un bref aperçu des connecteurs source. Ensuite, nous examinerons les avantages et les inconvénients des connecteurs connus pour PostgreSQL, y compris Debezium. Enfin, j'essaierai de répondre au tweet de Martin et expliquerai pourquoi nous avons décidé de créer notre propre connecteur CDC chez Avito, et ce qui en est sorti.


Comment dompter Apache Kafka ? L'expérience de Booking.com — Alexander Mironov, Booking.com

Avito Kafka meetup : connecteurs, intégration, clouds

Malgré toutes les possibilités qu'offre Apache Kafka, son intégration et sa maintenance ne sont pas faciles. Dans cette présentation, je parlerai de la manière dont nous abordons cette tâche chez Booking.com, où Kafka et le service construit autour d'elle sont utilisés comme produit principal pour le streaming de données. Nous examinerons en détail comment une équipe relativement petite contrôle des dizaines de clusters et garantit la sécurité des données, et nous aurons également l'occasion de rire — ou de pleurer — sur les bugs et les problèmes que nous avons dû résoudre.


Kafka sur Kubernetes : et le sombrero à Juan ? — Victor Gamov, Confluent

Avito Kafka meetup : connecteurs, intégration, clouds

Si vous devez choisir la plateforme de traitement de données en streaming la plus efficace, en temps réel, la réponse est claire aujourd'hui — c'est Apache Kafka ! Si vous devez déployer une application évolutive dans le cloud, avec une haute disponibilité, de la redondance, une répartition des charges et des conteneurs, vous avez besoin de Kubernetes.

Et si l'on croisait ce serpent et ce hérisson, vous obtiendriez une application scalable traitant des flux en temps réel dans le cloud. Génial, non ? Mais est-ce si simple ? Avez-vous suffisamment de briques Lego fournies par le Kubernetes de base pour exécuter des systèmes distribués sérieux nécessitant un stockage d'état ?

Je suis Viktor Gamov, Developer Advocate chez Confluent. Je vais vous aider à naviguer dans tout ce fouillis et je vais également tenter de répondre à la question : « Faut-il déployer Apache Kafka et d'autres de ses composants, ainsi que des applications de traitement de flux sur Kubernetes ? »

Identifiants et mots de passe

Le meet-up commencera le 23 janvier à 18h00. La participation est gratuite, mais vous devez vous inscrire. Veuillez indiquer votre véritable nom et prénom dans le formulaire. N'oubliez pas d'apporter votre passeport ou permis de conduire pour obtenir votre accréditation à l'accueil le jour de l'événement.

Adresse : bureau d'Avito, Lesnaya 7.

Si vous ne pouvez pas assister à la rencontre, regardez la diffusion en direct sur le chaîne YouTube AvitoTech. Vous pourrez poser des questions en direct, que nous transmettrons aux intervenants.

À bientôt !

Source : habr.com

Acheter un hébergement fiable pour les sites avec protection DDoS, serveurs VPS VDS 🔥 Acheter un hébergement fiable pour les sites avec protection DDoS, serveurs VPS VDS | ProHoster