Apache Kafka i przetwarzanie strumieni danych za pomocą Spark Streaming
Cześć, Habr! Dziś zbudujemy system, który przy pomocy Spark Streaming będzie przetwarzał strumienie wiadomości Apache Kafka i zapisywał wyniki przetwarzania w chmurowej bazie danych AWS RDS. Załóżmy, że pewna instytucja kredytowa zleca nam zadanie przetwarzania przychodzących transakcji 'w locie' we wszystkich swoich oddziałach. Może to być zrealizowane w celu natychmiastowego obliczenia otwartej waluty […]
