Kurzusleírás
Bevezetés
A Spark Streaming szolgáltatások és építészet áttekintése
- Támogatott adatforrások
- Alapvető API-k
A környezet előkészítése
- Függőségek
- Spark és adatfolyam-kontextus
- Csatlakozás Kafkához
Üzenetek feldolgozása
- A bejövő üzenetek elemzése JSON-ként
- ETL folyamatok
- A streamelési környezet indítása
Ablakos Stream Processing végrehajtása
- Dia intervallum
- Ellenőrzőpont szállítási konfiguráció
- A környezet elindítása
A feldolgozási kód prototípusa
- Kapcsolódás egy Kafka-témához
- JSON lekérése adatforrásból a Paw használatával
- Változatok és kiegészítő feldolgozás
A kód streamelése
- Munkaellenőrzési változók
- Egyező értékek meghatározása
- Funkciók és feltételek
Adatfolyam kimenet megszerzése
- Számlálók
- Kafka kimenet (egyeztetett és nem egyező)
Hibaelhárítás
Összefoglalás, és következtetés
Követelmények
- Tapasztalat: Python és Apache Kafka
- Az adatfolyam-feldolgozó platformok ismerete
Közönség
- Adatmérnökök
- Adattudósok
- Programozók
Vélemények (5)
Elkötelezettség az oktatóval Számos releváns gyakorlat és laboratóriumi gyakorlati vizsga
Salim - SICPA SA
Kurzus - Administration of Kafka Message Queue
Gépi fordítás
a tanár interaktív megközelítése, nem egyenes történet, hanem a hallgatóság kérdéseire reagálva.
Rens - Canon Medical Informatics Europe B.V.
Kurzus - Administration of Kafka Topic
Gépi fordítás
A laborok és a diák jól kombinálható Jorge tudásával és Kafka iránti szeretetével.
Willem - BMW SA
Kurzus - Apache Kafka for Developers
Gépi fordítás
Sufficient hands on, trainer is knowledgable
Chris Tan
Kurzus - A Practical Introduction to Stream Processing
Reszelt készségek, példák, nagyon jó gyakorlatok
Marek Konieczny - G2A.COM Limited
Kurzus - Kafka for Administrators
Gépi fordítás