Stream Processing with Kafka Streams Képzés

Confluent Apache Kafka egy elosztott eseményáramlási platform, amely nagy átviteli sebességű, hibátűrő adatcsővezetékekre és valós idejű analitikára van tervezve.

Ez az oktatóvezetett élő tanfolyam (online vagy helyszínen) a középhosszú rendszergazdáknak és DevOps szakembereknek szól, akik szeretnének telepíteni, konfigurálni, monitorozni és hibáit orvosolni Confluent Apache Kafka kluszterekben.

A tanfolyam végén a résztvevők képesek lesznek:

• A Confluent Kafka komponenseinek és architektúrájának megértésére.
• Kafka brokerok, Zookeeper kvórumok és kulcsfontosságú szolgáltatások telepítésére és kezelésére.
• Biztonsági, replikációs és teljesítményoptimalizálási funkciók beállítására.
• Kezelőeszközök használatára a Kafka kluszterek monitorozására és karbantartására.

A tanfolyam formátuma

• Interaktív előadás és viták.
• Nagyon sok gyakorlat és gyakorlás.
• Hands-on implementáció egy élő laboratóriumi környezetben.

A tanfolyam testreszabási lehetőségei

• A tanfolyam testreszabására, kérjük, lépjen kapcsolatba velünk a szervezéséhez.

Az Apache Beam egy nyílt forráskódú, egységes programozási modell párhuzamos adatfeldolgozási folyamatok meghatározására és végrehajtására. Ereje abban rejlik, hogy képes kötegelt és adatfolyam-folyamatokat is futtatni, a végrehajtást pedig a Beam egyik támogatott elosztott feldolgozási háttérrendszere hajtja végre: Apache Apex, Apache Flink, Apache Spark és Google Cloud Dataflow. Az Apache Beam olyan ETL (Extract, Transform, and Load) feladatoknál hasznos, mint például az adatok mozgatása különböző tárolóeszközök és adatforrások között, az adatok kívánatosabb formátumba való átalakítása és az adatok új rendszerbe való betöltése.

Ezen az oktató által vezetett, élő (helyszíni vagy távoli) képzésen a résztvevők megtanulják, hogyan implementálják az Apache Beam SDK-kat egy Java vagy Python alkalmazásban, amely adatfeldolgozási folyamatot határoz meg a nagy adathalmazok kisebb darabokra bontásához. független, párhuzamos feldolgozáshoz.

A képzés végére a résztvevők képesek lesznek:

• Telepítse és konfigurálja Apache Beam.
• Használjon egyetlen programozási modellt a kötegelt és adatfolyam-feldolgozás végrehajtásához a Java vagy Python alkalmazásból.
• Csővezetékek végrehajtása több környezetben.

A tanfolyam formátuma

• Rész előadás, részben beszélgetés, gyakorlatok és nehéz gyakorlati gyakorlat

Jegyzet

• Ez a tanfolyam a jövőben elérhető lesz Scala. Kérjük, vegye fel velünk a kapcsolatot, hogy megbeszéljük.

Confluent Apache Kafka egy vállalati szintű elosztott eseményfolyam platform, amely Apache Kafka-re épül. Maga alapul szolgál nagy átviteli sebességű, hibatűrő adatsoroknak és valós idejű folyamatos alkalmazásoknak.Ez az oktatóvezetett, élő (online vagy előadás helyszínen) képzés középszintű mérnököknek és rendszergazdáknak szól, akik a Confluent Kafka-klaszterek telepítésére, konfigurálására és optimalizálására kíváncsiak a termelési környezetekben.A képzés végére a résztvevők képesek lesznek:- Confluent Kafka-klasztereket telepíteni, konfigurálni és üzemeltetni több brokerrel.- Zookeeper és replikációs technikák használatával magas elérhetőségű beállításokat tervezni.- Teljesítményt finomítani, méréseket monitorozni és helyreállítási stratégiákat alkalmazni.- Kafka-t biztonságosan, skálázhatóan és integrálva vállalati környezetekkel.A kurzus formája- Interaktív előadás és viták.- Sok gyakorlat és gyakorlás.- Élő laboratóriumi környezetben történő gyakorlati megvalósítás.A kurzus testreszabási lehetőségek- Egyedi képzés kéréséhez vegye fel velünk a kapcsolatot, hogy rendezze.

Ez a tanár vezetésével zajló élő képzés (online vagy helyszínen) azon mérnököknek szánt, akik a Confluentet (mely a Kafka egy disztribúciós verziója) szeretnék használni valós idejű adatfeldolgozási platform építésére és kezelésére az alkalmazásukhoz.

A képzés végén a résztvevők képesek lesznek:

• Telepíteni és beállítani a Confluent Platformot.
• Konfidenssel kezelni a Confluent felügyeleti eszközeit és szolgáltatásait a Kafka egyszerűbb futtatásához.
• Megőrizni és feldolgozni az érkező adatfolyamot.
• Kafa kiosztott csomópontcsoportok optimalizálását és kezelését végrehajtani.
• Adatfolyamok biztonságának garantálása.

A képzés formája

• Beszédet tartó interaktív előadás és beszélgetés.
• Számos gyakorlat és gyakorlás.
• Egy élő laboratóriumi környezetben történő gyakorlódás.

Képzés testreszabási lehetőségei

• A képzés az open source verziójú Confluenten alapul: a Confluent Open Source-on.
• Egy testreszabott képzés kérése esetén lépjen kapcsolatba velünk a rendezéshez.

Apache Kafka egy elosztott streaming platform. Ez ténylegesen az adatvezetékek építésének szabványa, és sok különféle felhasználási esetet old meg az adatfeldolgozás körül: felhasználható üzenet-sorként, elosztott naplóként, adatfolyam-feldolgozóként stb.

Először az adatvezetékek mögött álló néhány elmélettel kezdjük, majd a Kafka mögött meghúzódó alapvető koncepciókkal kezdjük. Fontos összetevőket is felfedezünk, például a Kafka Streams és a Kafka Connect.

Ez az oktató által vezetett, élő képzés a Magyarország-ban (online vagy helyszíni) bemutatja az elosztott adatfolyam- és kötegelt adatfeldolgozás mögött meghúzódó elveket és megközelítéseket, és végigvezeti a résztvevőket egy valós idejű adatfolyam-alkalmazás létrehozásán a Apache Flink-ban.

A képzés végére a résztvevők képesek lesznek:

• Környezet létrehozása adatelemző alkalmazások fejlesztéséhez.
• Ismerje meg, hogyan működik Apache Flink gráffeldolgozó könyvtára (Gelly).
• Flink-alapú, hibatűrő, adatfolyam-küldő alkalmazások becsomagolása, végrehajtása és figyelése.
• Változatos munkaterhelések kezelése.
• Végezzen haladó elemzést.
• Hozzon létre egy több csomópontból álló Flink-fürtöt.
• Mérje meg és optimalizálja a teljesítményt.
• Integrálja a Flink-et különböző Big Data rendszerekkel.
• Hasonlítsa össze a Flink képességeit más big data feldolgozó keretrendszerekkel.

Ezen az oktató által vezetett, élő képzésen a Magyarország-ban (helyszíni vagy távoli) a résztvevők megtanulják, hogyan állíthatnak be és integrálhatnak különböző Stream Processing keretrendszereket a meglévő nagy adattároló rendszerekkel, valamint a kapcsolódó szoftveralkalmazásokkal és mikroszolgáltatásokkal.

A képzés végére a résztvevők képesek lesznek:

• Telepítsen és konfiguráljon különböző Stream Processing keretrendszereket, mint például a Spark Streaming és a Kafka Streaming.
• Ismerje meg és válassza ki a legmegfelelőbb keretet a munkához.
• Adatfeldolgozás folyamatosan, párhuzamosan és rekordonként.
• Integrálja Stream Processing megoldásait meglévő adatbázisokkal, adattárházakkal, adattókkal stb.
• Integrálja a legmegfelelőbb adatfolyam-feldolgozási könyvtárat a vállalati alkalmazásokkal és mikroszolgáltatásokkal.

Ez a tanfolyam vállalati architektúrák, fejlesztők, rendszergazdák és bárki számára, aki szeretné megérteni és használni egy nagy átviteli sebességű elosztott üzenetrögzítő rendszert. Ha pontosabb igényekkel rendelkezik (pl. csak rendszergazdai rész), a tanfolyam testre szabható, hogy jobban illeszkedjen igényeivel.

Ez az oktató által vezetett, élő képzés a Magyarország-ban (online vagy helyszíni) azoknak az adatmérnököknek, adattudósoknak és programozóknak szól, akik szeretnék használni a Apache Kafka funkciókat az Python-es adatfolyamban.

A képzés végére a résztvevők képesek lesznek a Apache Kafka segítségével figyelni és kezelni a feltételeket folyamatos adatfolyamokban az Python programozás segítségével.

Ez az oktató által vezetett, élő képzés a Magyarország-ban (online vagy helyszíni) azoknak a fejlesztőknek szól, akik a Apache Kafka adatfolyam-feldolgozást kódírás nélkül szeretnék megvalósítani.

A képzés végére a résztvevők képesek lesznek:

• Telepítse és konfigurálja a Confluent KSQL-t.
• Állítson be egy adatfolyam-feldolgozási folyamatot csak SQL parancsok használatával (nincs Java vagy Python kódolás).
• Végezzen adatszűrést, átalakításokat, összesítést, összekapcsolást, ablakozást és szekciózást teljes egészében a SQL-ben.
• Interaktív, folyamatos lekérdezések tervezése és üzembe helyezése az ETL és a valós idejű elemzések streameléséhez.

Ezen az oktató által vezetett, élő képzésen a Magyarország-ban (helyszíni vagy távoli) a résztvevők megtanulják, hogyan telepítsék és kezeljék a Apache NiFi-t élő laborkörnyezetben.

A képzés végére a résztvevők képesek lesznek:

• Telepítse és konfigurálja az Apachi NiFi-t.
• Forrása, átalakítása és kezelése különböző, elosztott adatforrásokból, beleértve az adatbázisokat és a nagy adatforrásokat.
• Automatizálja az adatfolyamokat.
• Engedélyezze a streamelési elemzést.
• Alkalmazzon különféle megközelítéseket az adatfeldolgozáshoz.
• Alakítsa át Big Data üzleti betekintést.

Ezen az oktató által vezetett, élő képzésen a Magyarország-ban a résztvevők megtanulják az áramlásalapú programozás alapjait, miközben számos demó-bővítményt, komponenst és processzort fejlesztenek a Apache NiFi segítségével.

A képzés végére a résztvevők képesek lesznek:

• Ismerje meg a NiFi architektúráját és adatfolyam-koncepcióit.
• Bővítmények fejlesztése NiFi és harmadik féltől származó API-k használatával.
• Egyedi fejlesztésű saját Apache Nifi processzort.
• Valós idejű adatok feldolgozása és feldolgozása eltérő és nem megszokott fájlformátumokból és adatforrásokból.

Ez az oktató által vezetett, élő képzés a Magyarország-ban (online vagy helyszíni) azoknak az adatmérnököknek, adattudósoknak és programozóknak szól, akik a Spark Streaming funkciókat szeretnék használni a valós idejű adatok feldolgozásához és elemzéséhez.

A képzés végére a résztvevők képesek lesznek a Spark Streaming segítségével feldolgozni az élő adatfolyamokat adatbázisokban, fájlrendszerekben és élő műszerfalakban.