Kurzusleírás
A NiFi és az adatfolyam alapjai
- Mozgásban lévő adatok vs. nyugvó adatok: fogalmak és kihívások
- NiFi architektúra: magok, flow controller, provenance és bulletin
- Kulcsfontosságú komponensek: processzorok, kapcsolatok, kontrollerek és provenance
Big Data környezet és integráció
- A NiFi szerepe a Big Data ökoszisztémákban (Hadoop, Kafka, felhőalapú tárolás)
- HDFS, MapReduce és modern alternatívák áttekintése
- Felhasználási esetek: stream betöltés, naplótovábbítás, eseményfolyamatok
Telepítés, konfigurálás és fürtelepítés
- NiFi telepítése egycsomópontos és fürt módban
- Fürtkonfiguráció: csomóponti szerepek, Zookeeper és terheléselosztás
- NiFi telepítések orkesztrálása: Ansible, Docker vagy Helm használatával
Adatfolyamok tervezése és kezelése
- Folyamatok irányítása, szűrése, szétválasztása, egyesítése
- Processzor konfigurálás (InvokeHTTP, QueryRecord, PutDatabaseRecord stb.)
- Séma, adatgazdagítás és transzformációs műveletek kezelése
- Hibakezelés, újrapróbálkozási kapcsolatok és vissznyomás
Integrációs forgatókönyvek
- Kapcsolódás adatbázisokhoz, üzenetküldő rendszerekhez, REST API-khoz
- Streamelés elemzőrendszerekbe: Kafka, Elasticsearch vagy felhőalapú tárolás
- Integráció Splunkkal, Prometheusszal vagy naplózási folyamatokkal
Monitorozás, helyreállítás és provenance
- NiFi felület, metrikák és provenance vizualizátor használata
- Autonóm helyreállítás és elegáns hibakezelés tervezése
- Biztonsági mentés, folyamatverziózás és változáskezelés
Teljesítményhangolás és optimalizálás
- JVM, heap, szálkészletek és fürtezési paraméterek hangolása
- Folyamattervezés optimalizálása a szűk keresztmetszetek csökkentésére
- Erőforrás-izoláció, folyamatprioritás és átviteli sebesség szabályozás
Legjobb gyakorlatok és irányítás
- Folyamatdokumentáció, elnevezési szabványok, moduláris tervezés
- Biztonság: TLS, hitelesítés, hozzáférés-szabályozás, adattitkosítás
- Változáskezelés, verziózás, szerepalapú hozzáférés, audit nyomvonalak
Hibaelhárítás és incidenskezelés
- Gyakori problémák: holtpontok, memóriaszivárgások, processzorhibák
- Naplóelemzés, hibadiagnosztika és kiváltó ok vizsgálata
- Helyreállítási stratégiák és folyamat visszaállítás
Gyakorlati labor: Valósághű adatfolyamat megvalósítása
- Végpontok közötti folyamat építése: betöltés, transzformáció, kézbesítés
- Hibakezelés, vissznyomás és skálázás megvalósítása
- Teljesítményteszt és a folyamat hangolása
Összefoglalás és következő lépések
Követelmények
- Linux parancssori tapasztalat
- Alapvető hálózati és adatrendszer-ismeretek
- Adatstreamelési vagy ETL fogalmak ismerete
Célközönség
- Rendszergazdák
- Adatmérnökök
- Fejlesztők
- DevOps szakemberek
Vélemények (7)
GYAKORLÓ FELADATOK. A tanfolyam eredetileg 5 naposnak kellett volna lennie, de a három nap is sok kérdést válaszolt az eddigi NiFi használatomból fakadóan.
James - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
A tanár tempóját megfelelőnek találom. Senkit sem hagyott hátra módszerével. Nagyon támogató volt velünk, az új kezdekkel, akik még nem játszották a rendszergazda vagy infrastruktúra szerepét munkahelyi karrierük során, vagy akik ezt a képességet korábbi karrieri időszakból gyűjtögetették ki.
Pamdrea Ivory - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
Szerettem a gyakorló szekciót. A feladatok elvégzésével jobban tudtam megjegyezni az információkat. Emellett a képződő képessége, hogy teljes körűen bekapcsolja az osztály minden tagját, olyan környezetet teremtett, amelyben megvoltak a feltétel, hogy nyugodtan feltegyek kérdéseket azokról a témákról, amelyekben bizonytalan voltam.
Leila - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
Használati esetek és példák a NiFi adatfolyamok létrehozásához. Megoldottuk a gyakori problémákat és hátrányokat.
Nelson - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
Szerettem a szerkezetet. Az első napon belemértünk a Nifi alapjaiiba, fogalmaiba és alkalmazási eseteibe. A második napon az első nap megismerett ismereteket gyakoroltuk, folyamatokat készítve forgatókönyvi követelményeknek megfelelően. Harmadikon a Nifi Registry-t és a verziókezelést, valamint a több bérlős működést tanultuk meg, és átnéztük a kérdéseket és válaszokat.
Adam - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
Szerettem, hogy részletesebben elmagyarázta a NiFi-t és milyen erőforrásos. Alapvetően bármely infrastruktúrában használható, és sok különböző programozási nyelvet támogat. Emellett örömmel látom, hogy sikerült megoldanunk a NiFi tanúsítványfrissítési problémát a bizalmi tárolóval.
Joachim Martin - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
általános ismeretek és a képzés által kínált lehetőségek a eszköz tekintetében.
Nalfis Tobar - BHG Financial
Kurzus - Apache NiFi for Administrators
Gépi fordítás
