Lustre fájlszámítás rendszergazdák számára Képzés

I. Lustre technológia áttekintés

1. A Lustre technológia áttekintése

• A párhuzamos fájlrendszerek és HPC tárolási követelmények bemutatása
• A Lustre szerepe a nagy teljesítményű számítási környezetekben
• A Lustre fejlődése és architektúrája
• Hagyományos elosztott és hálózati fájlrendszerekkel való összehasonlítás
• Gyakori Lustre telepítési forgatókönyvek

2. Lustre funkciók és képességek

• Nagy sávszélességű párhuzamos I/O
• Léptékkel való skálázhatóság nagy számítási környezetekben
• Metaadat és adat szétválasztás koncepciók
• Teljesítményjellemzők és korlátok
• Integráció HPC klaszterekkel és tudományos munkaterhelésekkel

II. Lustre architektúra és alapvető komponensei

1. Lustre rendszerarchitektúra

• A Lustre kliens-kiszolgáló architektúra megértése
• A Lustre komponensek áttekintése:
  • Metaadat kiszolgáló (MDS)
  • Metaadat célállomás (MDT)
  • Tárgytároló kiszolgáló (OSS)
  • Tárgytároló célállomás (OST)
  • Lustre kliensek

2. Lustre adatkezelési fogalmak

• Fájl striping és tárgytárolás elvei
• Metaadat műveletek
• Adat-elosztási stratégiák
• Logikus tárolás szervezése

III. Hardver tervezés és környezet előkészítése

1. Lustre tároló infrastruktúra tervezése

• Hardver komponensek kiválasztása
• Tárolási kiszolgálói követelmények
• Az adatkötetek technológiái és RAID szempontok
• Hálózati infrastruktúra tervezése
• Kapacitás- és teljesítménytervezés

2. A működtetési környezet előkészítése

• Támogatott operációs rendszerek
• Kernel és illesztőprogram követelmények
• Hálózati konfigurációs követelmények
• Kiszolgálók és kliensek előkészítése

IV. Lustre telepítése és konfigurálása

1. Lustre telepítési folyamat

• Lustre szoftvercsomagok telepítése
• Tárházak és függőségek konfigurálása
• Kiszolgáló- és klienscsomópontok előkészítése
• A Lustre szolgáltatások inicializálása

2. Lustre fájlrendszer létrehozása

• Metaadat- és tárgytároló célállomások formázása
• Fájlrendszer paraméterek konfigurálása
• Lustre kliensek rögzítése
• A telepítés ellenőrzése

V. Lustre hálózat kezelése

1. Lustre hálózati architektúra

• LNet (Lustre Networking) áttekintése
• Támogatott hálózati technológiák
• Hálózati interfészek konfigurálása
• Több hálózati útvonal kezelése

2. Hálózati teljesítmény optimalizálás

• Hálózati hangolási stratégiák
• Sávszélesség és késleltetés szempontok
• Hálózati kommunikációs problémák hibaelhárítása

VI. Fájl-elrendezés, tárolás kezelése és területkezelés

1. Fájl-elrendezések kezelése

• A striping fogalmak megértése
• a sávok számának, méretének és elhelyezésének konfigurálása
• Az elrendezések optimalizálása munkaterhelésekhez

2. Tárolási kapacitás kezelése

• Az OST kihasználtságának monitorozása
• A tárolási használat egyensúlyba hozása
• Tárolási poolok kezelése
• A Lustre kapacitásának bővítése

VII. Lustre I/O teljesítmény kezelése

1. Lustre I/O műveletek megértése

• Párhuzamos I/O fogalmak
• Metaadat és adat teljesítmény
• Kliens-oldali gyorsítótározás
• I/O mintázatok és munkaterhelés jellemzők

2. Teljesítmény-optimalizáló technikák

• A striping konfigurációk hangolása
• Az alkalmazási munkaterhelések optimalizálása
• A metaadat teljesítményének javítása
• I/O szűk keresztmetszetek csökkentése

VIII. Lustre biztonság és hozzáférés-kezelés

1. Lustre környezetek biztosítása

• Felhasználó- és csoportkezelés
• Hitelesítési fogalmak
• Hálózati biztonsági szempontok
• Adathozzáférés védelme

2. Hozzáférés-vezérlések kezelése

• Fájlijogosultságok
• ACL konfiguráció
• Biztonsági legjobb gyakorlatok

IX. Keretek és erőforrás-vezérlés kezelése

1. Lustre kvótakezelés

• Felhasználói és csoportkvóták megértése
• Kvóta-beállítások konfigurálása
• A kvóta-használat monitorozása
• A kvótameglépések kezelése

2. Kapacitás-kezelés

• A tárolási fogyasztás kezelése
• Az erőforrás-allocation tervezése

X. Nagy hozzáférhetőség és megbízhatóság

1. Magas rendelkezésre állású Lustre rendszerek tervezése

• A magas rendelkezésre állás fogalmai
• Túlcsordulási architektúra
• A metaadat-kiszolgáló redundancia
• Szolgáltatás-visszaállítási mechanizmusok

2. Rendszer egészségének monitorozása

• Hibák észlelése
• A csökkentett állapot kezelése
• Visszaállítási eljárások

XI. Monitorozás, benchmarkolás és teljesítmény elemzés

1. Lustre monitorozó eszközök

• Rendszer teljesítmény monitorozása
• Kiszolgáló- és kliensegészség ellenőrzése
• Működtetési statisztikák gyűjtése
• Szűk keresztmetszetek azonosítása

2. Lustre teljesítmény benchmarkolása

• Teljesítménytesztelés alapelvei
• Benchmark eszközök és módszertanok
• A sávszélesség és késleltetés mérése
• A benchmark eredmények értelmezése

XII. Mentés, visszaállítás és adatvédelem

1. Lustre mentési stratégiák

• Mentési tervezési szempontok
• Metaadat- és felhasználói adatok védelme
• Fénykép és replikáció fogalmak

2. Visszaállítási műveletek

• A Lustre szolgáltatások visszaállítása
• Hibákból való helyreállítás
• Adatintegritás ellenőrzése

XIII. A Lustre frissítése és karbantartása

1. Lustre frissítési tervezés

• A frissítési környezet előkészítése
• Kompatibilitási szempontok
• Frissítési eljárások

2. Rendszer karbantartása

• Hibajavítások alkalmazása
• A konfigurációs változások kezelése
• A leállási idő minimalizálása

XIV. A Lustre hibaelhárítása termelési környezetben

1. Hibaelhárítási módszer

• A Lustre naplók megértése
• Gyakori hiba-mintázatok azonosítása
• Diagnosztikai parancsok és eszközök

2. Gyakori Lustre problémák

• Hálózati kommunikációs hibák
• Metaadat teljesítmény problémák
• OST hibák
• Kliens csatlakozási problémák
• Teljesítményromlás

XV. Végső műhely és kurzus összefoglaló

1. A Lustre adminisztráció végponti gyakorlása

• Az architektúra tervezés áttekintése
• Lustre telepítése és konfigurálása
• A rendszer teljesítményének monitorozása
• Működtetési problémák hibaelhárítása

2. Összefoglaló és legjobb gyakorlatok

• Az alapvető adminisztrációs fogalmak
• Termelési telepítési ajánlások
• Teljesítményoptimalizálási ellenőrzőlista
• Kérdések és válaszok, tudás-áttekintés