Lépjen kapcsolatba velünk
 Időtartalma 14 órák

Kurzusleírás

Bevezetés az erővel tanításba emberi visszajelzések alapján (RLHF)

  • Mi az RLHF, és miért fontos?
  • Összehasonlítás a felügyelt finomhangolási módszerekkel
  • RLHF alkalmazásai a modern AI rendszerekben

Jutalmi modellezés emberi visszajelzésekkel

  • Emberi visszajelzések gyűjtése és strukturálása
  • Jutalmi modellek építése és edzése
  • Jutalmi modellek hatékonyságának értékelése

Tréning Proximal Policy Optimization (PPO) használatával

  • A PPO algoritmusok áttekintése RLHF esetén
  • PPO implementálása jutalmi modellekkel
  • Modellek iteratív és biztonságos finomhangolása

Nyelvi modellek gyakorlati finomhangolása

  • Adathalmazok előkészítése RLHF workflowokhoz
  • Kis LLM finomhangolása kézzel RLHF használatával
  • Kihívások és enyhítési stratégiák

RLHF skálázása termelő rendszerekben

  • Infrastruktúra és számítási kapacitás szempontok
  • Mindbiztosítás és folyamatos visszajelzési ciklusok
  • Legjobb gyakorlatok a telepítés és karbantartás szempontjából

Etikai szempontok és torzítást enyhítési

  • Etyikai kockázatok kezelése emberi visszajelzéseknél
  • Torzítás észlelési és korrekciós stratégiák
  • Összhang és biztonságos kimenetek biztosítása

Esettanulmányok és valós példák

  • Esettanulmány: ChatGPT finomhangolása RLHF-fel
  • Egyéb sikeres RLHF telepítések
  • Tanulságok és ipari betekintések

Követelmények

  • A felügyelt és az erővel tanulás alapjainak megértése
  • Tapasztalat a modellek finomhangolásában és a neurális hálózat architektúráiban
  • Fájltság a Python programozással és a mélytanulási keretrendszerrel (pl. TensorFlow, PyTorch)

Célcsoport

  • Gépi tanulási mérnökök
  • AI kutatók

Résztvevők száma


Ár per résztvevő

Közelgő kurzusok

Rokon kategóriák