Kezdőlap
Mesterséges Intelligencia Képzés
NLP Képzés
Large Language Models (LLMs) Képzés
Parameter-Efficient Fine-Tuning (PEFT) Techniques for LLMs Képzés

Parameter-Efficient Fine-Tuning (PEFT) Techniques for LLMs Képzés

Parameter-Efficient Fine-Tuning (PEFT) is a collection of techniques that enable efficient adaptation of large language models (LLMs) by modifying only a small subset of parameters.

This instructor-led, live training (online or onsite) is aimed at intermediate-level data scientists and AI engineers who wish to fine-tune large language models more affordably and efficiently using methods like LoRA, Adapter Tuning, and Prefix Tuning.

By the end of this training, participants will be able to:

Understand the theory behind parameter-efficient fine-tuning approaches.
Implement LoRA, Adapter Tuning, and Prefix Tuning using Hugging Face PEFT.
Compare performance and cost trade-offs of PEFT methods vs. full fine-tuning.
Deploy and scale fine-tuned LLMs with reduced compute and storage requirements.

Format of the Course

Interactive lecture and discussion.
Lots of exercises and practice.
Hands-on implementation in a live-lab environment.

Course Customization Options

To request a customized training for this course, please contact us to arrange.

Köszönjük, hogy elküldte érdeklődését! Csapatunk egyik tagja hamarosan felveszi Önnel a kapcsolatot.

Köszönjük, hogy elküldte foglalását! Csapatunk egyik tagja hamarosan felveszi Önnel a kapcsolatot.

Kurzusleírás

Introduction to Parameter-Efficient Fine-Tuning (PEFT)

Motivation and limitations of full fine-tuning
Overview of PEFT: goals and benefits
Applications and use cases in industry

LoRA (Low-Rank Adaptation)

Concept and intuition behind LoRA
Implementing LoRA using Hugging Face and PyTorch
Hands-on: Fine-tuning a model with LoRA

Adapter Tuning

How adapter modules work
Integration with transformer-based models
Hands-on: Applying Adapter Tuning to a transformer model

Prefix Tuning

Using soft prompts for fine-tuning
Strengths and limitations compared to LoRA and adapters
Hands-on: Prefix Tuning on an LLM task

Evaluating and Comparing PEFT Methods

Metrics for evaluating performance and efficiency
Trade-offs in training speed, memory usage, and accuracy
Benchmarking experiments and result interpretation

Deploying Fine-Tuned Models

Saving and loading fine-tuned models
Deployment considerations for PEFT-based models
Integrating into applications and pipelines

Best Practices and Extensions

Combining PEFT with quantization and distillation
Use in low-resource and multilingual settings
Future directions and active research areas

Summary and Next Steps

Követelmények

An understanding of machine learning fundamentals
Experience working with large language models (LLMs)
Familiarity with Python and PyTorch

Audience

Data scientists
AI engineers

14 Órák

Résztvevők száma

Online

Tanterem

Válasszon helyszínt

Kérjük, válasszon helyszínt

Ár résztvevőnként

A nyílt képzésekhez 5+ résztvevő szükséges.

Parameter-Efficient Fine-Tuning (PEFT) Techniques for LLMs Képzés - Booking

Teljes név *

Email *

Telefon *

Munka neve

Cég neve

Cím 1 *

Város *

Állam / Megye

Ország *

Irányítószám *

Kezdési dátum

Adóazonosító jel

Dates are subject to availability and take place between 09:30 and 16:30.

Befizetés *

Banki átutalás (számla, PO)

Betéti/hitelkártya

Vélemények

Engedélyezze a tanúsítvány közzétételét

Ha bejelöli ezt a négyzetet, a résztvevők lehetőséget kapnak arra, hogy a NobleProg Certified Professional Catalogue-ban közzétegyék tanfolyami bizonyítványukat.

Általános szerződési feltételek *

A fent nevezett ügyfél meghatalmazott képviselője vagyok, és a fenti tanfolyamokat vagy szolgáltatásokat a NobleProg Általános Szerződési Feltételeinek és Adatvédelmi szabályzatának megfelelően kívánom lefoglalni.

Értesítsen kedvezményekről és akciókról

Please read our Privacy Policy to find out how we use your data

Parameter-Efficient Fine-Tuning (PEFT) Techniques for LLMs Képzés - Enquiry

Teljes név *

Email *

Telefon *

Résztvevők száma

Cég neve

Cég címe

Hogyan szeretnéd elvégezni a tanfolyamot?

Ügyfél helyiségei

Online.

Tanterem

Vélemények

Értesítsen kedvezményekről és akciókról

Please read our Privacy Policy to find out how we use your data

Parameter-Efficient Fine-Tuning (PEFT) Techniques for LLMs - Érdeklődjön a vezetői tanácsadásról!

Érdeklődjön a vezetői tanácsadásról!

Teljes név *

Telefon *

Email *

Cég neve

A konzultáció tárgya *

A konzultáció célja

A konzultáció időtartama

Tanácsadók száma

A megfelelő dátum

Ki lesz az ügyfél, akivel a tanácsadó dolgozik?

Advanced Techniques in Transfer Learning

14 Órák

Ez az oktató által vezetett, élő képzés a Magyarország-ban (online vagy helyszíni) haladó szintű gépi tanulási szakembereket céloz meg, akik szeretnék elsajátítani a legmodernebb transzfertanulási technikákat, és alkalmazni kívánják azokat a valós világ összetett problémáira.