Cursusaanbod

Inleiding tot Parameter-Efficient Fine-Tuning (PEFT)

  • Motivatie en beperkingen van volledige fine-tuning
  • Overzicht van PEFT: doelen en voordelen
  • Toepassingen en gebruiksscenario's in de industrie

LoRA (Low-Rank Adaptation)

  • Concept en intuïtie achter LoRA
  • LoRA implementeren met behulp van Hugging Face en PyTorch
  • Praktijk: een model fijnstimmen met LoRA

Adapter Tuning

  • Hoe adaptermodules werken
  • Integratie met transformergebaseerde modellen
  • Praktijk: Adapter Tuning toepassen op een transformer-model

Prefix Tuning

  • Gebruik van zachte prompts voor fine-tuning
  • Voordelen en beperkingen vergeleken met LoRA en adapters
  • Praktijk: Prefix Tuning op een LLM-taak

PEFT-Methoden evalueren en vergelijken

  • Metriken voor het evalueren van prestaties en efficiëntie
  • Afwegingen in trainingsnelheid, geheugengebruik en nauwkeurigheid
  • Benchmarkexperimenten en interpretatie van resultaten

Fine-tuned modellen implementeren

  • Opslaan en laden van fine-tuned modellen
  • Implementatieoverwegingen voor PEFT-gebaseerde modellen
  • Integreer in applicaties en pipelines

Beste praktijken en extensies

  • PEFT combineren met kwantisering en destillatie
  • Gebruik in laag-resourcen en meertalige omgevingen
  • Toekomstige richtingen en actieve onderzoeksterreinen

Samenvatting en volgende stappen

Vereisten

  • Begrip van de basisprincipes van machine learning
  • Ervaring met werken aan grote taalmodellen (LLMs)
  • Kennis van Python en PyTorch

Publiek

  • Datawetenschappers
  • AI-ingenieurs
 14 Uren

Leveringsopties

PRIVÉGROEPSTRAINING

Onze identiteit draait om het leveren van precies wat onze klanten nodig hebben.

  • Pre-cursusgesprek met uw trainer
  • Aanpassing van de leerervaring om uw doelen te bereiken -
    • Op maat gemaakte overzichten
    • Praktische, praktische oefeningen met gegevens / scenario's die herkenbaar zijn voor de cursisten
  • Training gepland op een datum naar keuze
  • Gegeven online, op locatie/klaslokaal of hybride door experts die ervaring uit de echte wereld delen

Private Group Prices RRP from €4560 online delivery, based on a group of 2 delegates, €1440 per additional delegate (excludes any certification / exam costs). We recommend a maximum group size of 12 for most learning events.

Neem contact met ons op voor een exacte offerte en om onze laatste promoties te horen


OPENBARE TRAINING

Kijk op onze public courses

Voorlopige Aankomende Cursussen

Gerelateerde categorieën