Modèles génératifs (decoder-only)

1

Leçon 1: Causal language modeling

1 heure et 30 minutes

2

Leçon 2: GPT-2 : le premier modèle génératif grand public

2 heures

3

Leçon 3: De GPT-2 à Llama et Mistral

2 heures

4

Leçon 4: Stratégies de décodage : greedy, beam, top-k, top-p, temperature

2 heures et 30 minutes

5

Leçon 5: Prompt engineering : few-shot et chain-of-thought

2 heures

6

Leçon 6: Ollama : LLMs en local

1 heure et 30 minutes

7

Leçon 7: TP : génération avec GPT-2 et comparaison des stratégies

2 heures et 30 minutes

8

Leçon 8: TP : fine-tuning GPT-2 sur corpus spécifique

3 heures

9

Leçon 9: Synthèse decoder et introduction à Hugging Face

3 heures