Préparation NVIDIA Generative AI LLMs
Date de mise à jour :
Identifiant Offre Info : 04_26113566F
Organisme responsable :
Edulink
(ouvre dans un nouvel onglet)
Présentation de la formation
Objectifs
- Comprendre les architectures de modèles de langage (Transformers, attention)
- Entraîner et fine-tuner des LLM
- Déployer des modèles génératifs en production
- Se préparer à la certification NVIDIA Generative AI LLMs
Programme de la formation
Architectures LLM et TransformersArchitecture Transformer : attention, encodeurs, décodeurs Modèles de langage : GPT, LLaMA, Gemma, Mistral Tokenisation : BPE, SentencePiece, vocabulaire Pré-entraînement : objectifs, datasets, calcul distribué Scaling laws et émergence des capacités Fine-tuning et alignement Fine-tuning supervisé (SFT) : données, hyperparamètres, évaluation Techniques efficientes : LoRA, QLoRA, adapters RLHF et alignement des modèles NVIDIA NeMo Framework : pipelines…
- Architecture Transformer : attention, encodeurs, décodeurs
- Modèles de langage : GPT, LLaMA, Gemma, Mistral
- Tokenisation : BPE, SentencePiece, vocabulaire
- Pré-entraînement : objectifs, datasets, calcul distribué
- Scaling laws et émergence des capacités
Fine-tuning et alignement
- Fine-tuning supervisé (SFT) : données, hyperparamètres, évaluation
- Techniques efficientes : LoRA, QLoRA, adapters
- RLHF et alignement des modèles
- NVIDIA NeMo Framework : pipelines d'entraînement
- Évaluation des LLM : benchmarks, red teaming, métriques
Déploiement, inférence et certification
- Optimisation d'inférence : quantification, TensorRT-LLM, vLLM
- Déploiement : NVIDIA Triton Inference Server
- RAG et intégration dans des applications
- Monitoring et observabilité des modèles en production
- Examen blanc + préparation à la certification NVIDIA
Validation et sanction
La formation vous prépare au passage de cette certification reconnue et à la maîtrise de ses domaines clés.
Type de formation
Non certifiante
Niveau de sortie
Sans niveau spécifique
Durée, rythme, financement
Durée
En centre
18 h
Financement
- Conventionnement
- Oui
- Financeurs
-
- Autre
- Bénéficiaire de l'action
- Entreprise
- OPCO
Conditions d'accès
Publics visés
- Salarié
- Tout public
Informations sur les publics
niveau intermédiaire
Niveau d'entrée
CAP, BEP
Conditions spécifiques et prérequis
-
Lieu de réalisation de l'action
Modalités d'enseignement
Formation entièrement à distance
Adresse
Périodes prévisibles de déroulement des sessions
Début
Fin
- Adresse d'inscription
-
120 Boulevard Amiral Mouchez
76600 Le Havre - État du recrutement
- Ouvert
- Modalités
- Entrées / Sorties à dates permanentes