Deep Learning et Intelligence Artificielle

Plan du cours

Introduction au machine learning

• classification vs régression
• calcul de sqrt(2), erreur, fonction de cout
• régression linéaire et régression logistique
• stochastic gradient descent
• biais et overfitting

---

Le perceptron

• le perceptron (1957)
• fonctions d'activation
• perceptron multicouche
• backpropagation
• exploding et vanishing gradients
• réseaux de neurones feedforward
• regularization et dropout
• Keras, Tensorflow, Pytorch

---

Réseaux de neurones à convolution

• convolution
• pooling
• normalization

---

Transfer Learning

Réutilisation de modèles pré-entraînés pour améliorer l'apprentissage sur de nouvelles tâches

---

Réseaux de neurones récurrents

• RNN
• LSTM
• GRU

---

Attention and Transformers

• notebook : Generer du text avec un LSTM
• Transformers & attention mechanism
• L'IA aujourd'hui
• TP Ollama

---

TP Rag ou Bot telegram

• Introduction au RAG
• la video NotebookLM
• TP RAG
• Construire un corpus Wiki
• le script python pour construire un corpus a partir d'un wiki : wiki_downloader.py

Vous pouvez aussi construire un bot telegram de recherche de stage

• Bot telegram

Formulaire de soumission du TP : https://forms.gle/Lx9E1QATVjZ2QdZv9