Python 101, Difficile
Les fondamentaux : variables, types, structures de contrôle, fonctions, puis un mini modèle de langage.
Chargement d'un corpus textuel
Chargez, inspectez et comprenez la structure d'un corpus textuel stocké en CSV, la matière première de notre mini modèle de langage.
Tokenisation et fréquence des mots
Découpez le texte brut en jetons, comptez les fréquences de mots et construisez le vocabulaire de notre modèle de langage.
Tables de probabilité de bigrammes
Construisez et normalisez des tables de comptage de bigrammes qui associent chaque mot aux mots qui le suivent.
La fonction generate_text()
Utilisez random.choices pour échantillonner le mot suivant dans une table de bigrammes et générer des séquences de texte cohérentes.
Générateur de texte CLI et température
Assemblez toutes les pièces en un générateur de texte en ligne de commande et ajoutez un paramètre de température pour contrôler la créativité.