Aller au contenuExpérimenter
Prédire pour choisir une action
Explorer l’effet d’un horizon plus long et le risque d’un modèle inexact.
L’essentiel
Comment cela fonctionne
Un modèle du monde prédit des aspects utiles de l’évolution d’un environnement. DreamerV3 apprend des comportements sur des trajectoires imaginées dans un modèle latent. MuZero associe un modèle appris utile à la décision à une recherche arborescente.
À retenir
Ces systèmes n’utilisent pas leurs prédictions de la même manière. Des erreurs de modèle peuvent s’accumuler ; regarder plus loin n’est pas une garantie de meilleure décision. Le jouet ci-dessous n’exécute aucun de ces algorithmes.
Sources scientifiques
- Hafner et al. · 2023Mastering Diverse Domains through World ModelsDreamerV3 · arXiv v2 · 2024Publication originale
- Schrittwieser et al. · 2019Mastering Atari, Go, Chess and Shogi by Planning with a Learned ModelarXiv v2 · 2020Publication originale
Synthèse pédagogique des sources citées. Les résultats des publications restent liés à leurs tâches, protocoles et budgets.