Определение
Модель мира предсказывает полезные аспекты изменений среды. DreamerV3 обучает поведение на воображаемых траекториях в латентной модели. MuZero сочетает модель для принятия решений с поиском по дереву.
Формула
Gₕ суммирует награды r за h шагов с коэффициентом дисконтирования γ. В примере γ = 1, сравниваются два детерминированных пути.
Допущения и обозначения
Gₕ суммирует награды r за h шагов с коэффициентом дисконтирования γ. В примере γ = 1, сравниваются два детерминированных пути.
Ограничения интерпретации
Прогнозы используются по-разному. Ошибки могут накапливаться; более далёкий взгляд не гарантирует лучший выбор. Этот пример не запускает указанные алгоритмы.
DreamerV3 обучает политику на воображаемых латентных траекториях. MuZero предсказывает награду, ценность и политику для поиска по дереву. Полное воссоздание мира не является их общей целью.