mdp

本文针对具有固定转移的有限时域对抗性MDP引入了法扇几何，提出了一种面穿越价格，用以区分有后果的和无害的非平稳性。研究表明，动态遗憾可分解为内在的定价面运动加上面内选择误差。

本文将基础模型体的模拟-现实差距形式化为马尔可夫决策过程问题，提出了统一的研究议程，以适应如领域随机化等经典解决方案，从而提升智能体在真实部署中的鲁棒性和可靠性。

本文重新审视了强化学习中用于零样本任务组合的布尔任务代数（BTA），证明了在确定性MDP中，所有最优扩展Q函数可归结为两个分量（全局任务和空任务），使得原始BTA中提出的对数基任务集变得多余。作者引入了一种基于目标集的组合方法，在保持策略性能的同时降低了学习成本和组合时间，并在多个实验域中验证了其有效性。