返回Glossary
状态空间
状态空间是机器人及其环境可以处于的完整配置集合。在强化学习中，马尔可夫状态s编码预测未来奖励和状态转移所需的所有信息——理想情况下是对世界的完整描述。实际上，智能体只能访问部分观测（图像、关节角度），这些观测可能无法完全捕捉状态（例如被遮挡的物体、未知的物理参数）。设计一个能很好地近似马尔可夫状态同时保持计算可行性的观测空间是机器人学习系统设计中的关键挑战。 在实践中看到这一点：我们的真实世界评估 →
状态空间是机器人及其环境可以处于的完整配置集合。在强化学习中，马尔可夫状态s编码预测未来奖励和状态转移所需的所有信息——理想情况下是对世界的完整描述。实际上，智能体只能访问部分观测（图像、关节角度），这些观测可能无法完全捕捉状态（例如被遮挡的物体、未知的物理参数）。设计一个能很好地近似马尔可夫状态同时保持计算可行性的观测空间是机器人学习系统设计中的关键挑战。 在实践中看到这一点：我们的真实世界评估 →