探索状态空间与动作空间
Cliff Walking 环境中,智能体需要在网格世界中从起点移动到目标点,同时避免掉下"悬崖"。一旦移动到悬崖位置,就会被送回起点。玩家持续移动,直到到达目标,回合随之结束。您的任务是探索该环境的状态空间与动作空间。

本练习是课程的一部分
Python 中的 Gymnasium 强化学习
练习说明
- 使用环境 ID
CliffWalking创建一个 Cliff Walking 环境实例。 - 计算动作空间的大小,并存入
num_actions。 - 计算状态空间的大小,并存入
num_states。
交互式实操练习
通过完成这段示例代码来试试这个练习。
# Create the Cliff Walking environment
env = ____
# Compute the size of the action space
num_actions = ____
# Compute the size of the state space
num_states = ____
print("Number of actions:", num_actions)
print("Number of states:", num_states)