Khám phá không gian trạng thái và hành động
Môi trường Cliff Walking mô phỏng một tác tử băng qua lưới ô từ điểm bắt đầu đến mục tiêu, đồng thời tránh rơi xuống vực. Nếu người chơi di chuyển vào vị trí vách đá, họ sẽ bị đưa về vị trí bắt đầu. Người chơi tiếp tục di chuyển cho đến khi chạm mục tiêu, khi đó tập sẽ kết thúc. Nhiệm vụ của bạn là khám phá không gian trạng thái và không gian hành động của môi trường này.
Bài tập này là một phần của khóa học
Reinforcement Learning với Gymnasium trong Python
Hướng dẫn bài tập
- Tạo một thể hiện môi trường cho Cliff Walking với ID môi trường
CliffWalking. - Tính kích thước không gian hành động và lưu vào
num_actions. - Tính kích thước không gian trạng thái và lưu vào
num_states.
Bài tập tương tác thực hành trực tiếp
Hãy thử làm bài tập này bằng cách hoàn thành đoạn mã mẫu này.
# Create the Cliff Walking environment
env = ____
# Compute the size of the action space
num_actions = ____
# Compute the size of the state space
num_states = ____
print("Number of actions:", num_actions)
print("Number of states:", num_states)