Triển khai ReLU
Rectified Linear Unit (ReLU) là một hàm kích hoạt được dùng rộng rãi trong deep learning, giúp giải quyết các thách thức như vấn đề gradient biến mất.
Trong bài tập này, bạn sẽ tự triển khai ReLU trong PyTorch, áp dụng nó cho cả giá trị dương và âm, và quan sát kết quả.
Gói torch.nn đã được nhập sẵn với bí danh nn.
Bài tập này là một phần của khóa học
Nhập môn Deep Learning với PyTorch
Bài tập tương tác thực hành trực tiếp
Hãy thử làm bài tập này bằng cách hoàn thành đoạn mã mẫu này.
# Create a ReLU function with PyTorch
relu_pytorch = ____