Implementarea ReLU
Rectified Linear Unit (ReLU) este o funcție de activare folosită pe scară largă în învățarea profundă, rezolvând probleme precum dispariția gradienților.
În acest exercițiu, vei implementa ReLU în PyTorch, o vei aplica atât valorilor pozitive, cât și celor negative și vei observa rezultatele.
Pachetul torch.nn a fost deja importat pentru tine ca nn.
Acest exercițiu face parte din cursul
Introducere în Deep Learning cu PyTorch
Exercițiu interactiv practic
Încearcă acest exercițiu completând acest cod de exemplu.
# Create a ReLU function with PyTorch
relu_pytorch = ____