Пряме поширення в глибшій мережі

Тепер у вас є модель із 2 прихованими шарами. Значення для одного вхідного прикладу показані всередині вхідних вузлів. Ваги показані на ребрах/лініях. Який прогноз зробить ця модель для цього прикладу?

Припустімо, що функція активації в кожному вузлі — це тотожна функція. Тобто вихід кожного вузла дорівнює його входу. Тому значення нижнього вузла в першому прихованому шарі дорівнює -1, а не 0, як було б при використанні активації ReLU.