Výpočet entropie kořenového uzlu
Toto cvičení navazuje na příklad nesplácení půjčky z přednášek. Obrázek ukazuje kořenový uzel rozhodovacího stromu rozděleného podle barvy. V následujících třech cvičeních vypočítáš entropii kořenového uzlu, entropii dceřiných uzlů a určíš informační zisk, který barva poskytuje při predikci stavu nesplácení půjčky.
Tvým úkolem v tomto cvičení je vypočítat entropii kořenového uzlu tohoto rozhodovacího stromu.
Toto cvičení je součástí kurzu
Redukce dimenzionality v R
Pokyny k cvičení
- Vypočítej pravděpodobnosti tříd „ano" a „ne" v kořenovém uzlu pro nesplácení půjčky.
- Pomocí těchto pravděpodobností vypočítej entropii kořenového uzlu.
Interaktivní cvičení na vyzkoušení si v praxi
Vyzkoušejte si toto cvičení dokončením tohoto ukázkového kódu.
# Calculate the class probabilities
p_yes <- ___
p_no <- ___
# Calculate the entropy
entropy_root <- -(___ * log2(p_yes)) +
-(___ * ___(___))
entropy_root