Som du såg i videon anpassar glmnet-modellen faktiskt många modeller samtidigt – vilket är en av paketets stora fördelar. Du kan utnyttja det genom att skicka in ett stort antal lambda-värden, som styr graden av penalisering i modellen. train() är smart nog att bara anpassa en modell per alpha-värde och skickar sedan alla lambda-värden på en gång för simultan anpassning.

Mitt favoritrutnät för glmnet-modeller är:

expand.grid(
  alpha = 0:1,
  lambda = seq(0.0001, 1, length = 100)
)

Det här rutnätet utforskar ett stort antal lambda-värden (100 stycken) från ett mycket litet till ett mycket stort. (Du skulle kunna öka det maximala lambda-värdet till 10, men i den här övningen är 1 en rimlig övre gräns.)

Om du vill utforska färre modeller kan du använda en kortare lambda-sekvens. Till exempel skulle lambda = seq(0.0001, 1, length = 10) anpassa 10 modeller per alpha-värde.

Med det här tuneGrid tittar du också på de två formerna av penaliserade modeller: ridge-regression och lasso-regression. alpha = 0 ger ren ridge-regression och alpha = 1 ger ren lasso-regression. Du kan anpassa en blandning av de två modellerna – det vill säga ett elastiskt nät – med ett alpha-värde mellan 0 och 1. Till exempel skulle alpha = 0.05 motsvara 95 % ridge-regression och 5 % lasso-regression.

I den här övningen utforskar du bara de två ytterligheterna – ren ridge- och ren lasso-regression – för att illustrera skillnaderna mellan dem.

Random forests vs. linjära modeller

Maskininlärning med caret i R

Interaktiv övning med praktiskt arbete