Ajustando o penalty

Convencido de que Lasso é uma abordagem adequada para reduzir o número de features do seu modelo mantendo um desempenho aceitável, você quer ajustar o modelo escolhendo o melhor valor de penalty. Uma recipe básica, junto com as divisões de train e test, já está carregada no seu ambiente.

Este exercício faz parte do curso

Feature Engineering em R

Instruções do exercício

Configure seu modelo para que o penalty seja ajustado automaticamente.
Defina uma grade de penalty com 30 níveis.

Exercício interativo prático

Experimente este exercício completando este código de exemplo.

# Set up your model so that the penalty is tuned automatically
model_lasso_tuned <- logistic_reg() %>% set_engine("glmnet") %>%
  set_args(mixture = 1, ___ = ___) 
workflow_lasso_tuned <- workflow() %>%
  add_model(model_lasso_tuned) %>%
  add_recipe(recipe)

# Configure a penalty grid with 30 levels
penalty_grid <- grid_regular(penalty(range = c(-3, 1)), ___ = ___)

tune_output <- tune_grid(workflow_lasso_tuned,
  resamples = vfold_cv(train, v = 5),
  metrics = metric_set(roc_auc),grid = penalty_grid)

autoplot(tune_output)

Editar e executar o código

Este exercício faz parte do curso

Feature Engineering em R

IntermediárioNível de habilidade

4.8+

Iniciar curso de graça

Os dados brutos nem sempre vêm na melhor forma para análise. Neste capítulo de abertura, você vai dar uma primeira olhada em como transformar e criar features que aumentam o desempenho e a interpretabilidade do seu modelo.

Exercise 1: O que é feature engineering?Exercise 2: Um modelo preliminar Exercise 3: Engenharia manual de uma feature Exercise 4: Criando novos atributos usando conhecimento de domínio Exercise 5: Preparando seus dados para análise Exercise 6: Construindo um workflow Exercise 7: Aumentando o conteúdo de informação dos dados brutos Exercise 8: Identificando valores ausentes Exercise 9: Imputação de valores ausentes e criação de variáveis dummies Exercise 10: Ajustando e avaliando o modelo Exercise 11: Prevendo reservas de hotel

Neste capítulo, você vai aprender que, além de transformar features manualmente, pode aproveitar ferramentas do tidyverse para criar novas variáveis de forma programática. Você vai explorar como essa abordagem melhora a reprodutibilidade dos seus modelos e é especialmente útil ao lidar com conjuntos de dados com muitas features.

Exercise 1: Por que transformar recursos existentes?Exercise 2: Dando uma olhada nos seus dados Exercise 3: Normalizando e aplicando log Exercise 4: Ajustar e aumentar Exercise 5: Personalize a avaliação do seu modelo Exercise 6: Transformações comuns de features Exercise 7: Transformações comuns Exercise 8: Receita simples Exercise 9: Transformação de Box-Cox Exercise 10: Transformação de Yeo-Johnson Exercise 11: Transformações avançadas Exercise 12: Linha de base Exercise 13: step_poly()Exercise 14: step_percentile()Exercise 15: Quem vai ficar?

Agora você vai aprender como os modelos frequentemente se beneficiam da redução de dimensionalidade e da extração de features de dados de alta dimensão, incluindo converter dados de texto em valores numéricos, codificar dados categóricos e ranquear o poder preditivo das variáveis. Você vai explorar métodos como análise de componentes principais, kernel principal component analysis, extração numérica de texto, codificações categóricas e escores de importância de variáveis.

Exercise 1: Reduzindo a dimensionalidade Exercise 2: Preparando o terreno Exercise 3: Explorando a estrutura Exercise 4: Porcentagem de variância explicada Exercise 5: Visualizando a variância explicada Exercise 6: Feature hashing Exercise 7: Investigando a área de formação Exercise 8: Para dentro da matriz Exercise 9: Explorando o hashing Exercise 10: Visualizando o hashing Exercise 11: Codificando dados categóricos usando aprendizado supervisionado Exercise 12: Configurando seu workflow Exercise 13: Ajustar, aumentar e avaliar Exercise 14: Unindo modelos Exercise 15: Importância das variáveis Exercise 16: Criar um workflow Exercise 17: Ajustar e ampliar Exercise 18: Qual é o principal preditor?

Você vai encerrar o curso aprendendo sobre técnicas de feature engineering e Machine Learning. Primeiro, o foco será nos problemas de usar todas as features disponíveis em um modelo e na importância de identificar features irrelevantes e redundantes e aprender a removê-las usando métodos embutidos como lasso e elastic-net. Em seguida, você vai explorar métodos de shrinkage como lasso, ridge e elastic-net, que podem ser usados para regularizar pesos das features ou selecionar features ao zerar coeficientes. Por fim, você vai finalizar criando um fluxo de trabalho de feature engineering de ponta a ponta e revisando e praticando os conceitos e funções aprendidos em um pequeno projeto.

Exercise 1: Reduzindo as features do modelo Exercise 2: Garimpando a importância das variáveis Exercise 3: Avaliando o desempenho do modelo usando todos os preditores disponíveis Exercise 4: Construindo um modelo reduzido Exercise 5: Métodos de shrinkage Exercise 6: Regularização manual com Lasso Exercise 7: Ajustando o penalty

Exercício atual

Exercise 8: Finalizando o modelo Exercise 9: Juntando tudo Exercise 10: Preparar e dividir Exercise 11: Pré-processar Exercise 12: Modelo Exercise 13: Avaliar Exercise 14: Parabéns!