Crear un flujo de trabajo de varios pasos: Evaluación del modelo

En este ejercicio, crearás el paso Evaluación del modelo de nuestro flujo de trabajo de varios pasos utilizado para gestionar parte del ciclo de vida de ML. Utilizarás el método run() del módulo Proyectos de MLflow y establecerás el punto de entrada en model_evaluation. A continuación, tomarás como parámetro el model_engineering_run_id que se generó como salida en el ejercicio anterior y se lo pasarás al comando.

El MLproject creado en el paso anterior está disponible en la Shell de IPython utilizando print(MLproject).

Se importa el módulo mlflow.

Este ejercicio forma parte del curso

Introducción a MLflow

Instrucciones de ejercicio

Asigna el método run() del módulo Proyectos de MLflow a model_evaluation.
Establece el argumento del punto de entrada en "model_evaluation".
Establece un parámetro llamado "run_id" con el valor model_engineering_run_id.

Ejercicio interactivo práctico

Pruebe este ejercicio completando este código de muestra.

# Set the MLflow Projects run method
model_evaluation = ____.____.____(
    uri="./",
    # Set the entry point to model_evaluation
    ____="____",
  	# Set the parameter run_id to the run_id output of previous step
    parameters={
        "____": ____,
    },
    env_manager="local"
)

print(model_evaluation.get_status())

Editar y ejecutar código

Este ejercicio forma parte del curso

Introducción a MLflow

AvanzadoNivel de habilidad

4.7+

Comienza el curso gratis

En este Capítulo, se te presentará MLflow y cómo pretende ayudarte con algunas dificultades del ciclo de vida del Aprendizaje Automático. Se te presentarán los cuatro conceptos principales que componen MLflow, centrándose principalmente en el Seguimiento de MLflow. Aprenderás a crear experimentos y ejecuciones, así como a realizar un seguimiento de las métricas, los parámetros y los artefactos. Por último, buscarás en MLflow mediante programación para encontrar ejecuciones de experimentos que se ajusten a determinados criterios.

Exercise 1: ¿Qué es MLflow?Exercise 2: Componentes de MLflow Exercise 3: Experimentos MLflow Exercise 4: Seguimiento MLflow Exercise 5: Iniciar una carrera Exercise 6: Registrar una ejecución Exercise 7: ¿Cómo recuperar los datos de ejecución activos?Exercise 8: Consulta de ejecuciones Exercise 9: Buscar ejecuta opciones de consulta Exercise 10: Recorridos de búsqueda

En este capítulo se te presentarán los Modelos MLflow. El componente MLflow Models de MLflow desempeña un papel esencial en los pasos de Evaluación de Modelos e Ingeniería de Modelos del ciclo de vida del Aprendizaje Automático. Aprenderás cómo los Modelos MLflow estandarizan el empaquetado de los modelos ML, así como a guardarlos, registrarlos y cargarlos. Aprenderás a crear Modelos MLflow personalizados para dar más flexibilidad a tus casos de uso, así como a evaluar el rendimiento de los modelos. Utilizarás el potente concepto de "Sabores" y, por último, utilizarás la herramienta de línea de comandos MLflow para el despliegue de modelos.

Exercise 1: Introducción a los modelos MLflow Exercise 2: Empaquetar un modelo de aprendizaje automático Exercise 3: Formato de almacenamiento Exercise 4: ¿Qué contiene un archivo MLmodel?Exercise 5: Modelo API Exercise 6: Guardar y cargar un modelo Exercise 7: Registrar y cargar un modelo Exercise 8: Modelos a medida Exercise 9: Crear una clase Python personalizada Exercise 10: Modelo scikit-learn personalizado Exercise 11: Sabor y evaluación de Scikit-learn Exercise 12: Modelo que sirve Exercise 13: Sirviendo a un modelo Exercise 14: Puntuación de un modelo servido

Este Capítulo introduce el concepto de MLflow denominado Registro de Modelos. Conocerás cómo se utiliza el Registro de Modelos para gestionar el ciclo de vida de los modelos de ML. Aprenderás a crear y buscar modelos en el Registro de Modelos. A continuación, aprenderás a registrar modelos en el Registro de Modelos y a realizar transiciones de modelos entre etapas predefinidas. Por último, también aprenderás a desplegar modelos desde el Registro de Modelos.

Exercise 1: Introducción al Registro de Modelos MLflow Exercise 2: Crear un modelo Exercise 3: Búsqueda de modelos Exercise 4: Registro de modelos Exercise 5: Registrar modelos existentes Exercise 6: Registrar nuevos modelos Exercise 7: Etapas del modelo Exercise 8: Etapas del modelo en el Registro de Modelos Exercise 9: Etapas del modelo de transición Exercise 10: Implementación de modelos Exercise 11: Servir modelos del Registro de Modelos Exercise 12: Cargar modelos desde el Registro de Modelos

En este capítulo, obtendrás valiosos conocimientos sobre cómo racionalizar tu código de ciencia de datos para que sea reutilizable y reproducible utilizando Proyectos MLflow. El capítulo comienza introduciendo el concepto de Proyectos MLflow y te guía a través de la creación de un archivo MLproject. A partir de ahí, aprenderás a ejecutar Proyectos MLflow tanto a través de la línea de comandos como del módulo Proyectos MLflow, a la vez que descubres el poder de utilizar parámetros para añadir flexibilidad a tu código. Por último, aprenderás a gestionar los pasos del ciclo de vida del aprendizaje automático creando un flujo de trabajo de varios pasos mediante Proyectos MLflow.

Exercise 1: Introducción a los proyectos MLflow Exercise 2: Disposición del archivo MLproject Exercise 3: Crear un proyecto ML Exercise 4: Ejecutar proyectos MLflow Exercise 5: Comando de ejecución MLflow Exercise 6: Módulo de proyectos MLflow Exercise 7: Especificación de parámetros Exercise 8: Añadir parámetros a MLproject Exercise 9: Añadir parámetros a la ejecución del proyecto Exercise 10: Flujos de trabajo Exercise 11: Crear un proyecto ML para el ciclo de vida ML: Ingeniería de modelos Exercise 12: Crear un proyecto ML para el ciclo de vida ML: Evaluación del modelo Exercise 13: Crear un flujo de trabajo de varios pasos: Ingeniería de modelos Exercise 14: Crear un flujo de trabajo de varios pasos: Evaluación del modelo

Ejercicio actual

Exercise 15: Resumen