Runs durchsuchen

In dieser Übung fragst du Experiment-Runs aus mehreren Unicorn-Experimenten ab und gibst nur Runs zurück, die ein bestimmtes Kriterium erfüllen. Das ist im ML-Lifecycle hilfreich, wenn du Run-Daten vergleichen musst.

Zuerst erstellst du einen Filter-String, um Runs mit einer R-squared-Metrik größer als .70 zu erfassen. Mit der Funktion aus dem mlflow-Modul, die Runs durchsucht, sortierst du sie anschließend absteigend und suchst nur in den Experimenten "Unicorn Sklearn Experiments" und "Unicorn Other Experiments".

Die Experimente wurden in MLflow bereits zusammen mit den R-squared-Metriken erstellt. Das MLflow-Modul wird importiert.

Diese Übung ist Teil des Kurses

Einführung in MLflow

Anleitung zur Übung

Erstelle für die Variable r_squared_filter einen Filter-String, um "r2_score"-Metriken mit "> .70" zu erfassen.
Durchsuche Runs für die Experimente "Unicorn Sklearn Experiments" und "Unicorn Other Experiments".
Sortiere die Ergebnisse nach R-squared in absteigender Reihenfolge.

Interaktive Übung

Vervollständige den Beispielcode, um diese Übung erfolgreich abzuschließen.

# Create a filter string for R-squared score
r_squared_filter = "____.____ > .70"

# Search runs
mlflow.____(experiment_names=["____", "____"], 
                   filter_string=____, 
                   order_by=["____.____ ____"])

Code bearbeiten und ausführen

Diese Übung ist Teil des Kurses

Einführung in MLflow

Hohe SchwierigkeitSchwierigkeitsgrad

4.8+

Kurs kostenlos starten

In diesem Kapitel lernst du MLflow kennen und wie es bei typischen Herausforderungen im Machine-Learning-Lebenszyklus hilft. Du machst dich mit den vier Hauptkonzepten von MLflow vertraut, mit besonderem Fokus auf MLflow Tracking. Du lernst, Experimente und Runs zu erstellen sowie Metriken, Parameter und Artefakte zu tracken. Abschließend durchsuchst du MLflow programmatisch, um Experiment-Runs zu finden, die bestimmten Kriterien entsprechen.

Exercise 1: Was ist MLflow?Exercise 2: Komponenten von MLflow Exercise 3: MLflow-Experimente Exercise 4: MLflow Tracking Exercise 5: Einen Run starten Exercise 6: Einen Run protokollieren Exercise 7: Wie rufst du Daten des aktiven Runs ab?Exercise 8: Runs abfragen Exercise 9: Abfrageoptionen für Runs suchen Exercise 10: Runs durchsuchen

Aktuelle Übung

In diesem Kapitel lernst du MLflow-Modelle kennen. Die MLflow-Modelle-Komponente spielt eine zentrale Rolle in den Schritten Model Evaluation und Model Engineering des Machine-Learning-Lebenszyklus. Du erfährst, wie MLflow-Modelle die Verpackung von ML-Modellen standardisieren und wie du sie speicherst, protokollierst und lädst. Du lernst, eigene MLflow-Modelle zu erstellen, um deinen Use Cases mehr Flexibilität zu geben, und wie du die Modellleistung evaluierst. Du nutzt das leistungsfähige Konzept der „Flavors“ und setzt schließlich das MLflow-Kommandozeilen-Tool für das Model-Deployment ein.

Exercise 1: Einführung in MLflow-Modelle Exercise 2: Ein Machine-Learning-Modell paketieren Exercise 3: Speicherformat Exercise 4: Was steht in einer MLmodel-Datei?Exercise 5: Model-API Exercise 6: Ein Modell speichern und laden Exercise 7: Ein Modell protokollieren und laden Exercise 8: Eigene Modelle Exercise 9: Erstellen einer benutzerdefinierten Python-Klasse Exercise 10: Benutzerdefiniertes scikit-learn-Modell Exercise 11: Scikit-learn-Flavor und Evaluation Exercise 12: Modellbereitstellung Exercise 13: Ein Modell serven Exercise 14: Score von einem bereitgestellten Modell abrufen

Dieses Kapitel führt das MLflow-Konzept der Model Registry ein. Du lernst, wie die Model Registry genutzt wird, um den Lebenszyklus von ML-Modellen zu verwalten. Du erfährst, wie du Modelle in der Model Registry erstellst und suchst. Anschließend lernst du, Modelle in der Model Registry zu registrieren und sie zwischen vordefinierten Stufen zu wechseln. Zum Schluss erfährst du auch, wie du Modelle aus der Model Registry bereitstellst.

Exercise 1: Einführung in das MLflow Model Registry Exercise 2: Ein Modell erstellen Exercise 3: Modelle durchsuchen Exercise 4: Modelle registrieren Exercise 5: Vorhandene Modelle registrieren Exercise 6: Neue Modelle registrieren Exercise 7: Modellstufen Exercise 8: Modellstufen in der Model Registry Exercise 9: Modelstufen wechseln Exercise 10: Modellbereitstellung Exercise 11: Modelle aus der Model Registry bereitstellen Exercise 12: Modelle aus dem Model Registry laden

In diesem Kapitel lernst du, wie du deinen Data-Science-Code mit MLflow-Projekten für Wiederverwendbarkeit und Reproduzierbarkeit schlanker gestaltest. Zunächst wird das Konzept der MLflow-Projekte vorgestellt und du erstellst eine MLproject-Datei. Danach lernst du, MLflow-Projekte sowohl über die Kommandozeile als auch über das MLflow-Projects-Modul auszuführen und entdeckst, wie Parameter zusätzliche Flexibilität in deinem Code ermöglichen. Abschließend erfährst du, wie du Schritte des Machine-Learning-Lebenszyklus verwaltest, indem du mit MLflow-Projekten einen mehrstufigen Workflow erstellst.

Exercise 1: Einführung in MLflow Projects Exercise 2: Aufbau einer MLproject-Datei Exercise 3: Ein MLproject erstellen Exercise 4: MLflow Projects ausführen Exercise 5: MLflow run command Exercise 6: Modul „MLflow projects“Exercise 7: Parameter angeben Exercise 8: Parameter zum MLproject hinzufügen Exercise 9: Parameter zum Projektdurchlauf hinzufügen Exercise 10: Workflows Exercise 11: Ein MLproject für den ML-Lebenszyklus erstellen: Model Engineering Exercise 12: Ein MLproject für den ML-Lebenszyklus erstellen: Modellauswertung Exercise 13: Einen mehrstufigen Workflow erstellen: Model Engineering Exercise 14: Einen mehrstufigen Workflow erstellen: Modellauswertung Exercise 15: Zusammenfassung