ML-Modelle mit DVC trainieren

Die Reproduzierbarkeit deiner Experimente sicherzustellen und eine saubere Projektstruktur zu wahren, kann herausfordernd sein.

In dieser Übung führst du ein Szenario durch, in dem du ein Machine-Learning-Modell mit einem strukturierten Ansatz trainierst. Du nutzt DVC, um Datenversionierung und Reproduzierbarkeit in ML-Projekten zu managen. Deine Aufgabe ist es, die vorbereitete dvc.yaml-Datei zu vervollständigen. Sie enthält Anweisungen zur Datenvorverarbeitung und zum Training eines Modells, damit du deine Experimente zuverlässig reproduzieren und effektiv mit deinem Team zusammenarbeiten kannst.

HINWEIS: Verwende python3 statt python, um Python-Skripte auszuführen.

Diese Übung ist Teil des Kurses

<Kurs>CI/CD für Machine Learning</Kurs>

Kurs ansehen

Interaktive praktische Übung

Verwandle Theorie mit einer unserer interaktiven Übungen in die Praxis

Übung starten

Diese Übung ist Teil des Kurses

<Kurs>CI/CD für Machine Learning</Kurs>

Hohe SchwierigkeitSchwierigkeitsgrad

4.8+

372 reviews

Kurs kostenlos starten

In diesem Kapitel lernst du die wesentlichen Grundlagen von Continuous Integration/Continuous Delivery (CI/CD) und YAML kennen. Du verstehst den Software Development Life Cycle und zentrale Begriffe wie Build, Test und Deploy. Entdecke die Unterschiede zwischen Continuous Integration, Continuous Delivery und Continuous Deployment. Außerdem untersuchst du die Bedeutung von CI/CD im Machine Learning und bei Experimenten.

Exercise 1: Einführung in Continuous Integration/Continuous Delivery für Machine Learning Exercise 2: Continuous Deployment und Continuous Delivery Exercise 3: Machine-Learning-Workflow Exercise 4: Einführung in YAML Exercise 5: YAML-Syntax Exercise 6: YAML-Zuordnungen und -Sequenzen Exercise 7: Einführung in GitHub Actions Exercise 8: Nutzwert von GitHub Actions Exercise 9: Anatomie von GitHub Actions

Mach dich bereit für GitHub Actions (GHA), eine leistungsfähige Plattform zur Ausführung von CI/CD-Workflows. Entdecke die vielfältigen Komponenten von GHA, darunter Events, Actions, Jobs, Steps, Runner und Context. Gewinne Einblicke in das Erstellen von Workflows, die bei Events wie Push und Pull Requests ausgelöst werden, und passe Runner-Maschinen an. Starte mit praktischen Übungen, indem du grundlegende CI-Pipelines einrichtest und die Details des GHA-Logs verstehst.

Exercise 1: YAML für Fortgeschrittene Exercise 2: Finde die richtige Kombination Exercise 3: Entwirf einen Continuous-Integration-Workflow Exercise 4: Eine einfache CI-Pipeline einrichten Exercise 5: GitHub-Actions-Workflow interpretieren Exercise 6: Schreibe einen GitHub-Actions-Workflow Exercise 7: Repository-Code ausführen Exercise 8: Feature-Branches im Shared-Repository-Modell Exercise 9: Python-Code in GitHub Actions ausführen Exercise 10: Umgebungsvariablen und Secrets Exercise 11: Was ist GITHUB_TOKEN?Exercise 12: Arbeiten mit Umgebungsvariablen Exercise 13: Mit Secrets arbeiten

In diesem Kapitel integrierst du das Training von Machine-Learning-Modellen in eine GitHub-Action-Pipeline mithilfe der Continuous Machine Learning GitHub Action. Du erzeugst einen umfassenden Markdown-Report mit Modellmetriken und Plots. Außerdem tauchst du in Datenversionierung im Machine Learning ein, indem du Data Version Control (DVC) nutzt, um Datenänderungen zu verfolgen. Das Kapitel behandelt auch das Einrichten von DVC-Remotes und das Übertragen von Datensätzen. Abschließend lernst du DVC-Pipelines kennen und konfigurierst eine DVC-YAML-Datei, um reproduzierbares Modelltraining zu orchestrieren.

Exercise 1: Modelltraining mit GitHub Actions Exercise 2: Ein Klassifikationsmodell entwickeln Exercise 3: Trainiere ein Klassifikationsmodell Exercise 4: Modelltraining mit CML einrichten Exercise 5: Datensätze versionieren mit Data Version Control Exercise 6: Warum werden .dvc-Dateien benötigt?Exercise 7: Datenversionierung in der Praxis Exercise 8: Mit DVC-Remotes arbeiten Exercise 9: Die Vorteile von DVC-Remotes erkunden Exercise 10: DVC-Remotes in Aktion Exercise 11: DVC-Pipelines Exercise 12: Erstellen einer DVC-Pipeline Exercise 13: ML-Modelle mit DVC trainieren

Aktuelle Übung

In diesem Kapitel richtest du deinen Fokus auf die Analyse der Modellleistung und das Feintuning von Hyperparametern. Du erwirbst praktische Kenntnisse darin, Metriken und Visualisierungen über verschiedene Branches hinweg zu vergleichen, um Änderungen in der Modellleistung zu bewerten. Du führst Hyperparameter-Tuning mit GridSearchCV von scikit-learn durch. Außerdem befasst du dich mit der Automatisierung von Pull Requests mithilfe der optimalen Modellkonfiguration.

Exercise 1: Metriken und Plots in DVC vergleichen Exercise 2: Metriken und Plots zu dvc.yaml hinzufügen Exercise 3: Metriken über Git-Branches hinweg vergleichen Exercise 4: DVC-Pipeline in GitHub Actions ausführen Exercise 5: Hyperparameter-Tuning mit DVC Exercise 6: Hyperparameter-Tuning zu dvc.yaml hinzufügen Exercise 7: DVC-Pipelines für Hyperparameter-Tuning ausführen Exercise 8: GitHub Actions-Workflow für Hyperparameter-Tuning Exercise 9: Lose Kopplung Exercise 10: Hyperparameter-Tuning in GitHub Actions einrichten Exercise 11: Glückwunsch!