DVC-pijplijnen voor hyperparametertuning uitvoeren

In deze oefening voer je de doelen voor hyperparametertuning en modeltraining uit die zijn gedefinieerd in de dvc.yaml-pijplijn. Het bestand dvc.yaml beschrijft de DVC-workflow die de jobs orkestreert en somt de opdrachten, afhankelijkheden en resultaten op.

Je gaat experimenteren met het onafhankelijk uitvoeren van deze pijplijnen en kijkt hoe ze samenwerken via het configuratiebestand met de beste parameters: rfc_best_params.json.

In je ontwerp is dit bestand bedoeld om handmatig te worden bewerkt voor trainingsjobs of, als alternatief, om te worden geproduceerd als output van een hyperparametertuning-job.

Het bestand dvc.yaml beschrijft de DVC-workflow die de hyperparametertuning orkestreert en vermeldt de opdrachten, afhankelijkheden en resultaten.

LET OP: Je werkt op de main-branch. Git en DVC zijn al voor je geïnitialiseerd.

Deze oefening maakt deel uit van de cursus

CI/CD voor Machine Learning

Interactieve oefening met praktijkervaring

Zet theorie om in actie met een van onze interactieve oefeningen

Deze oefening maakt deel uit van de cursus

CI/CD voor Machine Learning

SkillTag.level.advancedSkillTag.label

4.8+

Begin gratis met de cursus

In dit hoofdstuk verken je de essentiële principes van Continuous Integration/Continuous Delivery (CI/CD) en YAML. Je krijgt grip op de softwareontwikkelingslevenscyclus en kernbegrippen zoals build, test en deploy. Ontdek de verschillen tussen Continuous Integration, Continuous Delivery en Continuous Deployment. Daarnaast onderzoek je het belang van CI/CD voor Machine Learning en experimentatie.

Exercise 1: Introductie tot Continuous Integration/Continuous Delivery voor Machine Learning Exercise 2: Continuous deployment en delivery Exercise 3: Machine learning-workflow Exercise 4: Introductie tot YAML Exercise 5: YAML-syntaxis Exercise 6: YAML-mappings en -reeksen Exercise 7: Introductie tot GitHub Actions Exercise 8: Nut van GitHub Actions Exercise 9: Anatomie van GitHub Actions

Maak je klaar om GitHub Actions (GHA) te verkennen, een krachtig platform voor het uitvoeren van CI/CD-workflows. Ontdek de diverse componenten van GHA, waaronder events, actions, jobs, steps, runners en context. Krijg inzicht in het opstellen van workflows die worden geactiveerd door events zoals push en pull requests, en pas runner-machines aan. Ga hands-on aan de slag terwijl je fundamentele CI-pipelines opzet en de finesses van de GHA-log leert begrijpen.

Exercise 1: Gevorderde YAML Exercise 2: Vind de juiste combinatie Exercise 3: Ontwerp een Continuous Integration-workflow Exercise 4: Een basis-CI-pijplijn opzetten Exercise 5: Interpreteer GitHub Actions-workflow Exercise 6: Schrijf een GitHub Actions-workflow Exercise 7: Code uit de repository uitvoeren Exercise 8: Feature branches in het gedeelde-repositorymodel Exercise 9: Python-code uitvoeren in GitHub Actions Exercise 10: Omgevingsvariabelen en secrets Exercise 11: Wat is GITHUB_TOKEN?Exercise 12: Werken met omgevingsvariabelen Exercise 13: Werken met secrets

In dit hoofdstuk verken je het integreren van het trainen van Machine Learning-modellen in een GitHub Action-pipeline met behulp van Continuous Machine Learning GitHub Action. Je genereert een uitgebreid markdown-rapport met modelstatistieken en grafieken. Je duikt ook in dataversiebeheer in Machine Learning door Data Version Control (DVC) te gebruiken om wijzigingen in data te volgen. Het hoofdstuk behandelt ook het instellen van DVC-remotes en het overzetten van gegevenssets. Tot slot verken je DVC-pipelines en configureer je een DVC YAML-bestand om reproduceerbare modeltraining aan te sturen.

Exercise 1: Modellen trainen met GitHub Actions Exercise 2: Ontwikkel een classificatiemodel Exercise 3: Train een classificatiemodel Exercise 4: Modeltraining instellen met CML Exercise 5: Gegevenssets versiebeheer met Data Version Control Exercise 6: Waarom zijn .dvc-bestanden nodig?Exercise 7: Data-versioning in de praktijk Exercise 8: Werken met DVC-remotes Exercise 9: De voordelen van DVC-remotes verkennen Exercise 10: DVC-remotes in actie Exercise 11: DVC-pijplijnen Exercise 12: Een DVC-pijplijn maken Exercise 13: Train ML-modellen met DVC

In dit hoofdstuk richt je je op de analyse van modelprestaties en het fijn afstellen van hyperparameters. Je verwerft praktische expertise in het vergelijken van metrics en visualisaties over verschillende branches om veranderingen in modelprestaties te beoordelen. Je zult hyperparameter-tuning uitvoeren met GridSearchCV van scikit-learn. Verder duik je in het automatiseren van pull requests met de optimale modelconfiguratie.

Exercise 1: Metrieken en plots vergelijken in DVC Exercise 2: Metrics en plots toevoegen aan dvc.yaml Exercise 3: Metrics vergelijken tussen Git-branches Exercise 4: Voer DVC-pijplijn uit in GitHub Actions Exercise 5: Hyperparametertuning met DVC Exercise 6: Hyperparameter-tuning toevoegen aan dvc.yaml Exercise 7: DVC-pijplijnen voor hyperparametertuning uitvoeren

Huidige oefening

Exercise 8: GitHub Actions-workflow voor hyperparametertuning Exercise 9: Losse koppeling Exercise 10: Hyperparameter Tuning instellen in GitHub Actions Exercise 11: Gefeliciteerd!