Fallstudie: modellövervakning

I den här avslutande övningen får du ta dig an ett komplext scenario som berör flera aspekter av det här avsnittet om modellövervakning. Din uppgift är att analysera situationen, identifiera rätt åtgärder och ordna dem i rätt följd för att visa att du förstår de koncept som introducerats.

Läs det givna scenariot och sortera följande steg i rätt ordning. Övningen är utformad för att testa din förmåga att analysera en komplex, verklighetsnära situation och tillämpa de kunskaper du har tillägnat dig under kapitlet.

Scenario: Du arbetar som maskininlärningsingenjör på ett hälsoteknikföretag. Ditt team har nyligen driftsatt en proof-of-concept-modell för binär klassificering av hjärtsjukdomar i er produktionsmiljö och gör den tillgänglig för slutanvändare. Efter några veckor märker du vissa inkonsekvenser i prediktionerna och systemets prestanda verkar ha försämrats – några användare har också rapporterat felaktiga resultat för nyligen insamlad data. Du ombeds övervaka modellen och säkerställa att den fortsätter att ge korrekta och relevanta rekommendationer.