Invertera ett villkorligt Expectation

Det är viktigt att komma ihåg att villkorliga Expectations, precis som villkorlig sannolikhet, inte nödvändigtvis är lika med sina inversen. Ett Expectation för kolumn A villkorat på kolumn B kan lyckas, men dess invers kanske inte. Låt oss undersöka det i den här övningen.

Ett Batch kopplat till datamängden Shein Footwear har redan skapats och tilldelats variabeln batch. Great Expectations och pandas är tillgängliga som gx respektive pd.

Den här övningen är en del av kursen

Introduktion till datakvalitet med Great Expectations

Interaktiv övning med praktiskt arbete

Testa den här övningen genom att slutföra den här exempelkoden.

# Establish Conditional Expectation
expectation = gx.expectations.ExpectColumnValuesToBeInSet(
    column=____,
    value_set=____,
    condition_parser='pandas',
    row_condition='____.isnull()',
)

# Run Expectation
results = batch.____(____=____)

# Print success status
print(results.success)

Redigera och kör kod

Den här övningen är en del av kursen

Introduktion till datakvalitet med Great Expectations

SkillTag.level.intermediateSkillTag.label

4.8+

Starta kursen gratis

Förstå varför Great Expectations (GX) är ett så kraftfullt verktyg för att övervaka datakvalitet. Bekanta dig med grunderna i GX – bland annat hur du startar en session med en Data Context och hur du läser in en pandas-dataram med en Data Source, Data Asset och Batch Definition.

Exercise 1: Skapa en Data Context Exercise 2: Skapa din Data Context Exercise 3: En försmak av GX Exercise 4: Definitioner av nyckelbegrepp Exercise 5: Anslut till data Exercise 6: Begreppsgenomgång Exercise 7: Skapa en Data Source och ett Data Asset Exercise 8: Läs data i batchar Exercise 9: Skapa en Batch Definition och en Batch Exercise 10: Granska din Batch

Skapa och utvärdera grundläggande Expectations för form och schema. Validera dina Expectations antingen individuellt, som en del av en Expectation Suite med en Batch Definition, eller via en Validation Definition.

Exercise 1: Skapa Expectations Exercise 2: Skapa en Expectation för kolumnantal Exercise 3: Utvärdera valideringsresultat Exercise 4: Schemaförväntningar Exercise 5: Skapa en förväntning om kolumnnamn Exercise 6: Skapa en Expectation för kolumnintervall Exercise 7: Skapa en svit av Expectations Exercise 8: Skapa en Expectation Suite Exercise 9: Validera ditt Expectation Suite Exercise 10: Validera Expectation Suites Exercise 11: Skapa och kör en Validation Definition Exercise 12: Validation Definition vs. Batch Definition

Lär dig praktiska färdigheter för att hantera Expectations i verkliga och föränderliga miljöer. Driftsätt Validation Definitions med Checkpoints, uppdatera dina Expectation Suites och lär dig att lägga till, hämta, lista och ta bort viktiga GX-komponenter.

Exercise 1: Driftsätt Validation Definitions Exercise 2: Kunskapskontroll Exercise 3: Skapa ett Checkpoint Exercise 4: Uppdatera Expectation Suites Exercise 5: Kopiera en Expectation Exercise 6: Ta bort en Expectation Exercise 7: Uppdatera en Expectation Exercise 8: Hantera komponenter Exercise 9: Lägg till och lista komponenter Exercise 10: Hantera ett Checkpoint

Fördjupa dig i Expectations. Öva på att skapa grundläggande kolumn-Expectations, numeriska Expectations på rad- och aggregatnivå, Expectations för strängar och strängparsbarhet, med mera. Lär dig också att tillämpa Expectations på enbart vissa rader i en dataram.

Exercise 1: Grundläggande kolumnförväntningar Exercise 2: Skapa rad-nivå-förväntningar Exercise 3: Skapa aggregerade Expectations Exercise 4: Typspecifika Expectations Exercise 5: Skapa numeriska Expectations Exercise 6: Skapa string-Expectations Exercise 7: Villkorliga förväntningar Exercise 8: Skriv ett villkorligt Expectation Exercise 9: Invertera ett villkorligt Expectation

Aktuell övning

Exercise 10: Avslutning