Odwróć warunkowe Oczekiwanie

Warto pamiętać, że podobnie jak w przypadku prawdopodobieństwa warunkowego, warunkowe Oczekiwania niekoniecznie są równoważne swoim odwróceniom. Oczekiwanie dotyczące kolumny A uwarunkowane kolumną B może zakończyć się sukcesem, ale jego odwrócenie już niekoniecznie. Przekonajmy się o tym w tym ćwiczeniu.

Partia (Batch) połączona ze zbiorem danych Shein Footwear została już utworzona i przypisana do zmiennej batch. Great Expectations i pandas są dostępne odpowiednio jako gx i pd.

To ćwiczenie jest częścią kursu

Wprowadzenie do jakości danych z Great Expectations

Interaktywne ćwiczenie praktyczne

Spróbuj tego ćwiczenia, uzupełniając ten przykładowy kod.

# Establish Conditional Expectation
expectation = gx.expectations.ExpectColumnValuesToBeInSet(
    column=____,
    value_set=____,
    condition_parser='pandas',
    row_condition='____.isnull()',
)

# Run Expectation
results = batch.____(____=____)

# Print success status
print(results.success)

Edytuj i uruchom kod

To ćwiczenie jest częścią kursu

Wprowadzenie do jakości danych z Great Expectations

SkillTag.level.intermediateSkillTag.label

4.8+

Rozpocznij kurs za darmo

Dowiedz się, dlaczego Great Expectations (GX) to tak skuteczne narzędzie do monitorowania jakości danych. Poznaj podstawy GX – w tym jak rozpocząć sesję za pomocą Data Context oraz jak wczytać ramkę danych pandas przy użyciu Data Source, Data Asset i Batch Definition.

Exercise 1: Tworzenie Data Context Exercise 2: Utwórz Data Context Exercise 3: Zajrzyjmy w głąb GX Exercise 4: Definicje kluczowych pojęć Exercise 5: Połącz się z danymi Exercise 6: Powtórzenie pojęć Exercise 7: Tworzenie Data Source i Data Asset Exercise 8: Odczyt danych w partiach Exercise 9: Utwórz definicję partii i partię Exercise 10: Sprawdź swój Batch

Twórz i oceniaj podstawowe Expectations dotyczące kształtu i schematu danych. Waliduj Expectations pojedynczo, jako część Expectation Suite z Batch Definition lub przy użyciu Validation Definition.

Exercise 1: Tworzenie Expectations Exercise 2: Utwórz Expectation dla liczby kolumn Exercise 3: Ocena wyników walidacji Exercise 4: Oczekiwania dotyczące schematu Exercise 5: Tworzenie oczekiwania dotyczącego nazwy kolumny Exercise 6: Tworzenie Expectation dla zakresu kolumn Exercise 7: Tworzenie zestawu Expectations Exercise 8: Tworzenie zestawu oczekiwań (Expectation Suite)Exercise 9: Walidacja zestawu Expectations Exercise 10: Walidacja zestawów oczekiwań Exercise 11: Tworzenie i uruchamianie Validation Definition Exercise 12: Validation Definition a Batch Definition

Zdobądź praktyczne umiejętności, które pomogą ci sprawnie pracować z dynamiczną naturą Expectations w rzeczywistych projektach. Wdrażaj Validation Definitions przy użyciu Checkpoints, aktualizuj Expectation Suites oraz ucz się dodawać, pobierać, wyświetlać i usuwać kluczowe komponenty GX.

Exercise 1: Wdrażanie definicji walidacji Exercise 2: Sprawdzenie wiedzy Exercise 3: Utwórz Checkpoint Exercise 4: Aktualizacja zestawów oczekiwań Exercise 5: Kopiowanie oczekiwania Exercise 6: Usuń oczekiwanie Exercise 7: Aktualizacja oczekiwania Exercise 8: Zarządzanie komponentami Exercise 9: Dodawanie i listowanie komponentów Exercise 10: Zarządzanie Checkpointem

Zanurz się w świat Expectations. Ćwicz tworzenie podstawowych Expectations dla kolumn, Expectations numerycznych na poziomie wierszy i agregacji, Expectations dla łańcuchów tekstowych i ich interpretowalności oraz wiele więcej. Dowiedz się, jak stosować Expectations tylko do wybranych wierszy ramki danych.

Exercise 1: Podstawowe oczekiwania dotyczące kolumn Exercise 2: Tworzenie Expectations na poziomie wierszy Exercise 3: Tworzenie Expectations na poziomie agregacji Exercise 4: Oczekiwania specyficzne dla typów danych Exercise 5: Tworzenie oczekiwań numerycznych Exercise 6: Tworzenie Expectations dla ciągów znaków Exercise 7: Oczekiwania warunkowe Exercise 8: Tworzenie warunkowego oczekiwania Exercise 9: Odwróć warunkowe Oczekiwanie

Bieżące ćwiczenie

Exercise 10: Podsumowanie