ETL과 ELT 파이프라인에 관한 설명 중 옳은 것을 모두 선택하세요.
이 연습은 강의의 일부입니다
이론을 실습으로 바꾸는 인터랙티브 연습 중 하나를 만나보세요
데이터 파이프라인을 통해 데이터가 어떻게 수집, 처리, 이동하는지 알아볼 준비를 해보세요. 가장 뛰어난 데이터 파이프라인이 갖춘 특징을 살펴보고, 직접 설계하고 구축할 준비를 갖추게 됩니다.
현재 연습
pandas를 활용해 데이터를 추출, 변환, 적재하면서 첫 번째 데이터 파이프라인을 구축해 보세요. ETL 로직을 재사용 가능하게 만드는 방법을 배우고, 파이프라인에 로깅과 예외 처리를 적용하는 방법도 익혀봅니다.
비정형 데이터를 다루고 DataFrame을 SQL 데이터베이스에 저장하는 등 고급 데이터 파이프라이닝 기법으로 작업 효율을 한층 높여보세요. pandas로 고급 변환 작업을 처리하는 도구를 알아보고, 복잡한 데이터를 다루기 위한 모범 사례도 살펴봅니다.
마지막 챕터에서는 데이터 파이프라인을 프로덕션에 적용하기 전에 이를 검증하고 테스트하는 프레임워크를 만들어봅니다. 파이프라인을 테스트한 후에는 파이프라인 성능을 가시적으로 확인하면서 데이터 파이프라인을 처음부터 끝까지 실행하는 기법을 살펴봅니다.