DAG 파일을 올바른 위치에 배치했으니, 이제 Airflow 웹 UI를 확인할 차례입니다.
sample DAG의 일정을 찾을 수 있나요?
sample
이 연습은 강의의 일부입니다
이론을 실습으로 바꾸는 인터랙티브 연습 중 하나를 만나보세요
첫 번째 장에서는 데이터 엔지니어링의 세계를 만나 보겠습니다! 데이터 엔지니어와 데이터 과학자의 차이를 살펴보고, 데이터 엔지니어가 사용하는 다양한 도구를 개괄하며, 클라우드 기술이 데이터 엔지니어링에서 어떤 역할을 하는지도 이해해 보세요.
이제 데이터 엔지니어와 데이터 과학자의 주요 차이를 이해하셨으니, 데이터 엔지니어의 도구 상자를 본격적으로 탐구해 볼 차례입니다! 데이터 엔지니어가 사용하는 여러 유형의 데이터베이스, 병렬 컴퓨팅이 도구 상자의 핵심인 이유, 그리고 스케줄링 프레임워크로 데이터 처리 작업을 예약하는 방법을 자세히 배웁니다.
데이터 엔지니어의 도구 상자를 살펴본 만큼, 이제 데이터 엔지니어의 핵심 워크플로로 들어가 볼까요! ETL을 통해 다양한 소스에서 원시 데이터를 추출하고, 이를 실행 가능한 인사이트로 변환한 뒤, 활용할 수 있도록 적절한 데이터베이스에 적재하는 방법을 배우게 됩니다.
현재 연습
앞의 세 장에서 배운 내용을 바탕으로 DataCamp의 실제 데이터 엔지니어링 사례를 완성해 보세요! 원시 강의 평점 데이터를 ETL로 처리해 예약 실행까지 설정하고, DataCamp 학습자에게 제공할 수 있는 유용한 강의 추천으로 변환합니다!
