시작하기무료로 시작하기

파이프라인 데이터 문제

빠른 파이프라인을 만든 뒤, 팀 내 분석가에게 json 파일을 전달했습니다. 분석가는 데이터를 로드하고 탐색 작업을 몇 가지 수행한 뒤, duration 데이터를 정렬하려다 데이터셋에 문제가 있다고 알려옵니다. 정렬이 예상대로 되지 않는 것 말고는 원인을 잘 모르겠다고 하네요.

Date          Flight Number   Airport     Duration    ID

09/30/2015    2287            ANC         409         107962
12/28/2015    1408            OKC         41          141917
08/11/2015    2287            ANC         410         87978

데이터를 분석해 본 결과, 어떤 명령어가 문제를 해결할 수 있을까요?

이 연습은 강의의 일부입니다

PySpark로 데이터 정제하기

강의 보기

실습형 인터랙티브 연습문제

이론을 실습으로 바꾸는 인터랙티브 연습 중 하나를 만나보세요

연습 시작