이미지별 개수

이 데이터셋을 위한 데이터 파이프라인을 구축하는 다음 작업은 분석 중심의 열을 몇 개 만드는 것입니다. 앞서 만든 dog_list 열을 기반으로 각 이미지에서 발견된 개 수를 계산해 달라는 요청을 받았어요. 또한 일부 데이터 열의 값을 더 잘 파싱할 수 있도록 DogType도 만들어 두었습니다.

joined_df는 마지막에 정의한 상태로 제공되며, DogType StructType도 정의되어 있습니다. pyspark.sql.functions는 F 별칭으로 사용할 수 있습니다.