1. 학습
    2. /
  2. 강의
    3. /
  3. PySpark로 데이터 정제하기
Connected

연습 문제

Spark 구성 읽기

최근 클라우드 제공업체를 통해 클러스터를 구성했어요. 접근 방식은 명령 셸이나 Python 코드뿐이에요. 클러스터 구성이 올바른지 확인하기 위해 몇 가지 Spark 설정을 검증하려고 합니다.

spark 객체는 사용할 수 있어요.

지침

100 XP
  • Spark 애플리케이션 인스턴스 이름('spark.app.name')을 확인하세요.
  • 드라이버가 실행되는 TCP 포트('spark.driver.port')를 확인하세요.
  • 조인에 대해 설정된 파티션 수를 확인하세요.
  • 결과를 출력하세요.