데이터 엔지니어처럼 사고하려면, 여러 퍼즐 조각이 어떻게 맞물리는지 이해하는 것이 중요해요.
이 장에서 살펴본 시나리오에서 Lambda 함수가 어떻게 동작하는지, 흐름을 연습해 보세요.
이 연습은 강의의 일부입니다
이론을 실습으로 바꾸는 인터랙티브 연습 중 하나를 만나보세요
이 첫 번째 장에서는 배치 처리와 스트림 처리의 차이를 배우고, 첫 스트림을 생성한 뒤 권한을 관리하고, 스트림에 쓰고 읽는 방법을 익힙니다.
스트리밍 데이터 여정의 다음 단계는 변환용 Lambda 함수를 사용해 서버리스로 전환하는 것입니다. 실습을 통해 Lambda 레이어를 추가하고 특정 조건에서 Lambda 함수를 트리거해 보겠습니다.
현재 연습
이제 스트리밍 데이터를 인코딩/디코딩하고, 스트림 내에서 바로 데이터를 분석할 준비가 되었습니다. 여러 스트림을 사용해 일일 차량 최고 속도도 계산해 봅니다.
마지막 장에서는 로그, 지표, 알림, 대시보드를 활용해 스트림 성능을 모니터링하는 방법을 알아봅니다. Elasticsearch를 사용하고, 직접 Kibana 대시보드를 구축합니다.