DVC 파이프라인 실행 개념

DVC 파이프라인은 Machine Learning 워크플로를 간소화해 데이터와 코드를 효율적으로 버전 관리, 추적, 캐싱할 수 있게 해줘요. 실행 방식을 이해하면 효과적인 워크플로를 설계할 수 있어요. 이 연습 문제에서는 DVC가 재현 가능한 파이프라인을 어떻게 실행하는지 점검해 보겠습니다.

이 연습은 강의의 일부입니다

DVC로 배우는 데이터 버저닝 입문

강의 보기

실습형 인터랙티브 연습문제

이론을 실습으로 바꾸는 인터랙티브 연습 중 하나를 만나보세요

연습 시작

이 연습은 강의의 일부입니다

DVC로 배우는 데이터 버저닝 입문

SkillTag.level.intermediateSkillTag.label

4.8+

401 reviews

무료로 강의 시작하기

이 장에서는 Machine Learning에서 데이터 버저닝을 위해 필수적인 도구인 Data Version Control(DVC)을 폭넓게 소개합니다. 데이터 버저닝의 필요성을 살펴보고, 코드 버전 관리와의 차이를 이해하며, 간단한 분류 문제로 실습해 봅니다. 기본 Git 명령을 복습한 뒤 DVC를 배우고, 저장소를 설정하는 과정을 연습합니다. 마지막으로 데이터와 모델의 버전 관리, ML을 위한 CI/CD, 실험 추적, 파이프라인 등 DVC의 주요 기능과 활용 사례를 개괄합니다.

Exercise 1: 데이터 버전 관리의 필요성 Exercise 2: Machine Learning 모델의 구성 요소 살펴보기 Exercise 3: 데이터 버전 관리와 코드 버전 관리의 차이 Exercise 4: 하이퍼파라미터 이해하기 Exercise 5: DVC 소개 Exercise 6: Git CLI 다루기 Exercise 7: DVC CLI 복습 Exercise 8: DVC의 기능과 활용 사례 Exercise 9: DVC 파이프라인 Exercise 10: Machine Learning을 위한 CI/CD

이 장에서는 DVC의 설치, 저장소 초기화, 그리고 .dvcignore 파일 사용 등 환경 설정을 다룹니다. 이어서 DVC 캐시와 스테이징 파일을 탐색하며, 파일 추가/삭제, 캐시 관리, 그리고 MD5 해시를 통해 동작 원리를 이해하는 방법을 배웁니다. 또한 Git 리모트와 구분되는 DVC 리모트를 설명하고, 리모트를 추가, 목록 조회, 수정하는 방법을 안내합니다. 마지막으로 리모트와 상호작용하는 방법으로 데이터 push/pull, 특정 버전 checkout, 캐시로 데이터 fetch하는 절차를 학습합니다.

Exercise 1: DVC 설정 및 초기화 Exercise 2: DVC 설정하기 Exercise 3: .dvcignore 패턴 Exercise 4: DVC 캐시와 스테이징 파일 Exercise 5: DVC 캐시 다루기 Exercise 6: `.dvc` 파일 이해하기 Exercise 7: DVC 원격 저장소 구성 Exercise 8: DVC Remote의 목적 Exercise 9: DVC 원격 저장소 설정 Exercise 10: DVC 원격 저장소와 상호 작용하기 Exercise 11: DVC Remote를 사용한 데이터 버전 관리 Exercise 12: 버전이 있는 데이터 체크아웃하기

이 장은 DVC로 ML 파이프라인을 자동화하는 데 초점을 맞춥니다. 설정과 하이퍼파라미터를 담은 구성 파일을 만들고, 유향 비순환 그래프를 사용한 파이프라인 시각화를 학습합니다. 의존성, 명령, 결과물을 기술하는 명령어도 사용합니다. DVC 파이프라인 실행, 로컬 모델 학습, 그리고 Git이 DVC 메타데이터를 추적하는 방식도 다룹니다. 추가로 DVC에서의 지표와 플롯 추적을 살펴보며, 지표 출력, 플롯 파일 생성, 파이프라인 단계 간 지표와 플롯 비교 방법을 배웁니다.

Exercise 1: 코드 구성과 리팩터링 Exercise 2: DVC의 매개변수 파일 이해하기 Exercise 3: 매개변수 파일 작성하기 Exercise 4: DVC 파이프라인 작성과 시각화 Exercise 5: DVC 파이프라인 설계하기 Exercise 6: DVC 파이프라인 시각화하기 Exercise 7: DVC 파이프라인 실행하기 Exercise 8: DVC 파이프라인 실행 개념

현재 연습

Exercise 9: ML 모델 학습 파이프라인 실행하기 Exercise 10: 평가: DVC에서의 메트릭과 플롯 Exercise 11: DVC 메트릭 추적하기 Exercise 12: dvc.yaml에 플롯 추가하기 Exercise 13: 축하합니다!