웹은 다양한 통찰과 발견을 이끌어낼 수 있는 풍부한 데이터 원천이에요. 이 장에서는 데이터가 파일로 저장되어 있든 HTML에 있든, 웹에서 데이터를 가져오는 방법을 배웁니다. 또한 웹 데이터를 스크레이핑하고 파싱하는 기본 개념도 익혀요.

웹에서 플랫 파일 가져오기

웹에서 평면 파일 가져오기: 이제 직접 해봐요!

웹에서 평면 파일 열기와 읽기

웹에서 비평면 파일 가져오기

웹에서 파일을 가져오기 위한 HTTP 요청

urllib를 사용해 Python에서 HTTP 요청 수행하기

urllib를 사용해 Python에서 HTTP 요청 결과 출력하기

requests로 Python에서 HTTP 요청 보내기

Python으로 웹 스크레이핑하기

BeautifulSoup으로 HTML 파싱하기

BeautifulSoup으로 웹페이지를 데이터로 변환하기: 텍스트 추출

BeautifulSoup으로 웹페이지를 데이터로 바꾸기: 하이퍼링크 가져오기

인터넷에서 데이터 가져오기

이 장에서는 웹에서 데이터를 가져오는 방법을 더욱 깊이 이해하게 됩니다. API에서 데이터를 추출하는 기본기를 배우고, API의 중요성을 파악하며, OMDB와 Library of Congress API를 탐구하면서 직접 데이터 추출 연습을 해요.

APIs와 JSON 소개

팝 퀴즈: JSON은 정확히 무엇인가요?

JSON 불러오기와 탐색

깜짝 퀴즈: JSON 탐색하기

API와 월드 와이드 웹과의 상호작용

순간 퀴즈: API란 무엇일까요?

API 요청

JSON–웹에서 Python으로

Wikipedia API 살펴보기

웹의 데이터를 가져오기 위한 API와의 상호작용

이 장에서는 Twitter streaming API를 깊이 있게 다루며 API와 상호작용하는 지식을 정리합니다. 실시간 Twitter 데이터를 스트리밍하는 방법과 이를 분석하고 시각화하는 방법을 배우게 됩니다.

Twitter API와 인증

트윗 스트리밍

Twitter 데이터 불러오기와 탐색

Twitter 데이터를 DataFrame으로

간단한 Twitter 텍스트 분석

Twitter 데이터 시각화하기

마무리 생각

Twitter API 깊이 파헤치기

Latitudes (XLS)

Course Glossary

Tweets

Red wine quality

데이터 과학자는 데이터를 정제하고, 가공하고, 시각화하고, 예측 모델을 만들고 이를 해석해야 해요. 하지만 그전에 먼저 데이터를 Python으로 가져오는 방법을 알아야 합니다. 이 강의의 전편에서는 다음과 같은 다양한 방법으로 데이터를 Python에 가져오는 법을 배웠습니다: .txt와 .csv 같은 평문 파일, Excel 스프레드시트·Stata·SAS·MATLAB 파일처럼 다른 소프트웨어의 고유 형식 파일, 그리고 SQLite와 PostgreSQL 같은 관계형 데이터베이스 등입니다. 이번 강의에서는 웹에서 데이터를 가져오는 방법과 Twitter streaming API처럼 실시간 트윗 스트리밍을 가능하게 하는 Application Programming Interfaces—APIs—로부터 데이터를 가져오는 방법을 학습하며 지식을 확장할 거예요.

동영상에는 실시간 자막이 포함되어 있으며, 동영상 왼쪽 하단의 "Show transcript"를 클릭하면 표시할 수 있어요.
강의 용어 사전은 오른쪽의 리소스 섹션에서 확인할 수 있습니다.
CPE 학점을 받으려면 강의를 완료하고 인증 평가에서 70% 이상의 점수를 받아야 합니다. 오른쪽의 CPE 크레딧 콜아웃을 클릭하면 평가로 이동할 수 있어요.

Introduction to Importing Data in Python

웹 및 Twitter 스트리밍 API 등에서 데이터를 가져와 Python에 가져오는 방법을 배우세요.

Intermediate Importing Data in Python

Python 데이터 가져오기 역량을 강화하고 웹 및 API 데이터로 작업하는 법을 학습하세요.

Python으로 웹 스크레이핑하기

Create Your Free Account