Python/Crawling

[Crawling] 웹페이지 정보 가져오기

퓨어맨 2022. 5. 19. 08:46

크롤링이란

주로 인터넷상의 웹페이지를 수집해서 분류하고 저장하는 것

 

# server로 request 하는 라이브러리
import requests as req

url = 'https://www.naver.com/'
req.get(url) # server로 부터 response 된 웹페이지 정보를 가져온다.

# <Response [200]> : 응답성공

url = 'https://www.melon.com/'
req.get(url)

# <Response [406]> : 응답실패

 

응답 성공시

 

응답 실패시

 

 

'Python > Crawling' 카테고리의 다른 글

[Crawling] iframe  (0) 2022.05.19
[Crawling] 영화 데이터 수집(날짜 설정)  (0) 2022.05.19
[Crawling] 데이터 프레임  (0) 2022.05.19
[Crawling] 멜론 페이지 응답받기  (0) 2022.05.19
[Crawling] Beautifulsoup  (0) 2022.05.19