크롤링이란
주로 인터넷상의 웹페이지를 수집해서 분류하고 저장하는 것
# server로 request 하는 라이브러리
import requests as req
url = 'https://www.naver.com/'
req.get(url) # server로 부터 response 된 웹페이지 정보를 가져온다.
# <Response [200]> : 응답성공
url = 'https://www.melon.com/'
req.get(url)
# <Response [406]> : 응답실패
응답 성공시
응답 실패시
'Python > Crawling' 카테고리의 다른 글
[Crawling] iframe (0) | 2022.05.19 |
---|---|
[Crawling] 영화 데이터 수집(날짜 설정) (0) | 2022.05.19 |
[Crawling] 데이터 프레임 (0) | 2022.05.19 |
[Crawling] 멜론 페이지 응답받기 (0) | 2022.05.19 |
[Crawling] Beautifulsoup (0) | 2022.05.19 |