HTTP Error 403: Forbidden학부공부/빅데이터기술_프로젝트2019. 5. 5. 04:29
Table of Contents
반응형
Python에서 requests library를 사용해서 크롤링을 할려고 하였다.
그런데 , 제목과 같은 오류가 났다.
https://medium.com/@speedforcerun/python-crawler-http-error-403-forbidden-1623ae9ba0f
[Python][Crawler]“HTTP Error 403: Forbidden”
Using urllib.request.urlopen() to open a website when crawling, and encounters “HTTP Error 403: Forbidden”. It possibly due to the server…
medium.com
위를 참고하여서 해결하였다.
문제는 웹에서 봇으로 착각을 하여서 차단한다는 것이다.
그래서 requests를 할 때 , header정보를 포함해서 요청하였다.
반응형
'학부공부 > 빅데이터기술_프로젝트' 카테고리의 다른 글
| 프로젝트_중간점검(데이터정제과정) (0) | 2019.05.19 |
|---|---|
| 데이터 모으기(4) (0) | 2019.05.05 |
| 데이터 모으기(3) (0) | 2019.05.01 |
| 데이터 모으기(2) (0) | 2019.04.29 |
| 필요한 데이터 모으기(1) (0) | 2019.04.27 |
@IT grow. :: IT grow.
#IT #먹방 #전자기기 #일상
#개발 #일상
