편집 기록

편집 기록
  • 프로필 알 수 없는 사용자님의 편집
    날짜2019.09.24

    python requests 사용 시 headers를 추가해도 403에러가 발생할 경우에는 어떻게 해야하나요?


    whoscored = 'https://www.whoscored.com'
    headers = {
        'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36',
        'referer' : 'http://www.naver.com',
        'Content-Type': 'application/json; charset=utf-8'
        }
    cookies = {'session_id': 'sorryidontcare'}
    request = requests.get(searche_url,headers = headers, cookies=cookies)
    print request
    
    결과 : <Response [403]>
    

    현재 이렇게 작성해서 크롤링 연습중인데 해당 사이트에는 header를 추가로 넘겨줘도 403에러가 발생하더라구요 혹시 이럴 때 접근 가능한 방법이 있을까요?

  • 프로필 김재민님의 편집
    날짜2019.07.30

    python requests 사용 시 headers를 추가해도 403에러가 발생할 경우에는 어떻게 해야하나요?


    whoscored = 'https://www.whoscored.com'
    headers = {
        'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36',
        'referer' : 'http://www.naver.com',
        'Content-Type': 'application/json; charset=utf-8'
        }
    cookies = {'session_id': 'sorryidontcare'}
    request = requests.get(searche_url,headers = headers, cookies=cookies)
    print request
    
    결과 : <Response [403]>
    

    현재 이렇게 작성해서 크롤링 연습중인데 해당 사이트에는 header를 추가로 넘겨줘도 403에러가 발생하더라구요 혹시 이럴 때 접근 가능한 방법이 있을까요?