셀레니움을 이용하여 크롤링 중 페이지 스크롤하여 버튼을 누르고 싶어요
조회수 703회
카카오 웹툰의 웹툰 상세 정보를 가져오려고 합니다.
그런데 상세 정보를 보려면 웹툰 목록에 들어가서 페이지를 스크롤 해야 작품 정보 버튼이 생성됩니다.
아래와 같이 실행하였을 때 스크롤은 되나 버튼이 보이지 않게 내려집니다.
from selenium import webdriver
import time
driver = webdriver.Firefox(capabilities=None, executable_path='driver path') #webdriver
driver.get('https://webtoon.kakao.com/content/%EB%B0%94%EB%8B%88%EC%99%80-%EC%98%A4%EB%B9%A0%EB%93%A4/1781') #kakaowebtoon link
time.sleep(2)
options = driver.find_element_by_xpath("//div[@id='root']/main/div/div/div/div[1]/div[3]/div/div/div[1]/div/div[2]/div/div[1]/div/div/div/div")
driver.execute_script("arguments[0].scrollIntoView(true);",options) #scroll down
time.sleep(1)
#driver.execute_script("window.scrollTo(0, 900)") #스크롤 되지 않음
어떻게 하면 상세 정보 버튼을 누를 수 있나요?
-
(•́ ✖ •̀)
알 수 없는 사용자
1 답변
-
굳이 셀레니움을 쓸 필요가 있을까요?
import requests url = 'https://gateway-kw.kakao.com/decorator/v1/decorator/contents/2119/profile' with requests.get(url) as r: print(r.text)- https://gateway-kw.kakao.com/decorator/v1/decorator/contents/2119/profile 이 url은 어디서 가져온 건가요?? 알 수 없는 사용자 2021.8.9 09:21
댓글 입력