이런 사이트는 크롤링을 어떻게 해야되죠 ? ?

Question

0

싫어요

여기 이사이튼데 selenium 으로 버튼클릭하고 bs4로 크롤링 할려고 해도 html 을 불러올때 안불러와지네여 ㅠㅠ 다른 방식으로 크롤링하는게 있나요 ? ?

score 0 · Accepted Answer

프레임이 안에 있어서 그대로 불러오실 수 없습니다.

표를 우클릭해서 프레임 소스 보기로 들어가보시면 표는 아래와 같은 방식으로 동적으로 불러오고 있습니다.

https://www.weather.go.kr/cgi-bin/aws/nph-aws_txt_min_guide_test?0&0&MINDB_01M&4108&a&K

위는 현재 시간을 지정했을 때의 주소(0&0)이며, 특정 시간대를 설정 후 다시 프레임 소스 보기로 확인해보면 아래와 같이 되어 있습니다.

https://www.weather.go.kr/cgi-bin/aws/nph-aws_txt_min_guide_test?202007272014&-60&MINDB_01M&0&m&K

202007272014&-60&MINDB_01M&0&m&K를 보시면 다음과 같은 형식임을 알 수 있습니다.

"날짜"(20200727)"시간"(2014)&"몇분후"(-60)&MINDB_01M&0&m&K

원하는 날짜,시간,분을 지정하여 해당 주소로 불러서 사용하시기 바랍니다.

감사합니다.