#!/usr/bin/python
#-*- coding: utf-8 -*-
import requests
from bs4 import BeautifulSoup


url = "http://~~~~"
target_code = requests.get(url)
plain_text = target_code.text


soup = BeautifulSoup(plain_text,"lxml")


ranks = soup.findAll("div",id="grid")
print(ranks)

출력결과

<div class="inner" id="grid"></div>

제가 크롤링 해야 하는부분은 div 안에 있는 table > tbody > td 인데 개발자도구로 찍어보기 해야 div 태그가 열리면서 보입니다..

페이지에서 페이지 소스 보기 하면

요렇게 만 나와요

실제는 이 div 안에 또 table 이 있고 이런 구조인데 크롤링할때 이런문제는 어떻게 해결해야하나요