今天尝试使用selenium爬取一个动态加载的网站,可是爬取到的还是它的js脚本,而不是F12后得到的html,这是为什么呢?
from selenium import webdriver
import time
brower = webdriver.Chrome()
brower.get('http://m.taduo.net/manhua/2/8.html')
time.sleep(5)
#res = brower.find_element_by_id('manga')
print(brower.page_source)
brower.close()
https://www.cnblogs.com/pythonywy/p/11284800.html看这个
你可以看看美团,页面就js。
sleep 很不科学,你可以注入js,等js load后 执行自己的代码。