Python 爬取网页中JavaScript动态添加的内容

Posted 2021-01-09 寒爵

使用 selenium + phantomjs 实现

1、准备环境

selenium（一个用于web应用程测试的工具）安装：pip install selenium
phantomjs（是一种无界面的浏览器，用于完成网页的渲染）下载：http://phantomjs.org/download.html

2、使用

from selenium import webdriver

url = ‘http://jandan.net/ooxx‘
driver = webdriver.PhantomJS(
    executable_path=‘D:/Software/phantomjs-2.1.1-windows/bin/phantomjs.exe‘)  # phantomjs.exe所在的目录
driver.get(url)
print(driver.page_source)