Python爬虫实践 四种姿势爬取豆瓣电影Top250信息！

Posted 2021-09-14 叶庭云

文章目录

• 一、分析网页
• 二、正则表达式
• 三、BeautifulSoup
• 四、PyQuery
• 五、Xpath
• 六、总结

一、分析网页

电影信息在 ol class 为 grid_view 下的 li 标签里，获取到所有li标签的内容，然后遍历，从中提取出每一条电影的信息。

翻页查看url变化规律：

第1页：https://movie.douban.com/top250?start=0&