爬豆瓣电影名

Posted byerHu

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬豆瓣电影名相关的知识,希望对你有一定的参考价值。

import urllib.request
from bs4 import BeautifulSoup

url = "https://movie.douban.com/chart"
req = urllib.request.Request(url)
req.add_header("User-Agent", "Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:54.0) Gecko/20100101 Firefox/54.0")
response = urllib.request.urlopen(url)
bsObj = BeautifulSoup(response, \'html.parser\')
bsObj = bsObj.find_all(\'div\', {\'class\': \'pl2\'})
print(bsObj[0].contents[1].get_text())
for tag in bsObj:

    div_tag = tag.contents[1].get_text()

    name = div_tag.strip(\'\\n\').replace(\' \', \'\') +\'\\n\'

    print(name)

 

以上是关于爬豆瓣电影名的主要内容,如果未能解决你的问题,请参考以下文章