爬虫内容保存到txt文件

Posted web安全工具库

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫内容保存到txt文件相关的知识,希望对你有一定的参考价值。

0x01 源码如下

from pyquery import PyQuery
import requests


url = "https://www.dandanzan10.top/dianying/index.html"
heads = 
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36',

r = requests.get(url, headers=heads)
str = r.text
res=PyQuery(str)


items=res('div:nth-child(4) > ul > li').items()
file=open('aiyou.txt','w',encoding='utf-8')
for item in items:
    name=item.find('h2').text()
    file.write(f'电影名称:name\\n')
    pf=item.find('.rate').text()
    file.write(f'评分:pf\\n')
    file.write(f'"*"*50\\n')
file.close()

0x02 效果如下

 

0x03 声明

仅供安全研究与学习之用,若将工具做其他用途,由使用者承担全部法律及连带责任,作者不承担任何法律及连带责任。

欢迎关注编程者吧

 

以上是关于爬虫内容保存到txt文件的主要内容,如果未能解决你的问题,请参考以下文章

爬虫内容保存到txt文件

Python爬虫爬取豆瓣电影名称和链接,分别存入txt,excel和数据库

使用mongodb保存爬取豆瓣电影的数据

Python爬虫之Scrapy框架系列——XXTop250电影所有信息同时存储到MySql数据库

Python爬虫之Scrapy框架系列——XXTop250电影所有信息同时存储到MySql数据库

Scrapy 豆瓣电影爬虫