python爬虫:爬取百度云盘资料,保存下载地址链接标题链接详情

Posted 小星星学数据

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python爬虫:爬取百度云盘资料,保存下载地址链接标题链接详情相关的知识,希望对你有一定的参考价值。

在网上看到的教程,但是我嫌弃那个教程写的乱(虽然最后显示我也没高明多少,哈哈),就随手写了一个

主要是嫌弃盘搜那些恶心的广告,这样直接下载下来,眼睛清爽多了。

用pyinstall 打包成EXE文件,就可以安安静静的下载东西了。。。。

 #refer:http://upvup.com/html/python/2015-12-13/21.html

#!/usr/bin/python
# -*- encoding:utf-8 -*-

import requests
from bs4 import BeautifulSoup
import sys
reload(sys)
sys.setdefaultencoding(‘utf-8‘)

def yunpan_search(key):
url=‘http://www.wangpansou.cn/s.php?q=‘+key
html=requests.get(url)
soup=BeautifulSoup(html.text,"lxml")
url_get=soup.find_all(‘a‘,{‘class‘:‘cse-search-result_content_item_top_a‘})
info_get=soup.find_all(‘div‘,{‘class‘:‘cse-search-result_content_item_mid‘})
f = open(‘baidu_source.txt‘,‘w‘)
for i in range(len(url_get)):
href=url_get[i][‘href‘]
title=‘‘
for c in url_get[i].children:
title+=c.string.strip()

information=‘‘
for info in info_get[i].children:
information+=info.string.strip().replace(\n‘,‘‘)

print str(i+1)+‘_________________________________________________________________________________________________‘
print 下载地址--‘+href+\n‘+链接标题--‘+title+\n‘+链接详情--‘+information+\n\n
f.write(str(i+1)+‘. _____________________________________________________________________\n‘)
f.write(下载地址--‘+href+\n‘+链接标题--‘+title+\n‘+链接详情--‘+information+\n\n‘)
f.close()


if __name__==‘__main__‘:
key=raw_input(‘please input what you want to look for:‘)
yunpan_search(key)
print(‘finish‘)

 

以上是关于python爬虫:爬取百度云盘资料,保存下载地址链接标题链接详情的主要内容,如果未能解决你的问题,请参考以下文章

Python爬虫爬取百度贴吧的图片

百度文库爬虫

爬虫——三个小实战

Python爬虫实战:爬取淘女郎照片

python 爬虫实战4 爬取淘宝MM照片

Python爬虫爬取目标小说并保存到本地