图片爬取和思路分析

Posted 2020-11-07 纯情

//我先准备一个记事本准备页面网址

s=页数

q=搜索值

//爬取相对的网页数据

//找到图片的网址在源代码中ctrl+f 找到TB1xjf5dFhM8kjiszfwxxcib的代码复制用正则精准爬取

//遍历结果

import urllib.request
import re
suo="夹克男"
key=urllib.request.quote(suo)
for i in range(0,1):
url="http://s.taobao.com/list?spm=a21bo.2017.201867-links-0.5.5af911d9M4bXRK&q="+str(key)+"&cat=16&style=grid&seller_type=taobao&bcoffset=12&s="+str(i*60)
jie=urllib.request.urlopen(url).read().decode("utf-8","ignore")
string=\'"pic_url":"//(.*?)"\'
go=re.compile(string).findall(str(jie))
for j in range(len(go)):
temg=go[i]
temg1="http://"+temg
dom="D:/image/"+str(i)+str(j)+".jpg"
urllib.request.urlretrieve(temg1,filename=dom)