python简单爬虫示例

Posted mrdoor

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python简单爬虫示例相关的知识,希望对你有一定的参考价值。

#coding=utf-8

 
import urllib
import re
 
def downloadPage(url):
    = urllib.urlopen(url)
    return h.read()
 
def downloadImg(content):
    pattern = r‘src="(.+?\.jpg)" pic_ext‘
    = re.compile(pattern)
    urls = re.findall(m, content)
 
    for i, url in enumerate(urls):
        urllib.urlretrieve(url, "%s.jpg" % (i, ))
 
content = downloadPage("http://tieba.baidu.com/p/2460150866")
downloadImg(content)
 
针对图片的批量下载 urllib提供了相关接口可以执行!

以上是关于python简单爬虫示例的主要内容,如果未能解决你的问题,请参考以下文章

scrapy主动退出爬虫的代码片段(python3)

七月算法《python爬虫》第一课:Python爬虫小示例

Python爬虫—多线程的简单示例

python简单爬虫示例

python基础篇-爬虫urlparse使用及简单示例

关于一些python爬虫示例代码