python爬虫应用实战-如何爬取好看的小姐姐照片?

Posted 文宇肃然

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python爬虫应用实战-如何爬取好看的小姐姐照片?相关的知识,希望对你有一定的参考价值。

线程锁

Threading模块为我们提供了一个类,Threading.Lock锁。我们创建该类的对象,在线程函数执行之前,“抢占”该锁,执行完成之后,“释放”该锁,则我们确保了每次只有一个线程占有该锁。这时对一个公共对象进行操作,则不会发生线程不安全的现象了。

当多个线程同时访问一个数据库时,需要加锁,排队变成单线程,一个一个执行。加锁可以避免并发时导致的逻辑错误,每当一个线程a要访问共享数据域时,必须先获得锁定;如果已经有别的线程b获得了锁定,那么就让线程a暂停,也就是同步阻塞;等到线程b执行完毕,释放锁之后,再让线程a继续。

线程锁的基本语法如下:

lock = threading.Lock()
lock.acquire() # 上锁
lock.release() # 释放锁

threading.Lock

实现原始锁对象的类。一旦一个线程获得一个锁,会阻塞随后尝试获得该锁的线程,直到它被释放;任何线程都可以释放它。

原始锁是一个在锁定时不属于特定线程的同步基元组件。在python中,它是能用最低级的同步基元组件,由_thread拓展模块直接实现。

acquire(blocking=True, timeout=-1)

可以阻塞或者非阻塞的获得锁。

当调用参数blocking设置为True,阻塞直到锁被释放,然后将锁锁定并返回True。

当blocking设置为False时,将不会发生阻塞。

当浮点型timeout参数设置为正值时,则阻塞特定的秒数。当timeout为-1时,则表示无限等待。

以上是关于python爬虫应用实战-如何爬取好看的小姐姐照片?的主要内容,如果未能解决你的问题,请参考以下文章

Python爬虫应用实战-爬取网站漂亮小姐姐,可爱的小姐姐谁不爱呢?

Python爬虫应用实战-爬取网站漂亮小姐姐,可爱的小姐姐谁不爱呢?

爬虫经典教学,爬取小姐姐图片,太好看了!

黑客技能|我靠Ajax虫术爬取了大量小姐姐照片

Python爬虫应用实战案例-jsonpath在爬虫中的应用,爬取照片信息

Python爬虫应用实战案例-jsonpath在爬虫中的应用,爬取照片信息