python 简单搭建阻塞式单进程,多进程,多线程服务

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python 简单搭建阻塞式单进程,多进程,多线程服务相关的知识,希望对你有一定的参考价值。

 我们可以通过这样子的方式去理解apache的工作原理

1 单进程TCP服务(堵塞式)
  这是最原始的服务,也就是说只能处理个客户端的连接,等当前客户端关闭后,才能处理下个客户端,是属于阻塞式等待

from socket import *
serSocket = socket(AF_INET, SOCK_STREAM)
#重复使用绑定的信息
serSocket.setsockopt(SOL_SOCKET, SO_REUSEADDR , 1)

localAddr = (‘‘, 7788)
serSocket.bind(localAddr)

serSocket.listen(5)

while True:
    print(-----主进程,等待客户端连接------)
    newSocket,destAddr = serSocket.accept()
    print(-----.主进程,接下来负责数据处理[%s]-----%str(destAddr))
    try:
        while True:
        recvData = newSocket.recv(1024)
        if len(recvData)>0:
            print(recv[%s]:%s%(str(destAddr), recvData))
        else:
            print([%s]客户端已经关闭...%str(destAddr))
        break
    finally:
        newSocket.close()

这种阻塞型自然不适合处理多客户端的请求,于是有了改版

2 多进程服务

采取多进程处理多客户端连接请求,对单进程进行了优化。

from socket import *
from multiprocessing import *
from time import sleep
# 处理客户端的请求并为其服务
def dealWithClient(newSocket,destAddr):
    while True:
        recvData = newSocket.recv(1024)
        if len(recvData)>0:
            print(recv[%s]:%s%(str(destAddr), recvData))
        else:
            print([%s]客户端已经关闭%str(destAddr))
            break
    newSocket.close()
def main():
    serSocket = socket(AF_INET, SOCK_STREAM)
    serSocket.setsockopt(SOL_SOCKET, SO_REUSEADDR , 1)
    localAddr = (‘‘, 7788)
    serSocket.bind(localAddr)
    serSocket.listen(5)
    try:
        while True:
        print(-----主进程,,等待新客户端的到来------)
        newSocket,destAddr = serSocket.accept()
        print(-----主进程,,接下来创建.个新的进程负责数据处理[%s]-----
        client = Process(target=dealWithClient, args=(newSocket,destAddr))
        client.start()
        #因为已经向.进程中copy了.份(引.),并且.进程中这个套接字也没有用处了
        #所以关闭
        newSocket.close()
    finally:
        #当为所有的客户端服务完之后再进.关闭,表示不再接收新的客户端的链接
        serSocket.close()
    if __name__ == __main__:
        main()

    通过为每个客户端创建一个进程的方式,能够同时为多个客户端进行服务;当客户端不是特别多的时候,这种方式还行,如果有成百上千个,就不可取了,因为每次创建进程都消耗较多的资源,于是有了改进版

3 多线程服务

采用多线程处理多客户端连接请求,由于线程共享资源,不用像进程那样复制出多个资源,因此处理更快。

#coding=utf-8
from socket import *
from threading import Thread
from time import sleep

# 处理客户端的请求并执行
def dealWithClient(newSocket,destAddr):
    while True:
        recvData = newSocket.recv(1024)
        if len(recvData)>0:
            print(recv[%s]:%s%(str(destAddr), recvData))
        else:
            print([%s]客户端已经关闭%str(destAddr))
            break
    newSocket.close()

def main():
    serSocket = socket(AF_INET, SOCK_STREAM)
    serSocket.setsockopt(SOL_SOCKET, SO_REUSEADDR , 1)
    localAddr = (‘‘, 7788)
    serSocket.bind(localAddr)
    serSocket.listen(5)
    try:
        while True:
            print(-----主进程,,等待新客户端的到来------)
            newSocket,destAddr = serSocket.accept()
            print(-----主进程,,接下来创建.个新的进程负责数据处理[%s]-----
            client = Thread(target=dealWithClient, args=(newSocket,destAddr))
            client.start()

            #这里不要关闭,线程共享资源,关闭了会导致全部线程均关闭
            #newSocket.close()
    finally:
        serSocket.close()
if __name__ == __main__:
main()

 


以上是关于python 简单搭建阻塞式单进程,多进程,多线程服务的主要内容,如果未能解决你的问题,请参考以下文章

Python来实现并发的Web Server,其中采用了多进程多线程协程单进程单线程非阻塞的方式

python并发编程:多线程,多进程

Python 多线程

27 Apr 18 GIL 多进程多线程使用场景 线程互斥锁与GIL对比 基于多线程实现并发的套接字通信 进程池与线程池 同步异步阻塞非阻塞

python多进程多线程的区别

Python多进程VS多线程