python 实现socket服务端并发的四种方式
更新时间：2020年12月14日 16:57:55 作者：the3times
这篇文章主要介绍了python 实现socket服务端并发的四种方式，帮助大家更好的理解和使用python，感兴趣的朋友可以了解下
多进程&多线程
服务端：多进程和多线程的开启方式相同。
缺点：<1> 由于Cpython的GIL，导致同一时间无法运行多个线程；<2> 不可能无限开进进程或线程
解决办法：多进程、concurrent.futures.ProcessPoolExecutor、线程池
import socket
from multiprocessing import Process
from threading import Thread
class MyTcpServer:
def __init__(self, ip, port):
self.ip = ip
self.port = port
self.server = socket.socket()
self.server.bind((self.ip, self.port))
self.server.listen(5)
def wait_accept(self):
conn, addr = self.server.accept()
return conn, addr
def handle_request(self, conn):
while 1:
try:
data = conn.recv(1024)
if not data: break
conn.send(data.upper())
except Exception as e:
print(e)
break
conn.close()
if __name__ == '__main__':
server = MyTcpServer('127.0.0.1', 8888)
while 1:
conn, addr = server.wait_accept()
p = Process(target=server.handle_request, args=(conn, )) # 创建一个进程
p.start() # 告诉操作提供，开启这个进程
进程池&线程池
异步提交任务，支持异步接收返回结果(submit返回一个futures对象，调用add_done_callback方法)
import socket
from concurrent.futures import ProcessPoolExecutor
# from concurrent.futures import ThreadPoolExecutor
class MyTcpServer:
def __init__(self, ip, port):
self.ip = ip
self.port = port
self.server = socket.socket()
self.server.bind((self.ip, self.port))
self.server.listen(5)
def wait_accept(self):
conn, addr = self.server.accept()
return conn, addr
def handle_request(self, conn):
while 1:
try:
data = conn.recv(1024)
if not data: break
conn.send(data.upper())
except Exception as e:
print(e)
break
conn.close()
if __name__ == '__main__':
server = MyTcpServer('127.0.0.1', 8888)
pool = ProcessPoolExecutor(5) # 5个进程一直服务
while 1:
conn, addr = server.wait_accept()
pool.submit(server.handle_request, conn) # 异步提交任务
socketserver
优点：简化socket服务端创建流程。
提供服务端串行和并发两种服务模式（TCPServer，ThreadingTCPServer）
缺点：windows上无法使用多进程实现并发
import socketserver
class MyTcpHandler(socketserver.BaseRequestHandler):
def handle(self): # 通信循环
while 1:
try:
data = self.request.recv(1024)
if not data: break
self.request.send(data.upper())
except Exception as e:
print(e)
break
self.request.close()
if __name__ == '__main__':
ip_port = '127.0.0.1', 8888
server = socketserver.ThreadingTCPServer(ip_port, MyTcpHandler) # 异步处理
server.serve_forever() # 连接循环
协程
优点：单线程内实现并发，代码级别模拟IO切换，提高程序运行效率
from gevent import spawn, monkey;monkey.patch_all() # 猴子补丁，补丁:常规IO
import socket
class MyTcpServer:
def __init__(self, ip, port, my_spawn):
self.ip = ip
self.port = port
self.server = socket.socket()
self.server.bind((self.ip, self.port))
self.server.listen(5)
self.spawn = my_spawn # 保存spawn本地
def wait_accept(self):
while 1:
conn, addr = self.server.accept()
self.spawn(self.handle_request, conn) # 检测 handle_request的io
def handle_request(self, conn):
while 1:
try:
data = conn.recv(1024)
if not data: break
conn.send(data.upper())
except Exception as e:
print(e)
break
conn.close()
if __name__ == '__main__':
server = MyTcpServer('127.0.0.1', 8888, spawn)
g1 = server.spawn(server.wait_accept) # 检测wait_accept的io
g1.join() # 等待g1运行结束，即一直在循环检测io
以上就是python 实现socket服务端并发的四种方式的详细内容，更多关于python socket服务端并发的资料请关注脚本之家其它相关文章！
相关文章
在本篇文章中，我们将深入探讨Pandas库中两个重要的数据处理功能：处理缺失数据和数据聚合，文中有详细的代码示例，对我们的学习或工作有一定的帮助,需要的朋友可以参考下2023-07-07
这篇文章主要介绍了使用PyInstaller 打包配置文件，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2022-02-02
psutil是一个跨平台库,能够轻松实现获取系统运行的进程和系统利用率（包括CPU、内存、磁盘、网络等）信息,需要的朋友可以参考下2023-05-05
这篇文章主要介绍了简单了解python 生成器 列表推导式 生成器表达式,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2019-08-08
这篇文章主要给大家介绍了关于python数据处理之如何选取csv文件中某几行的数据的相关资料，文中通过示例代码介绍的非常详细，对大家学习或者使用python具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧2019-09-09
Python列表切片赋值是一种将一个列表的特定部分替换为新的元素的操作,本文主要介绍了python列表的切片赋值实现,具有一定的参考价值,感兴趣的可以了解一下2024-03-03
这篇文章主要介绍了Python企业编码生成系统总体系统设计,简单描述了Python企业编码生成系统的功能、结构与相关编码实现技巧,需要的朋友可以参考下2019-07-07
这篇文章主要为大家详细介绍了python 2.7 实现FTP文件下载功能，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2018-04-04
这篇文章主要介绍了Python之POST调用Restful接口示例，本文结合示例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下2023-02-02
本文主要介绍了python 实例方法、类方法和静态方法的相关知识。具有很好的参考价值，下面跟着小编一起来看下吧2017-02-02
最新评论