python 实现socket服务端并发的四种方式
作者:the3times 时间:2022-08-09 22:19:46
多进程&多线程
服务端:多进程和多线程的开启方式相同。
缺点:<1> 由于Cpython的GIL,导致同一时间无法运行多个线程;<2> 不可能无限开进进程或线程
解决办法:多进程、concurrent.futures.ProcessPoolExecutor、线程池
import socket
from multiprocessing import Process
from threading import Thread
class MyTcpServer:
def __init__(self, ip, port):
self.ip = ip
self.port = port
self.server = socket.socket()
self.server.bind((self.ip, self.port))
self.server.listen(5)
def wait_accept(self):
conn, addr = self.server.accept()
return conn, addr
def handle_request(self, conn):
while 1:
try:
data = conn.recv(1024)
if not data: break
conn.send(data.upper())
except Exception as e:
print(e)
break
conn.close()
if __name__ == '__main__':
server = MyTcpServer('127.0.0.1', 8888)
while 1:
conn, addr = server.wait_accept()
p = Process(target=server.handle_request, args=(conn, ))# 创建一个进程
p.start()# 告诉操作提供,开启这个进程
进程池&线程池
异步提交任务,支持异步接收返回结果(submit返回一个futures对象,调用add_done_callback方法)
import socket
from concurrent.futures import ProcessPoolExecutor
# from concurrent.futures import ThreadPoolExecutor
class MyTcpServer:
def __init__(self, ip, port):
self.ip = ip
self.port = port
self.server = socket.socket()
self.server.bind((self.ip, self.port))
self.server.listen(5)
def wait_accept(self):
conn, addr = self.server.accept()
return conn, addr
def handle_request(self, conn):
while 1:
try:
data = conn.recv(1024)
if not data: break
conn.send(data.upper())
except Exception as e:
print(e)
break
conn.close()
if __name__ == '__main__':
server = MyTcpServer('127.0.0.1', 8888)
pool = ProcessPoolExecutor(5) # 5个进程一直服务
while 1:
conn, addr = server.wait_accept()
pool.submit(server.handle_request, conn)# 异步提交任务
socketserver
优点:简化socket服务端创建流程。
提供服务端串行和并发两种服务模式(TCPServer,ThreadingTCPServer)
缺点:windows上无法使用多进程实现并发
import socketserver
class MyTcpHandler(socketserver.BaseRequestHandler):
def handle(self):# 通信循环
while 1:
try:
data = self.request.recv(1024)
if not data: break
self.request.send(data.upper())
except Exception as e:
print(e)
break
self.request.close()
if __name__ == '__main__':
ip_port = '127.0.0.1', 8888
server = socketserver.ThreadingTCPServer(ip_port, MyTcpHandler) # 异步处理
server.serve_forever()# 连接循环
协程
优点:单线程内实现并发,代码级别模拟IO切换,提高程序运行效率
from gevent import spawn, monkey;monkey.patch_all()# 猴子补丁,补丁:常规IO
import socket
class MyTcpServer:
def __init__(self, ip, port, my_spawn):
self.ip = ip
self.port = port
self.server = socket.socket()
self.server.bind((self.ip, self.port))
self.server.listen(5)
self.spawn = my_spawn# 保存spawn本地
def wait_accept(self):
while 1:
conn, addr = self.server.accept()
self.spawn(self.handle_request, conn)# 检测 handle_request的io
def handle_request(self, conn):
while 1:
try:
data = conn.recv(1024)
if not data: break
conn.send(data.upper())
except Exception as e:
print(e)
break
conn.close()
if __name__ == '__main__':
server = MyTcpServer('127.0.0.1', 8888, spawn)
g1 = server.spawn(server.wait_accept)# 检测wait_accept的io
g1.join()# 等待g1运行结束,即一直在循环检测io
来源:https://www.cnblogs.com/the3times/p/12821579.html
标签:python,socket,服务端,并发
0
投稿
猜你喜欢
网站设计中的面包屑[译]
2009-03-22 15:42:00
python snownlp情感分析简易demo(分享)
2021-07-18 04:32:35
SQL查询入门(上篇) 推荐收藏
2011-09-30 11:47:11
python缺失值的解决方法总结
2023-07-28 23:47:38
如何用SQLMail建立一个电子刊物自动处理系统?
2010-06-13 14:36:00
php控制反转与依赖注入举例讲解
2023-06-10 10:30:22
XML 问题: 超越DOM(轻松使用 DOM 的技巧和诀窍)
2008-09-05 17:12:00
多个版本的python共存时使用pip的正确做法
2021-06-24 10:41:17
Python面向对象编程(二)
2022-11-27 23:17:55
Oracle入侵常用操作命令整理
2009-03-04 11:11:00
python实现kNN算法
2023-01-24 13:58:06
Python+Pygame实战之吃豆豆游戏的实现
2022-10-01 17:29:39
Python实现求两个数组交集的方法示例
2023-08-03 18:57:58
Python面向对象基础入门之设置对象属性
2021-10-21 19:25:10
PHP实现判断二叉树是否对称的方法
2023-06-28 13:24:10
javascript 实现子父窗体互相传值的简单实例
2023-08-09 09:52:52
挑战! 纯Javascript 重现经典网游! <魔力宝贝>
2008-10-04 10:37:00
除Console.log()外更多的Javascript调试命令
2023-08-12 23:31:17
PHP连接MySQL数据的操作要点
2023-06-20 09:31:16
CSS分栏布局的方法:绝对定位和浮动
2009-04-30 13:10:00