python 实现socket服务端并发的四种方式

作者:the3times 时间:2022-08-09 22:19:46 

多进程&多线程

服务端:多进程和多线程的开启方式相同。

缺点:<1> 由于Cpython的GIL,导致同一时间无法运行多个线程;<2> 不可能无限开进进程或线程

解决办法:多进程、concurrent.futures.ProcessPoolExecutor、线程池


import socket
from multiprocessing import Process
from threading import Thread

class MyTcpServer:
 def __init__(self, ip, port):
   self.ip = ip
   self.port = port
   self.server = socket.socket()
   self.server.bind((self.ip, self.port))
   self.server.listen(5)

def wait_accept(self):
   conn, addr = self.server.accept()
   return conn, addr

def handle_request(self, conn):
   while 1:
     try:
       data = conn.recv(1024)
       if not data: break
       conn.send(data.upper())
     except Exception as e:
       print(e)
       break
   conn.close()

if __name__ == '__main__':
 server = MyTcpServer('127.0.0.1', 8888)
 while 1:
   conn, addr = server.wait_accept()
   p = Process(target=server.handle_request, args=(conn, ))# 创建一个进程
   p.start()# 告诉操作提供,开启这个进程

进程池&线程池

异步提交任务,支持异步接收返回结果(submit返回一个futures对象,调用add_done_callback方法)


import socket
from concurrent.futures import ProcessPoolExecutor
# from concurrent.futures import ThreadPoolExecutor

class MyTcpServer:
 def __init__(self, ip, port):
   self.ip = ip
   self.port = port
   self.server = socket.socket()
   self.server.bind((self.ip, self.port))
   self.server.listen(5)

def wait_accept(self):
   conn, addr = self.server.accept()
   return conn, addr

def handle_request(self, conn):
   while 1:
     try:
       data = conn.recv(1024)
       if not data: break
       conn.send(data.upper())
     except Exception as e:
       print(e)
       break
   conn.close()

if __name__ == '__main__':
 server = MyTcpServer('127.0.0.1', 8888)
 pool = ProcessPoolExecutor(5)    # 5个进程一直服务

while 1:
   conn, addr = server.wait_accept()
   pool.submit(server.handle_request, conn)# 异步提交任务

socketserver

优点:简化socket服务端创建流程。
提供服务端串行和并发两种服务模式(TCPServer,ThreadingTCPServer)
缺点:windows上无法使用多进程实现并发


import socketserver

class MyTcpHandler(socketserver.BaseRequestHandler):
 def handle(self):# 通信循环
   while 1:
     try:
       data = self.request.recv(1024)
       if not data: break
       self.request.send(data.upper())
     except Exception as e:
       print(e)
       break
   self.request.close()

if __name__ == '__main__':
 ip_port = '127.0.0.1', 8888
 server = socketserver.ThreadingTCPServer(ip_port, MyTcpHandler) # 异步处理
 server.serve_forever()# 连接循环

协程

优点:单线程内实现并发,代码级别模拟IO切换,提高程序运行效率


from gevent import spawn, monkey;monkey.patch_all()# 猴子补丁,补丁:常规IO
import socket

class MyTcpServer:
 def __init__(self, ip, port, my_spawn):
   self.ip = ip
   self.port = port
   self.server = socket.socket()
   self.server.bind((self.ip, self.port))
   self.server.listen(5)
   self.spawn = my_spawn# 保存spawn本地

def wait_accept(self):
   while 1:
     conn, addr = self.server.accept()
     self.spawn(self.handle_request, conn)# 检测 handle_request的io

def handle_request(self, conn):
   while 1:
     try:
       data = conn.recv(1024)
       if not data: break
       conn.send(data.upper())
     except Exception as e:
       print(e)
       break
   conn.close()

if __name__ == '__main__':
 server = MyTcpServer('127.0.0.1', 8888, spawn)
 g1 = server.spawn(server.wait_accept)# 检测wait_accept的io
 g1.join()# 等待g1运行结束,即一直在循环检测io

来源:https://www.cnblogs.com/the3times/p/12821579.html

标签:python,socket,服务端,并发
0
投稿

猜你喜欢

  • 轻量级的Web框架Flask 中模块化应用的实现

    2021-04-07 13:08:16
  • TensorFlow的权值更新方法

    2022-12-24 21:41:08
  • Python入门篇之函数

    2023-03-10 05:41:00
  • Python *args和**kwargs用法实例解析

    2023-01-16 18:30:55
  • python网络编程之数据传输UDP实例分析

    2022-12-07 12:42:41
  • python做量化投资系列之比特币初始配置

    2021-06-28 06:01:31
  • MySQL中SQL模式的特点总结

    2024-01-13 16:08:05
  • Maven中央仓库正式成为Oracle官方JDBC驱动程序组件分发中心(推荐)

    2024-01-26 05:26:27
  • python绘制堆叠条形图介绍

    2021-07-01 23:12:36
  • Pycharm 2019 破解激活方法图文详解

    2023-10-31 10:49:04
  • 简析Oracle数据库常见问题及解决方案

    2024-01-24 11:15:01
  • MySQL批量SQL插入性能优化详解

    2024-01-21 15:25:59
  • 使用批处理脚本自动生成并上传NuGet包(操作方法)

    2021-12-24 18:05:34
  • Python绘制简单散点图的方法

    2023-02-22 02:01:07
  • 详解如何在 Linux 中安装最新的 Python 3.6 版本

    2022-03-25 15:06:21
  • 纯python实现机器学习之kNN算法示例

    2021-05-02 22:57:17
  • python 在mysql中插入null空值的操作

    2022-09-24 09:48:40
  • Pandas之缺失数据的实现

    2022-05-04 19:00:05
  • Spring MVC 框架搭建配置方法及详解

    2024-03-13 19:04:36
  • GitLab使用外部提供的Redis缓存数据库的方法详解

    2024-01-23 10:02:57
  • asp之家 网络编程 m.aspxhome.com