là có bất kỳ hồ bơi cho ThreadingMixIn và ForkingMixIn cho SocketServer?

Question

Tôi đã cố gắng để làm một proxy http sử dụng BaseHttpServer mà là dựa trên SocketServer trong đó có 2 đồng bộ mixins (ThreadingMixIn và ForkingMixIn)

vấn đề với hai rằng họ làm việc trên mỗi yêu cầu (phân bổ một chủ đề mới hoặc nĩa một quy trình con mới cho mỗi yêu cầu)

có một Mixin sử dụng một nhóm gồm 4 quy trình con và 40 luồng trong mỗi để các yêu cầu được xử lý bởi các chủ đề đã tạo chưa?

vì đây sẽ là hiệu suất lớn và tôi đoán nó sẽ tiết kiệm một số tài nguyên.

Answer 1

Tôi đã bắt đầu một dự án mà giải quyết vấn đề này

https://github.com/muayyad-alsadi/python-PooledProcessMixIn

có thể bạn muốn tham gia cùng tôi hoàn thành Todos (dọn dẹp sau khi tổ hợp phím CTRL + C)

Answer 2

Bạn có thể sử dụng một hồ bơi từ concurrent.futures (trong stdlib từ Python 3.2):

from BaseHTTPServer import HTTPServer, test 
from SimpleHTTPServer import SimpleHTTPRequestHandler 
from SocketServer  import ThreadingMixIn 

from concurrent.futures import ThreadPoolExecutor # pip install futures 

class PoolMixIn(ThreadingMixIn): 
    def process_request(self, request, client_address): 
     self.pool.submit(self.process_request_thread, request, client_address) 

def main(): 
    class PoolHTTPServer(PoolMixIn, HTTPServer): 
     pool = ThreadPoolExecutor(max_workers=40) 

    test(HandlerClass=SimpleHTTPRequestHandler, ServerClass=PoolHTTPServer) 

if __name__=="__main__": 
    main() 

Như bạn có thể thấy việc thực hiện đối với một trường hợp luồng là khá tầm thường.

Nếu bạn lưu nó vào server.py sau đó bạn có thể chạy nó như:

$ python -mserver 

lệnh này sử dụng tối đa 40 chủ đề để phục vụ các yêu cầu trên http://your_host:8000/.

Trường hợp sử dụng chính là HTTPServer là dành cho mục đích thử nghiệm.