使用嵌套类在进程之间共享队列(Python)

时间:2010-10-29 03:35:40

标签: python process inner-classes

我有一个关于在Python中进程之间共享队列的问题。下面,我有三个队列,一个主要进程和三个内部进程。每个内部进程都将添加并从各个队列中获取值(它们需要轻松访问队列)。

我认为它现在正常运作,但是这段代码是我要开展的一个大项目的基础,我想确保没有更好的方法来做到这一点我不喜欢知道。我只想出了这个想法。从其他一些帖子看来,嵌套类不像Python那样。

有什么建议吗?这段代码容易阅读还是难以阅读?放弃嵌套类或保持原样?

谢谢大家。

class MainController(Process):
    def __init__(self):
        self.queue_stream   = Queue()
        self.queue_language = Queue()
        self.queue_expander = Queue()

        self.control_stream   = self.StreamController(self).start()
        self.control_language = self.LanguageController(self).start()
        self.control_expander = self.ExpanderController(self).start()

        print 'Launching Main Controller'

    class StreamController(Process):
        def __init__(self, main):
            Process.__init__(self)
            self.main = main
            print 'Launching Stream Controller'

        def run(self):
            while True:
                self.main.queue_stream.put('hello, stream')

    class LanguageController(Process):
        def __init__(self, main):
            Process.__init__(self)
            self.main = main
            print 'Launching Language Controller'

        def run(self):
            while True:
                print self.main.queue_stream.get()
                self.main.queue_language.put('hello, language')

    class ExpanderController(Process):
        def __init__(self, main):
            Process.__init__(self)
            self.main = main
            print 'Launching Expander Controller'

        def run(self):
            while True:
                print self.main.queue_language.get()
                self.main.queue_expander.put('hello, expander')

def main():
    # Launch all queues for the system
    control_main = MainController()

if __name__ == '__main__':
    print 'Launching System...'
    main()

2 个答案:

答案 0 :(得分:1)

我建议您使用线程模块而不是进程。我建议你只有在子类扩展父类的功能时才使用嵌套类。

class   WorkerThread(threading.Thread):

另一个建议是在子线程之间使用共享锁,以防止共享队列中的竞争条件。

            tasks_lock.acquire()
            ret = tasks_queue.get()
            tasks_lock.release()

看看这个Example

答案 1 :(得分:0)

孩子现在必须知道父亲的实施。我劝阻

def infinite_producer(queue):
    while True:
        queue.put('hello, stream')

class MainController(Process):
    def __init__(self):
        self.queue_stream   = Queue()
        self.queue_language = Queue()
        self.queue_expander = Queue()
        self.self.control_stream = Process(target=infinite_producer,self.queue_stream)

    def run(self):
        self.control_stream.start()

 #... etc you get the idea.

if __name__ == '__main__':
    print 'Launching System...'
    control_main = MainController()
    control_main.start()