从其他程序运行brightway2模型

时间:2016-11-07 14:53:15

标签: python brightway

我想在优化框架(https://brightwaylca.org/)中运行Brightway2。

基本上,我想创建一个Python脚本,将输入文件发送到外部模型(也在Python中)并获取输出。然后,该脚本将活动数据写入Brightway数据库,然后运行Brightway2以获得LCA分数。然后,该分数将用于基于优化算法更新输入文件。

Brightway2似乎是这类项目的唯一资格,但我在实施方面遇到了麻烦。基本上,我想知道最简单的方法是什么。我有外部模型和优化算法。

到目前为止,我已经为我的Brightway2模型使用了Jupyter笔记本,但是当我将笔记本转换为python模块并在IPython的Brightway2环境中运行时,我经常会遇到错误。模块在IPython中的运行方式是否与Jupyter笔记本不同?

我正在考虑使用PyAutoGUI将输入发送到Brightway2环境和IPython。是否有更容易/更好的方法来做到这一点?

有没有办法在不运行Brightway2环境的情况下导入必要的Brightway模块?

由于

以下是我通过IPython获得的错误示例,但不是Jupyter的错误。当我在Jupyter笔记中运行以下代码时它运行正常。

from brightway2 import *

def main():
    project_name = "Algae_LCA"
    projects.set_current(project_name)
    bw2setup()
    methods.load()

    #Set directory for Ecoinvent v3.2 datasets and name the database.
    data_directory =  "E:\GOOGLE~1\ECOINV~1\ECOINV~1.2-C\datasets"
    database_name = "Ecoinvent_v3.2-Conseq"


    #Import the database, apply cleaning strategies, and provide statistics  
    ei = SingleOutputEcospold2Importer(data_directory, database_name)
    ei.apply_strategies()
    ei.statistics()

但如果我在bw2环境中的IPython中运行它,它会挂起/崩溃

 ei = SingleOutputEcospold2Importer(data_directory, database_name)

它给了我以下错误:

-------------------------------------------------------------
AttributeError                            Traceback (most rec
C:\bw2-python\Algae LCA\BW2_Project_Database_Setup_Test.py in
 36
 37 if __name__ == "__main__":
 ---> 38     main()
 39

C:\bw2-python\Algae LCA\BW2_Project_Database_Setup_Test.py in
 25     #Import the database, apply cleaning strategies,
 26
 ---> 27 ei = SingleOutputEcospold2Importer(data_directory
 28      #ei.apply_strategies()
 29      #ei.statistics()

 C:\bw2-python\envs\bw2\lib\site-packages\bw2io\importers\ecos
 47
 48         start = time()
 ---> 49    self.data = Ecospold2DataExtractor.extract(di
 50         print(u"Extracted {} datasets in {:.2f} secon
 51             len(self.data), time() - start))

 C:\bw2-python\envs\bw2\lib\site-packages\bw2io\extractors\eco
 77
 78         if use_mp:
 ---> 79            with multiprocessing.Pool(processes=multi
 80                 print("Extracting XML data from {} da
 81                 results = [

C:\bw2-python\envs\bw2\lib\multiprocessing\context.py in Pool
116         from .pool import Pool
117         return Pool(processes, initializer, initargs,
--> 118               context=self.get_context())
119
120     def RawValue(self, typecode_or_type, *args):

C:\bw2-python\envs\bw2\lib\multiprocessing\pool.py in __init_
166         self._processes = processes
167         self._pool = []
--> 168     self._repopulate_pool()
169
170         self._worker_handler = threading.Thread(

C:\bw2-python\envs\bw2\lib\multiprocessing\pool.py in _repopu
231             w.name = w.name.replace('Process', 'PoolW
232             w.daemon = True
--> 233         w.start()
234             util.debug('added worker')
235

C:\bw2-python\envs\bw2\lib\multiprocessing\process.py in star
103                'daemonic processes are not allowed to
104         _cleanup()
--> 105     self._popen = self._Popen(self)
106         self._sentinel = self._popen.sentinel
107         _children.add(self)

C:\bw2-python\envs\bw2\lib\multiprocessing\context.py in _Pop
311         def _Popen(process_obj):
312             from .popen_spawn_win32 import Popen
--> 313         return Popen(process_obj)
314
315     class SpawnContext(BaseContext):

 C:\bw2-python\envs\bw2\lib\multiprocessing\popen_spawn_win32.
 32
 33     def __init__(self, process_obj):
 ---> 34    prep_data = spawn.get_preparation_data(proces
 35
 36         # read end of pipe will be "stolen" by the ch

C:\bw2-python\envs\bw2\lib\multiprocessing\spawn.py in get_pr
171     # or through direct execution (or to leave it alo
172     main_module = sys.modules['__main__']
--> 173 main_mod_name = getattr(main_module.__spec__, "na
174     if main_mod_name is not None:
175         d['init_main_from_name'] = main_mod_name

AttributeError:模块' main '没有属性' spec '

1 个答案:

答案 0 :(得分:0)

您遇到的问题是multiprocessing doesn't work in the (i)python shell on Windows。笔记本通过魔术来避免这个问题。 Ecospold2DataExtractor默认使用多处理来加速许多Ecospold2文件的提取。这应该是可选的;目前,您可以执行以下操作之一:

  1. 您只需要导入一次ecoinvent 3.2,这可以在a)笔记本中完成,或者b)在命令行上调用的单独python脚本。
  2. 使用hack编写导入脚本然后导入它,而不是直接在python会话中导入(有关详细信息,请参阅上面的SO链接)。
  3. 回应其他一些问题/担忧:

      

    在IPython中,模块应该以不同于Jupyter笔记本的方式运行吗?

    没有。任何时候都应该报告as a bug

      

    我正在考虑使用PyAutoGUI将输入发送到Brightway2环境和IPython。是否有更容易/更好的方法来做到这一点?

    GUI很难 - 欢迎你写一个!

      

    有没有办法在不运行Brightway2环境的情况下导入必要的Brightway模块?

    没有Brightway2 environment - 只是一组可以导入的python包。您可以单独导入它们(尽管有些相互依赖),例如bw2calc可以独立于其他一切运行。