我正在使用MPI并且我想测量通信成本,以便我可以将它们与“处理”成本进行比较,例如,我需要多长时间通过n个流程分散列表然后比较它我需要多长时间对它进行排序。
有没有人知道衡量这种通讯费用的工具? (例如分散)
有没有什么可以对MPI通信成本进行测量,比如用PAPI来分析代码性能?
提前致谢!
答案 0 :(得分:27)
是的,有很多这样的工具。 MPI定义了一个工具接口,允许其他库在您的MPI函数调用中插入自己,并进行计数,计时等。
一个非常小的MPI分析工具是mpiP - 它在代码中提供了非常简短的MPI活动摘要。
IPM库非常容易构建,并为您提供大量的MPI计数和时间,并因此提供了一个很好的HTML文件。你提到PAPI;如果可用,IPM还将集成PAPI计数器。我们经常在我们的中心使用这个,我认为这会做你喜欢的。如果您使用MPI的动态库构建程序,则甚至不需要重新编译即可使用它(mpiP具有相同的属性)。
Jumpshot,它带有MPICH2但可以使用任何MPI构建,实际上在时间线上显示每个MPI操作需要多长时间。
OpenSpeedshop提供非常详细的代码性能测量,突出显示“昂贵”的行;它还具有MPI跟踪模式,可以按代码行识别MPI时间。安装起来可能很棘手。
在频谱的商业部分,来自TU Dresden和Intel Trace Analyzer and Collector(ITAC)的Vampir。 Vampir使用开源VampirTrace库收集源级,MPI和OpenMP跟踪,该库还与PAPI集成以提供详细的事件和计数器跟踪。 VampirTrace的痕迹采用开放式跟踪格式,除了Vampir之外,还可以通过各种其他工具读取。
ITAC是Intel Cluster Studio XE的一部分。它主要用于与英特尔MPI配合使用,与Vampir共享相同的祖先代码,提供或多或少相同的功能。它的一个不错的功能是包含自动运行时MPI正确性检查器。
Allinea MAP是来自Allinea的MPI分析器,它使用集成的源浏览器提供性能分析,该浏览器显示通信/计算成本以及源代码的各个行。它还显示了性能信息的高级图,包括内存,CPU指令和通信。
但是还有其他更高级别的工具不仅可以提供报告,还可以提供建议。 TACC的perfexpert是一个基于命令行的工具,它需要进行大量测量并提供一些性能调整建议。来自Jülich的Scalasca,使用大量源代码检测重新编译代码,并指出负载不平衡,特别是昂贵的MPI集合等。它还可以与Vampir集成以进行详细的跟踪分析。