Python线程的性能分析

Question

我正在尝试找出如何测量我应用中几个Python线程的性能。目前，我有几个任务根据用户输入在不同的线程上执行，我想测量每个线程的执行时间，甚至是内存消耗。我尝试过使用cProfile（在每个线程实例化时使用，然后把数据写入文件，最后汇总所有结果），但效果有限。此外，我还有一个问题，就是有一些阻塞的输入输出，这让我的结果变得不准确。有没有什么有效的方法来分析我的应用性能呢？

Answer 1

解决这个问题有几种不同的方法。cProfile 是一个很不错的工具，它是Python自带的，不过很多人觉得在多线程的情况下使用它会有些麻烦。一个解决办法是为每个线程单独运行一个cProfile实例，然后用Stats.add把结果合并起来。

如果这样的方法效果不如你预期的好，另一个选择是使用Yappi，我在处理一些特殊的多线程情况时用过它，效果不错。它的文档写得很好，所以你在设置的时候应该不会遇到太大困难。

如果你想专门分析内存使用情况，可以看看Heapy。不过要注意，如果你的代码有问题，它可能会生成一些你见过的最大日志文件！