Python中通过代理进行多线程下载

Question

有什么好的库可以用来进行多线程的抓取/下载，并且支持多个代理吗？我看过Tkinter，它看起来不错，但有很多选择，大家有没有具体的推荐？非常感谢！

Answer 1

另外，可以看看 http://scrapy.org/，这是一个基于Twisted框架的网页抓取工具。

Answer 2

这是不是可以通过给新创建的线程传递一个网址，然后在每个线程里调用urllib2.urlopen来完成的呢？还是说有更具体的要求呢？

Answer 3

Twisted 是一个用于网络编程的框架。