从Mechanical Turk下载图片

Question

我在Mechanical Turk上有很多网址，可以从中下载上传的图片。我写了一个Python脚本来下载所有的文件。不过，我必须先登录Mechanical Turk才能访问这些文件。请问有没有什么API或者好的方法可以从Mechanical Turk下载大量文件呢？

Answer 1

Boto是一个Python库，它可以帮助你使用亚马逊的网络服务，包括一个叫做Mechanical Turk的服务。你可以在这里查看Mechanical Turk的API参考文档：http://boto.cloudhackers.com/ref/mturk.html

另外，你也可以使用urllib2、mechanize或者Scrapy这些工具来直接获取数据。这三种工具都支持基本的身份验证或者基于cookie的表单身份验证。