使用Python从ASPX网页获取文件

Question

我想从这个网站下载一个CSV文件，但每次用这段代码下载时（这段代码几周前还可以用），或者用wget命令时，我得到的都是一个HTML文件。

url = "http://.....aspx"

file_name = "%s.csv" % url.split('/')[3]
u = urllib2.urlopen(url)
f = open(file_name, 'wb')
meta = u.info()
file_size = int(meta.getheaders("Content-Length")[0])
print "Downloading: %s Bytes: %s" % (file_name, file_size)

file_size_dl = 0
block_sz = 8192
while True:
    buffer = u.read(block_sz)
    if not buffer:
        break

    file_size_dl += len(buffer)
    f.write(buffer)
    status = r"%10d  [%3.2f%%]" % (file_size_dl, file_size_dl * 100. / file_size)
    status = status + chr(8)*(len(status)+1)
    print status,

我该如何用Python再次获取这个文件呢？

谢谢！

Answer 1

通过使用Requests库，而不是urllib2，解决了这个问题：

import requests

url = "http://www.....aspx?download=1"

file_name = "Data.csv"
u = requests.get(url)

file_size = int(u.headers['content-length'])
print "Downloading: %s Bytes: %s" % (file_name, file_size)

with open(file_name, 'wb') as f:
    for chunk in u.iter_content(chunk_size=1024): 
        if chunk: # filter out keep-alive new chunks
            f.write(chunk)
            f.flush()
f.close()