Python使用Unicode参数请求URL

Question

我目前正在尝试使用请求库用python中的日语字符和短语点击google tts url，http://translate.google.com/translate_tts。

下面是一个例子：

http://translate.google.com/translate_tts?tl=ja&q=

但是，当我尝试使用python请求库下载端点返回的mp3时，得到的mp3是空的。我已经验证了我可以在使用非unicode字符（通过romanji）的请求中点击这个URL，并且得到了正确的响应。

这是我用来提出请求的代码的一部分

langs = {'japanese': 'ja',
         'english': 'en'}

def get_sound_file_for_text(text, download=False, lang='japanese'):

    r = StringIO()
    glang = langs[lang]
    text = text.replace('*', '')
    text = text.replace('/', '')
    text = text.replace('x', '')
    url = 'http://translate.google.com/translate_tts'
    if download:
        result = requests.get(url, params={'tl': glang, 'q': text})
        r.write(result.content)
        r.seek(0)
        return r
    else:
        return url

另外，如果我在这个片段中打印text或url，则在控制台中正确呈现假名/汉字。

编辑：

如果我尝试对unicode编码并引用它，我仍然得到相同的响应。

# -*- coding: utf-8 -*-

from StringIO import StringIO
import urllib
import requests

__author__ = 'jacob'

langs = {'japanese': 'ja',
         'english': 'en'}

def get_sound_file_for_text(text, download=False, lang='japanese'):

    r = StringIO()
    glang = langs[lang]
    text = text.replace('*', '')
    text = text.replace('/', '')
    text = text.replace('x', '')
    text = urllib.quote(text.encode('utf-8'))
    url = 'http://translate.google.com/translate_tts?tl=%(glang)s&q=%(text)s' % locals()
    print url
    if download:
        result = requests.get(url)
        r.write(result.content)
        r.seek(0)
        return r
    else:
        return url

它返回：

http://translate.google.com/translate_tts?tl=ja&q=%E3%81%B2%E3%81%A8%E3%81%A4

看起来应该有用，但没有

编辑2:

如果尝试使用urllb/urllib2，则会出现403错误。

编辑3:

因此，这个问题/行为似乎仅仅局限于这个端点。如果我尝试以下URL，则使用其他终结点。

http://www.kanjidamage.com/kanji/13-un-%E4%B8%8D

从请求和浏览器中，我得到相同的响应（它们匹配）。如果我在服务器上尝试使用ascii字符，比如这个url。

http://translate.google.com/translate_tts?tl=ja&q=sayonara

我也得到了同样的回应（他们再次匹配）。但如果我尝试将unicode字符发送到这个URL，我会在浏览器上得到一个正确的音频文件，但不是来自发送音频文件但没有声音的请求。

http://translate.google.com/translate_tts?tl=ja&q=%E3%81%B2%E3%81%A8%E3%81%A4

所以，这种行为似乎仅限于Google TTL的URL？

Answer 1

我以前做过这个小方法来帮助我进行UTF-8编码。我在向CSV打印西里尔文和中日韩文时遇到问题，这就成功了。

def assist(unicode_string):
    utf8 = unicode_string.encode('utf-8')
    read = utf8.decode('string_escape')

    return read   ## UTF-8 encoded string

另外，确保在.py的开头有这两行代码。

#!/usr/bin/python
# -*- coding: utf-8 -*-

第一行只是一个很好的python习惯，它指定在.py上使用哪个编译器（只有在机器上加载了多个python版本时才真正有用）。第二行指定python文件的编码。对此给出了一个稍长的答案here。