带中文字符的JSON管道

2024-04-20 02:06:02 发布

您现在位置:Python中文网/ 问答频道 /正文

我想用汉字拼凑一些网页内容。内容大致如下

2018-11-20 12:42:18 [scrapy.core.scraper] DEBUG: Scraped from <200  https://cn.bing.com/dict/search?q=tool&FORM=BDVSP6&mkt=zh-cn>
{'defBing': '工具;方法;受人利用的人',
 'defWeb': '工具;方法;受人利用的人',
 'pClass': 'n.',
 'prUK': 'UK\xa0[tuːl]',
 'prUS': 'US\xa0[tul]',
 'word': 'tool'}

但经过管道处理后,内容是这样的:

{
    "word": "tool",
    "prUS": "US\u00a0[tul]",
    "prUK": "UK\u00a0[tu\u02d0l]",
    "pClass": "n.",
    "defBing": "\u5de5\u5177\uff1b\u65b9\u6cd5\uff1b\u53d7\u4eba\u5229\u7528\u7684\u4eba",
    "defWeb": "\u5de5\u5177\uff1b\u65b9\u6cd5\uff1b\u53d7\u4eba\u5229\u7528\u7684\u4eba"
}

管道看起来像:

class JsonWriterPipeline(object):
    def open_spider(self, spider):
        self.file = open('log/DICT.%s.json' % time.strftime('%Y%m%d-%H%M%S', time.localtime()), 'tw')

    def close_spider(self, spider):
        self.file.close()

    def process_item(self, item, spider):
        try:
            line = json.dumps(dict(item), indent=4) + "\n"
            self.file.write(line)
        except Exception as e:
            print(e)
        return item

我的问题是:如何保持*.json文件中的汉字打印?我真的不想要那些编码的Unicode字符:)


Tags: 工具方法selfjson内容deftoolcn
1条回答
网友
1楼 · 发布于 2024-04-20 02:06:02

json库似乎是为了逃避这些符号,请尝试将ensure_ascii=False添加到json.dumps()中,如下所示:

class JsonWriterPipeline(object):
    def open_spider(self, spider):
        self.file = open('log/DICT.%s.json' % time.strftime('%Y%m%d-%H%M%S', time.localtime()), 'tw')

    def close_spider(self, spider):
        self.file.close()

    def process_item(self, item, spider):
        try:
            line = json.dumps(dict(item), indent=4, ensure_ascii=False) + "\n"
            self.file.write(line)
        except Exception as e:
            print(e)
        return item

相关问题 更多 >