将具有转义 unicode 的 json 文件转换为实数 unicode，同时保留转义的双引号

Question

我在json文件中有一个转义的unicode字符串，例如：

{"word": "\u043a\u043e\u0433\u0434\u0430 \u0440\u0430\u043a \u043d\u0430 \u0433\u043e\u0440\u0435 \u0441\u0432\u0438\u0441\u0442\u043d\u0435\u0442",
"glosses": ["when pigs fly, never (lit., \"when the crawfish whistles on the mountain\")"]}}

我想转换这个文件，以便显示正确的unicode。在Python中，我发现了几个建议，例如:

import codecs

# opens a file and converts input to true Unicode
with codecs.open("kaikki.org-dictionary-Russian.json", "rb", "unicode_escape") as my_input:
contents = my_input.read()
# type(contents) = unicode 

# opens a file with UTF-8 encoding
with codecs.open("utf8-dictionary.json", "wb", "utf8") as my_output:
my_output.write(contents)

我还在不使用“编解码器”的情况下编写了另一个类似的函数，但两者都得到了相同的结果。执行该命令后，我得到:

{"word": "когда рак на горе свистнет", 
"glosses": ["when pigs fly, never (lit., "when the crawfish whistles on the mountain")"]}

转义的双引号不再转义，这使得JSON无效。我如何才能避免这种情况？

编辑:我忘了说我有一个jsonlines格式的文件，所以每一行都是一个json对象，以{...}.

感谢所有的帮助！我的最终解决方案:

import json

with open("kaikki.org-dictionary-Russian.json", "r", encoding="utf-8") as input, \
open("utf8-dictionary-4.json", "w", encoding="utf-8") as out:
for line in input:
    data = json.loads(line) 
    json.dump(data, out, ensure_ascii=False)
    out.write("\n")

Answer 1

使用json库处理json数据。它将确保序列化数据是有效的JSON，并且有一些选项用于控制输出，例如缩进的漂亮打印和非ASCII字符，而不进行转义。

首先，使用 json.load（） 解析数据：

>>> with open("kaikki.org-dictionary-Russian.json", encoding="utf8") as f:
...     data = json.load(f)

注意:在Python 3中，不需要使用< code>codecs库来读/写文件。只需在内置的< code>open函数中指定文件编码即可。

再次序列化数据，现在使用< code >确保_ascii选项，这导致转义序列的使用最少(只有双引号、换行符和制表符被IIRC转义):

>>> with open("utf8-dictionary.json", "w", encoding="utf8") as f:
...     json.dump(data, f, ensure_ascii=False)