加载和解析包含多个JSON对象的JSON文件

Question

我正在尝试用Python加载和解析一个JSON文件。但我无法加载文件：

import json
json_data = open('file')
data = json.load(json_data)

收益率：

ValueError: Extra data: line 2 column 1 - line 225116 column 1 (char 232 - 160128774)

{"votes": {"funny": 2, "useful": 5, "cool": 1}, "user_id": "harveydennis", "name": "Jasmine Graham", "url": "http://example.org/user_details?userid=harveydennis", "average_stars": 3.5, "review_count": 12, "type": "user"}
{"votes": {"funny": 1, "useful": 2, "cool": 4}, "user_id": "njohnson", "name": "Zachary Ballard", "url": "https://www.example.com/user_details?userid=njohnson", "average_stars": 3.5, "review_count": 12, "type": "user"}
{"votes": {"funny": 1, "useful": 0, "cool": 4}, "user_id": "david06", "name": "Jonathan George", "url": "https://example.com/user_details?userid=david06", "average_stars": 3.5, "review_count": 12, "type": "user"}
{"votes": {"funny": 6, "useful": 5, "cool": 0}, "user_id": "santiagoerika", "name": "Amanda Taylor", "url": "https://www.example.com/user_details?userid=santiagoerika", "average_stars": 3.5, "review_count": 12, "type": "user"}
{"votes": {"funny": 1, "useful": 8, "cool": 2}, "user_id": "rodriguezdennis", "name": "Jennifer Roach", "url": "http://www.example.com/user_details?userid=rodriguezdennis", "average_stars": 3.5, "review_count": 12, "type": "user"}

Answer 1

您有一个JSON行格式的文本文件。您需要逐行解析您的文件：

import json

data = []
with open('file') as f:
    for line in f:
        data.append(json.loads(line))

每一行都包含有效的JSON，但作为一个整体，它不是有效的JSON值，因为没有顶级列表或对象定义。

请注意，因为文件每行都包含JSON，所以省去了尝试一次性解析所有文件或找到流式JSON解析器的麻烦。您现在可以选择分别处理每一行，然后再移到下一行，这样可以节省处理过程中的内存。如果您的文件真的很大，您可能不希望将每个结果追加到一个列表中，然后处理所有内容。

如果您有一个包含单独的JSON对象的文件，中间带有分隔符，那么如何使用'JSON'模块一次读入一个JSON对象？若要使用缓冲方法解析出单个对象，请执行以下操作。