python解析含有重复key的json方法

python自带的json包能够方便的解析json文本，但是如果json文本中包含重复key的时候，解析的结果就是错误的。如下为例 {"key":"1", "key":"2", "key":"3", "key2":"4"} 经过解析，结果却如下所示： { "key":"3", "key2":"4" } 原因是python解析的时候是创建一个字典，首先会读取到key的值，但是后面遇到重复键的时候，后来的值会覆盖原来的值，导致最后只有一个key的值留下来。 这肯定不是我们想要的结果，其中一种结果可以是将相同键的值聚合成一个数组，即如下所示。 { "key":["1","2"," 在Python中，内置的`json`模块提供了便捷的方式来解析JSON（JavaScript Object Notation）文本，这是一种广泛用于数据交换的轻量级格式。然而，当JSON数据包含重复的键时，Python的标准解析方式可能会导致问题。因为JSON对象在Python中被解析成字典，而字典的特性是不允许有重复的键，一旦遇到重复的键，后面的值会覆盖前面的值。例如，解析以下JSON字符串： ```json {"key": "1", "key": "2", "key": "3", "key2": "4"} ``` 默认情况下，Python会得到如下结果： ```python {"key": "3", "key2": "4"} ``` 可以看到，"key"的最后一个值"3"覆盖了前面的"1"和"2"。为了解决这个问题，我们需要一种机制来保留所有重复键的值，而不是仅仅保留最后一个。 `json.loads()`函数提供了一个解决方案，通过`object_pairs_hook`参数，我们可以自定义一个回调函数，该函数会在解析JSON对象时被调用，允许我们定制处理字典的方式。我们可以通过这个参数来实现将重复键的值聚合到一个列表中的功能。 下面是一个示例的`object_pairs_hook`函数： ```python def my_obj_pairs_hook(lst): result = {} count = {} for key, val in lst: if key in count: count[key] += 1 else: count[key] = 1 if key in result: if count[key] > 2: result[key].append(val) else: result[key] = [result[key], val] else: result[key] = val return result ``` 使用这个函数，我们可以这样解析包含重复键的JSON字符串： ```python import json data = '{"key": "1", "key": "2", "key": "3", "key2": "4"}' parsed_data = json.loads(data, object_pairs_hook=my_obj_pairs_hook) ``` 现在，`parsed_data`将是： ```python { "key": ["1", "2", "3"], "key2": "4" } ``` 这样，我们就成功地保留了所有重复键的值。这个方法同样适用于解析更复杂的JSON文本，每个解析出的字典都会经过`my_obj_pairs_hook`函数的处理。 对于处理大量JSON数据或更复杂的结构，理解并利用`object_pairs_hook`这一特性至关重要。它可以让我们在解析JSON时灵活地进行数据转换，确保不会丢失任何信息。在处理具有重复键的JSON时，这种方法不仅能够避免信息丢失，还能保持数据的完整性。如果你需要处理的JSON数据涉及地理信息，如GeoJSON，或者需要进行XML与JSON之间的转换，也可以结合其他Python库，如`shapefile`、`xmltodict`等，以实现更复杂的数据处理任务。