这篇文章主要介绍了python按照list中字典的某key去重的示例代码，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
一、需求说明
当我们写爬虫的时候，经常会遇到json格式的数据，它通常是如下结构：
data = [{'name':'小K','score':100}, {'name':'小J','score':98}, {'name':'小Q','score':95}, {'name':'小K','score':100}] 很显然名字为小K的数据重复了，我们需要进行去重。通常对于list的去重，我们可以用set()函数，即：
data = list(set(data))
然而，运行之后你会发现它报错了：
list里的数据不能是dict类型，那么该怎么办呢？
二、我的解决方案
定义一个去重的函数即可，根据里面的某个key，对数据进行筛选去重：
def DelRepeat(data,key): new_data = [] # 用于存储去重后的list values = [] # 用于存储当前已有的值 for d in data: if d[key] not in values: new_data.append(d) values.append(d[key]) return new_data
参数data为需要去重的list，key为去重的健（即按照哪个key来去重），去重后结果为：
[{'name': '小K', 'score': 100},
{'name': '小J', 'score': 98},
{'name': '小Q', 'score': 95}]
成功去重！
以上就是python按照list中字典的某key去重的示例代码的详细内容，更多请关注0133技术站其它相关文章！
