python 去重

Question

在 python 中，我得到了一个这样的数据。

persontel = （{'name'：'lyli'；'tel':'123'},{'name':'linlei';'tel':'125'},{'name':'lyli';'tel':'123'}）

我怎么样为这样的数据去重呢？想达到的效果是，最后：

persontel = （{'name'：'lyli'；'tel':'123'},{'name':'linlei';'tel':'125'}）

求大神指教。

Answer 1

persontel = [{'name':'lyli','tel':'123'},{'name':'linlei','tel':'125'},{'name':'lyli','tel':'123'}]
print [dict(t) for t in set([tuple(person.items()) for person in persontel])]

因为 dict 是 unhashable， 转换成 tuple 即可。

Answer 2

集合中的元素没有重复，所以你需要做的仅仅是把列表转成集合。

set(persontel)

Answer 3

如果要保持有序的话, 可以这样, 但是效率不高.

这是改正后的数据.

persontel = ({'name':'lyli','tel':'123'},{'name':'linlei','tel':'125'},    {'name':'lyli','tel':'123'})

然后:

persontel = [ x for i,x in enumerate(persontel) if x not in persontel[:i] ]

Answer 4

我问过相似的问题，结果被人踩了好多遍，深知新手的不容易。后来自己找身边的人问出了解决办法，看你是新手，帮你一把吧！
首先，python没有这样的数据格式，

persontel = （{'name'：'lyli'；'tel':'123'},{'name':'linlei';'tel':'125'},{'name':'lyli';'tel':'123'}）

我是这样实现的：

1. 用map方法将persontel中的元素转换成str类型，并返回list
2. 用set对上面的list去重
3. 用eval函数将list中各元素转换成python的dict类型
4. 将list类型的数据转换成tuple类型

代码如下：

persontel = ({'name':'lyli','tel':'123'},{'name':'linlei','tel':'125'},{'name':'lyli','tel':'123'})
persontel = tuple(map(eval,set(map(str,persontel))))
print persontel

---

ps:惭愧惭愧，此答案可以忽略，请参考Zhongwei Sun 的正解