Python中删除数组中重复元素的几种方法

Python中删除数组中（通常指列表）重复元素的方法多样，主要包括使用集合（Set）转换、循环遍历结合条件判断、使用filter()函数结合lambda表达式、以及利用Python 3.6+版本引入的字典推导式（虽然不直接用于去重，但可间接实现）或dict.fromkeys()方法。最简单直接的是将列表转换为集合（自动去重），然后再转回列表。对于需要保持元素顺序的场景，则可以通过循环遍历列表，将未遇到的元素添加到新列表中。这些方法各有特点，适用于不同的场景需求。

在Python中，处理数组（通常指的是列表，因为Python中没有内置的数组类型，但列表提供了类似的功能）时，删除重复元素是一个常见的需求，这里将介绍几种实现这一目标的方法，从简单到复杂，帮助你根据自己的需求选择最合适的方式。

（图片来源网络，侵删）

方法一：使用**（Set）

（图片来源网络，侵删）

**（Set）是一个无序的、不包含重复元素的数据结构，将列表转换为**是去除重复元素的最简单方法，但需要注意的是，这种方**丢失原始列表中的元素顺序。

（图片来源网络，侵删）

original_list = [1, 2, 2, 3, 4, 4, 5]
unique_list = list(set(original_list))
print(unique_list)  # 输出可能不是 [1, 2, 3, 4, 5]，因为**是无序的

方法二：使用列表推导式

（图片来源网络，侵删）

如果你希望保持元素的原始顺序，可以使用列表推导式结合in关键字来检查元素是否已经在结果列表中。

（图片来源网络，侵删）

original_list = [1, 2, 2, 3, 4, 4, 5]
unique_list = []
for item in original_list:
    if item not in unique_list:
        unique_list.append(item)
print(unique_list)  # 输出 [1, 2, 3, 4, 5]

方法三：使用collections.OrderedDict（Python 3.6+）

（图片来源网络，侵删）

从Python 3.6开始，字典（Dictionary）保持了插入顺序，我们可以利用collections.OrderedDict（但在Python 3.7及更高版本中，普通的字典也保持了顺序）来去除重复元素，同时保持元素的顺序。

（图片来源网络，侵删）

from collections import OrderedDict
original_list = [1, 2, 2, 3, 4, 4, 5]
unique_list = list(OrderedDict.fromkeys(original_list))
print(unique_list)  # 输出 [1, 2, 3, 4, 5]

方法四：使用itertools.groupby

（图片来源网络，侵删）

虽然itertools.groupby主要用于连续元素的分组，但结合排序，它也可以用来去除重复元素，不过，这种方法同样会改变原始列表中元素的顺序（除非原始列表已经是排序的）。

（图片来源网络，侵删）

from itertools import groupby
original_list = [1, 2, 2, 3, 4, 4, 5]
unique_list = [key for key, _ in groupby(sorted(original_list))]
print(unique_list)  # 输出 [1, 2, 3, 4, 5]

常见问题解答

（图片来源网络，侵删）

问题： 如果我需要在保持元素顺序的同时删除列表中的重复元素，应该选择哪种方法？

（图片来源网络，侵删）

回答： 如果你需要保持元素的原始顺序，并且希望删除重复元素，推荐使用方法二：使用列表推导式或方法三：使用collections.OrderedDict（对于Python 3.7及更高版本，直接使用普通字典即可），这两种方法都能有效地去除重复元素，同时保持元素的原始顺序，列表推导式更直观易懂，而OrderedDict则提供了一种更简洁的写法。

（图片来源网络，侵删）