如何在 Python 中去除列表重复项并保留顺序

编程狮(w3cschool.cn) 2025-06-09 11:49:39 浏览数 (40)
反馈

Python 编程中,列表(list)是一种常用的数据结构,但有时列表中会出现重复项,这可能会影响程序的执行效率或导致错误结果。本文将为你详细介绍如何去除列表中的重复项,并保留元素的原始顺序,让你轻松掌握这一实用技能,开启高效编程之旅。

列表与集合的区别

列表和集合(set)是 Python 中两种重要的数据结构。它们的主要区别在于:列表中的元素可以重复出现,而集合中的元素必须唯一。因此,如果我们把一个列表转换为集合,重复项就会被自动去除。不过,集合中的元素顺序是不固定的,这与列表中元素的原始顺序可能不同。例如:

原列表 = [5, 10, 15, 20, 3, 15, 25, 20, 30, 10, 100]
集合 = set(原列表)
print(list(集合))  # 输出结果可能为 [3, 100, 5, 10, 15, 20, 25, 30]

可以看到,转换后的集合虽然去除了重复项,但元素顺序发生了变化。

去除重复项并保留顺序的方法

方法一:使用 for 循环追加唯一项到新列表

我们可以创建一个空列表,然后遍历原列表,将第一次出现的元素追加到新列表中。这种方法简单易懂,适合初学者。

原列表 = [5, 10, 15, 20, 3, 15, 25, 20, 30, 10, 100]
去重列表 = []
for 数字 in 原列表:
    if 数字 not in 去重列表:
        去重列表.append(数字)
print(去重列表)  # 输出 [5, 10, 15, 20, 3, 25, 30, 100]

方法二:使用列表推导式

列表推导式可以使代码更加简洁。但需要注意的是,这种方法在处理大量数据时,效率可能不如其他方法。

原列表 = [5, 10, 15, 20, 3, 15, 25, 20, 30, 10, 100]
去重列表 = []
[去重列表.append(数字) for 数字 in 原列表 if 数字 not in 去重列表]
print(去重列表)  # 输出 [5, 10, 15, 20, 3, 25, 30, 100]

方法三:使用 OrderedDict.fromkeys()

在 Python 3.7 及以后版本中,普通字典已经支持插入顺序。但在早期版本中,可以使用 collections 模块中的 OrderedDict 类来保留元素顺序。fromkeys() 方法可以基于列表元素创建一个有序字典,然后将其转换回列表。

原列表 = [5, 10, 15, 20, 3, 15, 25, 20, 30, 10, 100]
from collections import OrderedDict
去重列表 = list(OrderedDict.fromkeys(原列表))
print(去重列表)  # 输出 [5, 10, 15, 20, 3, 25, 30, 100]

方法四:使用 reduce() 函数

reduce() 函数是 functools 模块中的一个高效工具。它允许我们通过一个累积器来处理列表元素,从而实现去除重复项并保留顺序的功能。

from functools import reduce
原列表 = [5, 10, 15, 20, 3, 15, 25, 20, 30, 10, 100]
初始值 = ([], set())  # 用于存储去重后的列表和已存在的元素集合


def 去重函数(累积器, 元素):
    列表, 集合 = 累积器
    if 元素 not in 集合:
        列表.append(元素)
        集合.add(元素)
    return 列表, 集合


去重列表 = reduce(去重函数, 原列表, 初始值)[0]
print(去重列表)  # 输出 [5, 10, 15, 20, 3, 25, 30, 100]

扩展学习

如果你想要更系统地学习 Python 编程,编程狮(W3Cschool)提供了丰富的课程资源,涵盖了 Python 基础语法、数据结构、函数式编程等多个方面,无论是初学者还是有一定基础的开发者都能从中受益。例如,在学习列表操作时,可以深入了解列表的其他常用方法,如添加元素、删除元素、排序等;在学习集合时,可以探索集合的运算,如交集、并集、差集等。

Python零基础到高薪就业

👉 Python零基础到高薪就业

总之,掌握去除列表重复项的方法只是 Python 编程之旅中的一个小站。通过不断学习和实践,你将能够更加熟练地运用 Python 解决各种复杂问题,为你的编程狮之路打下坚实的基础。

1 人点赞