Python列表去重实现方法

一、set()函数去重

Python内置的set()函数可以快速实现列表去重。

list1 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list1 = list(set(list1))
print(new_list1) # [1, 2, 3, 4, 5, 6]

以上代码中,先将list1转换为集合,然后再将集合转换为列表。

需要注意的是,set()函数不仅可以用于数字列表的去重,也可以用于字符串、元组等其他类型的去重。

二、列表内置方法去重

Python内置的列表方法也可以实现列表去重。

方法一:通过循环实现。

list2 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list2 = []
for i in list2:
    if i not in new_list2:
        new_list2.append(i)
print(new_list2) # [1, 2, 3, 4, 5, 6]

方法二:通过列表推导式实现。

list3 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list3 = [i for i in list3 if i not in new_list3]
print(new_list3) # [1, 2, 3, 4, 5, 6]

需要注意的是,方法二中的列表推导式在大规模数据处理时可能会消耗较多的内存。

三、利用字典keys()方法去重

利用Python字典的keys()方法可以实现列表去重。

list4 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
dic = {}.fromkeys(list4)
new_list4 = list(dic.keys())
print(new_list4) # [1, 2, 3, 4, 5, 6]

需要注意的是,字典的key是不能重复的,因此可以利用这一特性进行去重。

四、利用外部库实现列表去重

除了使用Python内置函数和方法进行列表去重外,还可以使用外部库来实现列表去重。

方法一:利用numpy库实现。

import numpy as np
list5 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list5 = np.unique(list5)
print(new_list5) # [1 2 3 4 5 6]

方法二:利用pandas库实现。

import pandas as pd
list6 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list6 = pd.unique(list6).tolist()
print(new_list6) # [1, 2, 3, 4, 5, 6]

需要注意的是,使用外部库实现列表去重需要先安装相应的库。

五、总结

本文介绍了Python中实现列表去重的五种方法。需要根据实际情况选择不同的方法进行应用,如对于较小规模的数据可以使用内置函数和方法进行处理,而对于大规模数据则可能需要使用外部库。

附:完整代码示例

#set函数去重
list1 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list1 = list(set(list1))
print(new_list1) #[1, 2, 3, 4, 5, 6]

#列表内置方法去重
#方法一:循环实现
list2 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list2 = []
for i in list2:
    if i not in new_list2:
        new_list2.append(i)
print(new_list2) #[1, 2, 3, 4, 5, 6]

#方法二:列表推导式实现
list3 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list3 = [i for i in list3 if i not in new_list3]
print(new_list3) #[1, 2, 3, 4, 5, 6]

#利用字典keys()方法去重
list4 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
dic = {}.fromkeys(list4)
new_list4 = list(dic.keys())
print(new_list4) #[1, 2, 3, 4, 5, 6]

#利用外部库实现列表去重
#方法一:利用numpy库实现
import numpy as np
list5 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list5 = np.unique(list5)
print(new_list5) #[1 2 3 4 5 6]

#方法二:利用pandas库实现
import pandas as pd
list6 = [1, 2, 2, 3, 3, 4, 5, 5, 6]
new_list6 = pd.unique(list6).tolist()
print(new_list6) #[1, 2, 3, 4, 5, 6]

原创文章,作者:小蓝,如若转载,请注明出处:https://www.506064.com/n/219546.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
小蓝小蓝
上一篇 2024-12-09 10:59
下一篇 2024-12-09 10:59

相关推荐

  • Python中引入上一级目录中函数

    Python中经常需要调用其他文件夹中的模块或函数,其中一个常见的操作是引入上一级目录中的函数。在此,我们将从多个角度详细解释如何在Python中引入上一级目录的函数。 一、加入环…

    编程 2025-04-29
  • Python计算阳历日期对应周几

    本文介绍如何通过Python计算任意阳历日期对应周几。 一、获取日期 获取日期可以通过Python内置的模块datetime实现,示例代码如下: from datetime imp…

    编程 2025-04-29
  • 如何查看Anaconda中Python路径

    对Anaconda中Python路径即conda环境的查看进行详细的阐述。 一、使用命令行查看 1、在Windows系统中,可以使用命令提示符(cmd)或者Anaconda Pro…

    编程 2025-04-29
  • Python周杰伦代码用法介绍

    本文将从多个方面对Python周杰伦代码进行详细的阐述。 一、代码介绍 from urllib.request import urlopen from bs4 import Bea…

    编程 2025-04-29
  • Python列表中负数的个数

    Python列表是一个有序的集合,可以存储多个不同类型的元素。而负数是指小于0的整数。在Python列表中,我们想要找到负数的个数,可以通过以下几个方面进行实现。 一、使用循环遍历…

    编程 2025-04-29
  • 蝴蝶优化算法Python版

    蝴蝶优化算法是一种基于仿生学的优化算法,模仿自然界中的蝴蝶进行搜索。它可以应用于多个领域的优化问题,包括数学优化、工程问题、机器学习等。本文将从多个方面对蝴蝶优化算法Python版…

    编程 2025-04-29
  • python强行终止程序快捷键

    本文将从多个方面对python强行终止程序快捷键进行详细阐述,并提供相应代码示例。 一、Ctrl+C快捷键 Ctrl+C快捷键是在终端中经常用来强行终止运行的程序。当你在终端中运行…

    编程 2025-04-29
  • Python程序需要编译才能执行

    Python 被广泛应用于数据分析、人工智能、科学计算等领域,它的灵活性和简单易学的性质使得越来越多的人喜欢使用 Python 进行编程。然而,在 Python 中程序执行的方式不…

    编程 2025-04-29
  • Python字典去重复工具

    使用Python语言编写字典去重复工具,可帮助用户快速去重复。 一、字典去重复工具的需求 在使用Python编写程序时,我们经常需要处理数据文件,其中包含了大量的重复数据。为了方便…

    编程 2025-04-29
  • Python清华镜像下载

    Python清华镜像是一个高质量的Python开发资源镜像站,提供了Python及其相关的开发工具、框架和文档的下载服务。本文将从以下几个方面对Python清华镜像下载进行详细的阐…

    编程 2025-04-29

发表回复

登录后才能评论