在Python中使用pandas进行数据处理时，pd.unique函数是常用的一种函数，用于剔除数据中的重复值，保留唯一值。pd.unique对于数据分析和清洗都非常有用，在数据处理领域有着重要的地位。
一、剔除数据中的重复值
我们经常会遇到处理数据中存在重复记录的情况，此时我们可以使用pd.unique函数将重复的记录剔除掉。
import pandas as pd
data = pd.DataFrame({'A': ['foo', 'bar', 'foo', 'bar', 'foo', 'bar', 'foo', 'foo'],
'B': ['one', 'one', 'two', 'three', 'two', 'two', 'one', 'three'],
'C': [1, 2, 3, 4, 5, 6, 7, 8]})
unique_data = pd.unique(data['A'])
print('A列唯一值: ', unique_data)
unique_data = pd.unique(data[['A', 'B', 'C']])
print('ABC列唯一值: ', unique_data)
在上述代码中，我们首先创建了一个DataFrame数据，其中包含三列。
然后分别使用pd.unique函数剔除了数据中A列和ABC三列中的重复值，并打印输出了唯一值。
二、pd.unique函数详解
（一）pd.unique函数是什么？
pd.unique函数是pandas库中的一个函数，用于剔除数据中的重复值，保留唯一值。pd.unique函数对于数据分析和清洗都非常有用，在数据处理领域有着重要的地位。
（二）pd.unique函数的使用方法
pd.unique函数的使用方法很简单，只需传入数据对象，即可返回去重后的值。
pd.unique(data)
（三）pd.unique函数的参数
pd.unique函数的参数如下：
- arr: 必填参数，要进行去重操作的数据对象，可以是列表、Series或DataFrame。
- return_index: 可选参数，默认为False，返回新列表中的元素在旧列表中的位置。
- return_inverse: 可选参数，默认为False，返回旧列表中的元素在新列表中的位置。
- return_counts: 可选参数，默认为False，返回去重后的元素在原列表中出现的次数。
- axis: 可选参数，默认为None，用于指定在哪个轴上进行去重操作，只有在arr是DataFrame时才生效。
三、应用案例
（一）利用pd.unique函数查看数据中唯一值和特定值的对应关系
有时候我们需要查看某个列中的特定值与另一个列的值之间的对应关系，这时我们可以使用pd.unique函数进行查询。
import pandas as pd
data = pd.DataFrame({'A': ['foo', 'bar', 'foo', 'bar', 'foo', 'bar', 'foo', 'foo'],
'B': ['one', 'one', 'two', 'three', 'two', 'two', 'one', 'three'],
'C': [1, 2, 3, 4, 5, 6, 7, 8]})
unique_B = pd.unique(data['B'])
for b in unique_B:
print(b, ': ', pd.unique(data[data['B'] == b]['A']))
在上述代码中，我们首先创建了一个DataFrame数据，其中包含三列。
然后使用pd.unique函数查看data中B列的唯一值，并循环遍历每个唯一值，查询该唯一值在A列中对应的唯一值。
（二）利用pd.unique函数实现数据去重和排序
有时候我们需要将给定的数据进行去重和排序的操作，这时我们可以使用pd.unique函数。
import numpy as np
import pandas as pd
data = pd.DataFrame({'A': ['foo', 'bar', 'foo', 'bar', 'foo', 'bar', 'foo', 'foo'],
'B': ['one', 'one', 'two', 'three', 'two', 'two', 'one', 'three']})
unique_data = pd.unique(np.sort(data['A']))
print('A列唯一值: ', unique_data)
在上述代码中，我们首先创建了一个DataFrame数据，其中包含两列。
然后使用pd.unique函数将A列的重复值剔除，并进行排序。
四、小结
本文详细讲解了pd.unique函数在数据处理中的作用及应用，包括去重操作和查看唯一值等功能。同时介绍了pd.unique函数的使用方法和参数，以及两个实际应用案例，包括查看数据中唯一值和特定值的对应关系、利用pd.unique函数实现数据去重和排序。通过本文的阐述，希望读者能够更加深入地理解和掌握pd.unique函数，并能够熟练地在数据处理中应用该函数。
原创文章，作者：小蓝，如若转载，请注明出处：https://www.506064.com/n/232220.html
微信扫一扫 
支付宝扫一扫 