Python对多属性的重复数据去重

来源：懂视网责编：小OO 时间：2020-11-27 14:22:04

Python对多属性的重复数据去重

python中的pandas模块中对重复数据去重步骤。1）利用DataFrame中的duplicated方法返回一个布尔型的Series，显示各行是否有重复行，没有重复行显示为FALSE，有重复行显示为TRUE。2）再利用DataFrame中的drop_duplicates方法用于返回一个移除了重复行的DataFrame。注释。如果duplicated方法和drop_duplicates方法中没有设置参数，则这两个方法默认会判断全部咧，如果在这两个方法中加入了指定的属性名（或者称为列名），例如：frame.drop_duplicates(['；state'；])，则指定部分列（state列）进行重复项的判断。具体实例如下：

推荐度：

点击下载本文 文档为doc格式

导读python中的pandas模块中对重复数据去重步骤。1）利用DataFrame中的duplicated方法返回一个布尔型的Series，显示各行是否有重复行，没有重复行显示为FALSE，有重复行显示为TRUE。2）再利用DataFrame中的drop_duplicates方法用于返回一个移除了重复行的DataFrame。注释。如果duplicated方法和drop_duplicates方法中没有设置参数，则这两个方法默认会判断全部咧，如果在这两个方法中加入了指定的属性名（或者称为列名），例如：frame.drop_duplicates(['；state'；])，则指定部分列（state列）进行重复项的判断。具体实例如下：

下面为大家分享一篇Python对多属性的重复数据去重实例，具有很好的参考价值，希望对大家有所帮助。一起过来看看吧

python中的pandas模块中对重复数据去重步骤：

1）利用DataFrame中的duplicated方法返回一个布尔型的Series,显示各行是否有重复行，没有重复行显示为FALSE，有重复行显示为TRUE；

2）再利用DataFrame中的drop_duplicates方法用于返回一个移除了重复行的DataFrame。

注释：

如果duplicated方法和drop_duplicates方法中没有设置参数，则这两个方法默认会判断全部咧，如果在这两个方法中加入了指定的属性名（或者称为列名），例如：frame.drop_duplicates(['state']),则指定部分列（state列）进行重复项的判断。

具体实例如下：

>>> import pandas as pd 
>>> data={'state':[1,1,2,2],'pop':['a','b','c','d']} 
>>> frame=pd.DataFrame(data) 
>>> frame 
 pop state 
0 a 1 
1 b 1 
2 c 2 
3 d 2 
>>> IsDuplicated=frame.duplicated() 
>>> print IsDuplicated 
0 False 
1 False 
2 False 
3 False 
dtype: bool 
>>> frame=frame.drop_duplicates(['state']) 
>>> frame 
 pop state 
0 a 1 
2 c 2 
>>> IsDuplicated=frame.duplicated(['state']) 
>>> print IsDuplicated 
0 False 
2 False 
dtype: bool 
>>>

声明：本网页内容旨在传播知识，若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。TEL:177 7030 7066 E-MAIL:11247931@qq.com

Python对多属性的重复数据去重

推荐度：

点击下载本文 文档为doc格式

标签：数据性的 python

热门焦点

Python对多属性的重复数据去重

Python对多属性的重复数据去重

Python对多属性的重复数据去重

最新推荐

猜你喜欢

热门推荐