Python?Pandas中DataFrame.drop_duplicates()刪除重復(fù)值詳解
更新時間：2022年07月11日 16:10:36 作者：山茶花開時。
在實際處理數(shù)據(jù)中,數(shù)據(jù)預(yù)處理操作中,常常需要去除掉重復(fù)的數(shù)據(jù),這篇文章主要給大家介紹了關(guān)于Python?Pandas中DataFrame.drop_duplicates()刪除重復(fù)值的相關(guān)資料,需要的朋友可以參考下
語法
df.drop_duplicates(subset = None,
keep = 'first',
inplace = False,
ignore_index = False)參數(shù)
1.subset:指定的標(biāo)簽或標(biāo)簽序列，僅刪除這些列重復(fù)值，默認(rèn)情況為所有列
2.keep:確定要保留的重復(fù)值，有以下可選項:
first:保留第一次出現(xiàn)的重復(fù)值，默認(rèn)
last:保留最后一次出現(xiàn)的重復(fù)值
False:刪除所有重復(fù)值
3.inplace:是否生效
4.ignore_index:如果為True，則重新分配自然索引(0,1,…,n - 1)
# 刪除重復(fù)值 DataFrame.drop_duplicates() import pandas as pd df = pd.DataFrame([['x','x',1],['x','x',1],['z','x',2]], columns = ['A','B','C']) # 刪除重復(fù)行 res1 = df.drop_duplicates() # 刪除指定列 res2 = df.drop_duplicates(subset = ['A']) # 保留最后一個 res3 = df.drop_duplicates(subset = ['A'], keep = 'last')
結(jié)果展示
df
res1
res2
res3
擴展:識別重復(fù)值
import pandas as pd
df = pd.DataFrame({
'studentID':['A001','A002','A003','A004','A005','A006','A006'],
'score':[100,93,94,96,93,95,95]})
# 識別重復(fù)值
duplicate_value = df[df.duplicated()]df
由上圖可知studentID為'A006'的記錄有兩條，我們可以使用duplicated()方法識別重復(fù)值，它返回的是布爾值結(jié)果(True:有重復(fù)值，F(xiàn)alse:無重復(fù)值)
duplicate_value
總結(jié)
到此這篇關(guān)于Python Pandas中DataFrame.drop_duplicates()刪除重復(fù)值的文章就介紹到這了,更多相關(guān)Pandas DataFrame.drop_duplicates()刪除重復(fù)值內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
這篇文章主要介紹了Python讀寫txt文本文件的操作方法全解析,包括對文本的查找和替換等技巧的講解,需要的朋友可以參考下2016-06-06
圖像特效處理是基于圖像像素數(shù)據(jù)特征，將原圖像進(jìn)行一定步驟的計算——例如像素作差、灰度變換、顏色通道融合等，從而達(dá)到期望的效果。本文將為大家介紹八種常用的圖像特效算法，需要的可以參考一下2022-03-03
Python可視化單詞統(tǒng)計詞頻統(tǒng)計中文分詞的實現(xiàn)步驟
這篇文章主要介紹了Python可視化單詞統(tǒng)計詞頻統(tǒng)計中文分詞，本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2022-11-11
在日常工作和學(xué)習(xí)中,我們經(jīng)常需要處理大量的Word文檔,本文將深入探討如何利用Python批量提取Word文檔中的文本內(nèi)容,幫助你解放生產(chǎn)力,感興趣的小伙伴可以了解下2025-12-12
python中requests模擬登錄的三種方式(攜帶cookie/session進(jìn)行請求網(wǎng)站)
這篇文章主要介紹了python中requests模擬登錄的三種方式(攜帶cookie/session進(jìn)行請求網(wǎng)站)，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-11-11
這篇文章主要介紹了python實現(xiàn)Simhash算法，simhash算法用來進(jìn)行文本比對的，simhash包含分詞、hash、加權(quán)、合并、降維五大步驟，下文圍繞更多相關(guān)資料介紹，需要的小伙伴可以參考一下2022-02-02
這篇文章主要介紹了python實現(xiàn)百度關(guān)鍵詞排名查詢,需要的朋友可以參考下2014-03-03
一文帶你詳解Python中sys.executable函數(shù)的作用
sys.executable函數(shù)是用來獲取當(dāng)前Python解釋器的完整路徑的,本文主要介紹了一文帶你詳解Python中sys.executable函數(shù)的作用,具有一定的參考價值,感興趣的可以了解一下2024-03-03
這篇文章主要介紹了關(guān)于python中@property的使用方法,@property裝飾器會將方法轉(zhuǎn)換為同名的只讀屬性，它可以與所定義的屬性配合使用,需要的朋友可以參考下2023-07-07
這篇文章主要介紹了Python文件如何讀取read()函數(shù)問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2024-02-02