網(wǎng)站首頁 編程語言 正文
pandas重復(fù)行刪除操作df.drop_duplicates和df.duplicated的區(qū)別_python
作者:jingzen ? 更新時(shí)間: 2022-10-18 編程語言概念
df.duplicated()
使用df.cuplicated()來查看重復(fù)數(shù)據(jù),返回True,False,數(shù)據(jù)類型是bool.
也可以指定某一列是否有重復(fù)值df.cuplidated(‘colname’),不指定則默認(rèn)為第一列。
df.dropduplicates(’col‘,keep=‘first’,inplace=False)
用來刪除重復(fù)行。
實(shí)例
讀取數(shù)據(jù)
# %% 提取數(shù)據(jù) 從sqlite
import pandas as pd
from sqlalchemy import create_engine
'''創(chuàng)建sqlite3連接'''
eg = create_engine('sqlite:///I:/jianguoyun/Udoc/WorkDb/dataset2022.db') #創(chuàng)建數(shù)據(jù)庫連接
# 讀取數(shù)據(jù)庫文件
q_store = """
select * from pj_store20220525
"""
# 讀取表
cols= ['貨號','品類','節(jié)慶','庫位','合格','換包裝','錯(cuò)碼','維修','總數(shù)量' ]
df = pd.read_sql(q_store,eg)[cols]
計(jì)算重復(fù)項(xiàng)
# df.duplicated 計(jì)算重復(fù)項(xiàng)
cond = df.duplicated('貨號') # 查看貨號相同的項(xiàng) df.duplicated返回的是布爾值
def_line = df[cond]
def_line
計(jì)算有多少個(gè)重復(fù)行
#有多少個(gè)重復(fù)行
dep_data = df.duplicated('貨號').sum()
dep_data
用df.drop_duplicates提取夏季品類
# 用df.drop_duplicates提取夏季品類
df_category = df.query('節(jié)慶=="夏季"').drop_duplicates('品類',keep='last',inplace=False)
df_category['品類'].sort_values()
參數(shù):
- keep ,保留最后last還是第一行first,
- inplace:是否替換原列表,false:不替換,True,替換。
原文鏈接:https://blog.csdn.net/m0_46326858/article/details/124969949
相關(guān)推薦
- 2022-07-26 Python文件系統(tǒng)模塊pathlib庫_python
- 2022-07-13 解決 Webpack TypeError: cli.isMultipleCompiler is no
- 2023-11-21 linux sudo:/etc/sudoers 中第 11 行附近有解析錯(cuò)誤 sudo:no val
- 2022-11-25 DOS窗口命令和單表簡單查詢_DOS/BAT
- 2022-02-18 微信小程序----------父組件調(diào)用子組件的方法
- 2022-12-13 Flutter?阻止系統(tǒng)鍵盤彈出的優(yōu)雅方式_Android
- 2022-06-25 C#將DataGridView中的數(shù)據(jù)保存到CSV和Excel中_C#教程
- 2022-06-08 ASP.NET?Core中的靜態(tài)文件_基礎(chǔ)應(yīng)用
- 最近更新
-
- window11 系統(tǒng)安裝 yarn
- 超詳細(xì)win安裝深度學(xué)習(xí)環(huán)境2025年最新版(
- Linux 中運(yùn)行的top命令 怎么退出?
- MySQL 中decimal 的用法? 存儲小
- get 、set 、toString 方法的使
- @Resource和 @Autowired注解
- Java基礎(chǔ)操作-- 運(yùn)算符,流程控制 Flo
- 1. Int 和Integer 的區(qū)別,Jav
- spring @retryable不生效的一種
- Spring Security之認(rèn)證信息的處理
- Spring Security之認(rèn)證過濾器
- Spring Security概述快速入門
- Spring Security之配置體系
- 【SpringBoot】SpringCache
- Spring Security之基于方法配置權(quán)
- redisson分布式鎖中waittime的設(shè)
- maven:解決release錯(cuò)誤:Artif
- restTemplate使用總結(jié)
- Spring Security之安全異常處理
- MybatisPlus優(yōu)雅實(shí)現(xiàn)加密?
- Spring ioc容器與Bean的生命周期。
- 【探索SpringCloud】服務(wù)發(fā)現(xiàn)-Nac
- Spring Security之基于HttpR
- Redis 底層數(shù)據(jù)結(jié)構(gòu)-簡單動(dòng)態(tài)字符串(SD
- arthas操作spring被代理目標(biāo)對象命令
- Spring中的單例模式應(yīng)用詳解
- 聊聊消息隊(duì)列,發(fā)送消息的4種方式
- bootspring第三方資源配置管理
- GIT同步修改后的遠(yuǎn)程分支