pandas知识课堂:apply和agg函数,如何传递参数?
ztj100 2025-04-09 22:45 7 浏览 0 评论
在数据处理过程中,我们在使用apply和agg函数的时候,一般都是直接使用自定义函数的名称,即默认带入自定义函数中的只有1个隐式参数(每个分组)。比如下面的例子:
df = pd.read_excel('d:/fqb/2/tmp.xlsx')
g = df.groupby(['name','year'])
def fm(sr):
return sr.unique()
res = g.agg({'rev':sum, 'bj':fm})
print(res.reset_index())
name year rev bj
0 大狗 2020 3 [2020dg1, 2020dg2]
1 大狗 2021 3 [2021dg]
2 大狗 2022 9 [2022dg]
3 李四 2019 21 [lisi]
4 李四 2021 19 [lisi]
我们在agg()中的字典里,对bj列使用自定义函数fm时,直接用的是fm的名称,在定义自定义函数时,即def fm(sr),我们加入了隐式的参数sr,这里sr是每个分组(pd.Series)。
但是,我们想在自定义函数fm中传递参数,应该如何使用呢?
一、agg中传递参数
方法1:使用lambda
df = pd.read_excel('d:/fqb/2/tmp.xlsx')
g = df.groupby(['name','year'])
def fm(sr,tmp):
res = sr.unique()
res = [tmp+s for s in res]
return '、'.join(res)
res = g.agg({'rev':sum, 'bj':lambda sr:fm(sr,'BJ_')})
print(res.reset_index())
name year rev bj
0 大狗 2020 3 BJ_2020dg1、BJ_2020dg2
1 大狗 2021 3 BJ_2021dg
2 大狗 2022 9 BJ_2022dg
3 李四 2019 21 BJ_lisi
4 李四 2021 19 BJ_lisi
注意,agg()中的字典键值对'bj':lambda sr:fm(sr,'BJ_'),直接使用自定义函数是'bj':fm,定义def fm(sr);而这里使用的'bj': lambda sr: fm(sr,'BJ_'),定义def fm(sr,tmp)。
这里传递了参数'BJ_',将这个字符串带入到自定义函数fm中,将每个分组中的元素前面加上这个字符串。同理,我们可以传递2个参数 'bj': lambda sr: fm(sr,'BJ_', 4),定义def fm(sr,tmp, num)。参数'BJ_'是字符串,参数4是数值,定义def fm()中有3个参数。
方法2:使用partial绑定自定义函数和传递的参数
from functools import partial
df = pd.read_excel('d:/fqb/2/tmp.xlsx')
g = df.groupby(['name','year'])
def fm(sr,tmp, num):
res = sr.unique()
res = [tmp + str(num) + '_' +s for s in res]
return '、'.join(res)
new_fm = partial(fm, tmp='BJ_', num = 4)
res = g.agg({'rev':sum, 'bj':new_fm})
print(res.reset_index())
name year rev bj
0 大狗 2020 3 BJ_4_2020dg1、BJ_4_2020dg2
1 大狗 2021 3 BJ_4_2021dg
2 大狗 2022 9 BJ_4_2022dg
3 李四 2019 21 BJ_4_lisi
4 李四 2021 19 BJ_4_lisi
这里使用partial函数将函数fm和2个传递的参数进行绑定,然后将新函数new_fm,作为agg中的聚合函数来使用。
二、apply中传递参数
df = pd.read_excel('d:/fqb/2/tmp.xlsx')
g = df.groupby(['name','year'])
def fm(dj):
res = dj.shape[0]
return res
res = g.apply(fm)
print(res.reset_index())
name year 0
0 大狗 2020 2
1 大狗 2021 1
2 大狗 2022 2
3 李四 2019 3
4 李四 2021 2
使用apply得到按name和year分组的每组(DataFrame类型)的行数。结果只保留了2个分组列和fm返回的结果组成的1列。
df = pd.read_excel('d:/fqb/2/tmp.xlsx')
def fm(ve,num):
return ve + num
res = df['rev'].apply(fm, args=(1.2,))
print(res)
将df的rev列的每个元素都加上1.2。
df = pd.read_excel('d:/fqb/2/tmp.xlsx')
def fm(ve,num, rate):
return (ve + num)*(1+rate)
res = df['rev'].apply(fm, args=(1,0.1))
print(res)
将df的rev列的每个元素都加上1后再增加10%(0.1)。
df = pd.read_excel('d:/fqb/2/tmp.xlsx')
def fm(row,num, rate):
res = row['sex'] + '_' + row['bj']
return res + str(num) + '_' + str(rate)
res = df.apply(fm, args=(1,0.1), axis=1)
print(res)
使用整个df,而不是df的某个列。这里row就是df的一行数据,axis=1是按行读取,row可以直接按列名称提取该行的值。
相关推荐
- Whoosh,纯python编写轻量级搜索工具
-
引言在许多应用程序中,搜索功能是至关重要的。Whoosh是一个纯Python编写的轻量级搜索引擎库,可以帮助我们快速构建搜索功能。无论是在网站、博客还是本地应用程序中,Whoosh都能提供高效的全文搜...
- 如何用Python实现二分搜索算法(python二分法查找代码)
-
如何用Python实现二分搜索算法二分搜索(BinarySearch)是一种高效的查找算法,适用于在有序数组中快速定位目标值。其核心思想是通过不断缩小搜索范围,每次将问题规模减半,时间复杂度为(O...
- 路径扫描 -- dirsearch(路径查找器怎么使用)
-
外表干净是尊重别人,内心干净是尊重自己,干净,在今天这个时代,应该是一种极高的赞美和珍贵。。。----网易云热评一、软件介绍Dirsearch是一种命令行工具,可以强制获取web服务器中的目录和文件...
- 78行Python代码帮你复现微信撤回消息!
-
来源:悟空智能科技本文约700字,建议阅读5分钟。本文基于python的微信开源库itchat,教你如何收集私聊撤回的信息。...
- 从零开始学习 Python!2《进阶知识》 Python进阶之路
-
欢迎来到Python学习的进阶篇章!如果你说已经掌握了基础语法,那么这篇就是你开启高手之路的大门。我们将一起探讨面向对象编程...
- 白帽黑客如何通过dirsearch脚本工具扫描和收集网站敏感文件
-
一、背景介绍...
- Python之txt数据预定替换word预定义定位标记生成word报告(四)
-
续接Python之txt数据预定替换word预定义定位标记生成word报告(一)https://mp.toutiao.com/profile_v4/graphic/preview?pgc_id=748...
- Python——字符串和正则表达式中的反斜杠('\')问题详解
-
在本篇文章里小编给大家整理的是关于Python字符串和正则表达式中的反斜杠('\')问题以及相关知识点,有需要的朋友们可以学习下。在Python普通字符串中在Python中,我们用'\'来转义某些普通...
- Python re模块:正则表达式综合指南
-
Python...
- python之re模块(python re模块sub)
-
re模块一.re模块的介绍1.什么是正则表达式"定义:正则表达式是一种对字符和特殊字符操作的一种逻辑公式,从特定的字符中,用正则表达字符来过滤的逻辑。(也是一种文本模式;)2、正则表达式可以帮助我们...
- MySQL、PostgreSQL、SQL Server 数据库导入导出实操全解
-
在数字化时代,数据是关键资产,数据库的导入导出操作则是连接数据与应用场景的桥梁。以下是常见数据库导入导出的实用方法及代码,包含更多细节和特殊情况处理,助你应对各种实际场景。一、MySQL数据库...
- Zabbix监控系统系列之六:监控 mysql
-
zabbix监控mysql1、监控规划在创建监控项之前要尽量考虑清楚要监控什么,怎么监控,监控数据如何存储,监控数据如何展现,如何处理报警等。要进行监控的系统规划需要对Zabbix很了解,这里只是...
- mysql系列之一文详解Navicat工具的使用(二)
-
本章内容是系列内容的第二部分,主要介绍Navicat工具的使用。若查看第一部分请见:...
你 发表评论:
欢迎- 一周热门
- 最近发表
-
- Whoosh,纯python编写轻量级搜索工具
- 如何用Python实现二分搜索算法(python二分法查找代码)
- 路径扫描 -- dirsearch(路径查找器怎么使用)
- 78行Python代码帮你复现微信撤回消息!
- 从零开始学习 Python!2《进阶知识》 Python进阶之路
- 白帽黑客如何通过dirsearch脚本工具扫描和收集网站敏感文件
- Python之txt数据预定替换word预定义定位标记生成word报告(四)
- 假期苦短,我用Python!这有个自动回复拜年信息的小程序
- Python——字符串和正则表达式中的反斜杠('\')问题详解
- Python re模块:正则表达式综合指南
- 标签列表
-
- idea eval reset (50)
- vue dispatch (70)
- update canceled (42)
- order by asc (53)
- spring gateway (67)
- 简单代码编程 贪吃蛇 (40)
- transforms.resize (33)
- redisson trylock (35)
- 卸载node (35)
- np.reshape (33)
- torch.arange (34)
- node卸载 (33)
- npm 源 (35)
- vue3 deep (35)
- win10 ssh (35)
- exceptionininitializererror (33)
- vue foreach (34)
- idea设置编码为utf8 (35)
- vue 数组添加元素 (34)
- std find (34)
- tablefield注解用途 (35)
- python str转json (34)
- java websocket客户端 (34)
- tensor.view (34)
- java jackson (34)