新闻中心
使用Pandas根据字典定义聚合DataFrame列的教程

本文详细介绍了如何利用pandas高效地根据预定义的字典映射,对dataframe中的多列进行求和聚合,生成新的聚合列。通过两种主要的pandas惯用方法,包括列重命名结合`groupby(axis=1)`以及转置结合`groupby`,实现优雅且高性能的数据转换,避免了传统循环的低效。
在数据分析和处理中,我们经常需要根据特定的业务逻辑或分组规则,将DataFrame中的多个列进行聚合操作,例如求和、平均值等。一个常见的场景是,我们有一个DataFrame和一份字典,这份字典定义了新的聚合列应该由哪些原始列组合而成。本教程将深入探讨如何使用Pandas库以“Pythonic”且高效的方式实现这一目标。
问题场景与数据准备
假设我们有一个Pandas DataFrame,其中包含多列数据。同时,我们还有一个字典,其键表示新的聚合列名,值是一个列表,包含了参与该聚合的新列的原始列名。
例如:
import pandas as pd
df = pd.DataFrame([[4, 8, 52, 7, 54],
[0, 20, 2, 21, 35],
[2, 33, 12, 1, 87]],
columns=['A', 'B', 'C', 'D', 'E'])
dic = {'x': ['A', 'D'], 'y': ['E'], 'z': ['B', 'C']}
print("原始DataFrame:")
print(df)
print("\n聚合字典:")
print(dic)我们的目标是创建一个新的DataFrame,其中包含 'x', 'y', 'z' 三列。列 'x' 的值是原始 'A' 和 'D' 列的行级和;列 'y' 是 'E' 列的值;列 'z' 是 'B' 和 'C' 列的行级和。
解决方案一:利用字典反转、重命名与列方向分组求和
这种方法的核心思想是:首先将原始列名映射到新的聚合列名,然后对DataFrame的列进行重命名,最后使用groupby方法在列方向(axis=1)上进行分组求和。
-
反转字典映射: 我们需要一个映射关系,将原始列名(如 'A')映射到它们所属的新聚合列名(如 'x')。这可以通过反转原始字典来实现。
d2 = {v: k for k, l in dic.items() for v in l} print("\n反转后的映射字典:") print(d2) # 输出: {'A': 'x', 'D': 'x', 'E': 'y', 'B': 'z', 'C': 'z'} 重命名列: 使用 df.rename(columns=d2) 方法,根据 d2 字典将DataFrame的列名临时重命名为它们所属的聚合组名。此时,可能会出现重复的列名(例如,'A' 和 'D' 都会被重命名为 'x')。
-
列方向分组求和: 对重命名后的DataFrame使用 groupby(level=0, axis=1).sum()。
- axis=1 指定了分组操作在列方向进行。
- level=0 表示按列名的第一层(也是唯一一层)进行分组。由于我们已经将原始列名重命名为聚合组名,groupby 会将所有具有相同新列名的列视为一个组,并对它们进行求和。
完整代码如下:
d2 = {v: k for k, l in dic.items() for v in l}
out1 = df.rename(columns=d2).groupby(level=0, axis=1).sum()
print("\n解决方案一结果:")
print(out1)输出:
Pippit AI
CapCut推出的AI创意内容生成工具
133
查看详情
x y z 0 11 54 60 1 21 35 22 2 3 87 45
注意事项: 在较新版本的Pandas中,groupby(axis=1) 的用法可能会被弃用。因此,建议考虑下一种更通用的方法。
解决方案二:利用转置、重命名与行方向分组求和
这种方法通过转置DataFrame,将原始列变为行索引,从而可以使用标准的行方向 groupby 操作,避免了 groupby(axis=1) 可能存在的兼容性问题。
反转字典映射: 与解决方案一相同,首先创建 d2 字典。
转置DataFrame: 使用 df.T 将DataFrame转置,使原始列名成为新的行索引。
重命名行索引: 对转置后的DataFrame的行索引进行重命名,使用 rename(d2)。此时,行索引会根据 d2 映射到新的聚合组名。
行方向分组求和: 对重命名后的转置DataFrame使用 groupby(level=0).sum()。这会在行方向上对具有相同新索引名的行进行分组求和。
再次转置: 最后,使用 .T 再次转置结果DataFrame,将其恢复到原始的列布局。
完整代码如下:
d2 = {v: k for k, l in dic.items() for v in l}
out2 = df.T.rename(d2).groupby(level=0).sum().T
print("\n解决方案二结果:")
print(out2)输出:
x y z 0 11 54 60 1 21 35 22 2 3 87 45
总结
这两种方法都提供了优雅且高效的Pandas惯用方式来根据字典定义聚合DataFrame的列。
- 方法一 (rename + groupby(axis=1)) 简洁直观,但可能受限于Pandas版本兼容性。
- 方法二 (T + rename + groupby + T) 更具通用性,通过巧妙地利用转置操作,将列聚合问题转换为行聚合问题,从而规避了 groupby(axis=1) 的潜在问题,是处理此类聚合任务的推荐做法。
无论选择哪种方法,它们都比传统的循环遍历列进行求和的方式更具性能优势,尤其是在处理大型DataFrame时。掌握这些Pandas技巧,能够显著提升数据处理的效率和代码的可读性。
以上就是使用Pandas根据字典定义聚合DataFrame列的教程的详细内容,更多请关注其它相关文章!
# 是一个
# 合肥好seo
# 昌都谷歌seo营销公司
# 新媒体媒介推广营销案例
# 政和专业seo价格
# 品牌营销与推广策略论文
# 渭南网站建设笔记
# 久久网站建设工程
# 塔城营销型网站建设平台
# 淘宝开店推广营销技巧有哪些
# 快排seo风险
# python
# 有一个
# 如何实现
# 到新
# 解决方法
# 更具
# 重写
# 自定义
# 命名为
# 重命名
相关栏目:
【
科技资讯46185 】
【
网络学院92790 】
相关推荐:
海棠电脑版入口_通过电脑访问海棠官网阅读
excel如何生成目录 excel一键生成工作表目录超链接
Golang如何通过reflect操作map_Golang reflect map操作与遍历技巧
composer的"require-dev"部分是用来做什么的?
AO3中文官网链接_AO3网页版稳定镜像站
学习通在线学习平台 学习通网页版直接进入课程中心
铁路12306的积分有效期是多久_铁路12306积分有效期说明
b站怎么删除评论_b站评论管理与删除操作
《噬血代码2》新预告片发布 展示游戏剧情
PHP中SSG-WSG API的AES加密实践:正确使用初始化向量
Vue.js 图片显示异常排查:理解应用挂载范围与DOM ID唯一性
Composer中的^和~符号代表什么_精通Composer版本号语义化约束
抖音极速版最新版本 抖音极速版官方下载地址
Win10快速启动功能利弊分析 Win10开启或关闭快速启动教程【技巧】
AI泡沫首次被“刺破”:GPU十年都无法存活!
J*aScriptWebpack优化_J*aScript构建工具实战
Golang如何实现容器化日志收集与分析_Golang容器日志收集分析方法
2026春节假期时间安排 2026春节假日查询
谷歌邮箱注册显示错误Gmail服务器异常与延迟处理
Descript怎样用AI剪辑自动去噪_Descript用AI剪辑自动去噪【自动降噪】
TikTok搜索不到用户发布内容怎么办 TikTok用户内容搜索优化方法
如何在CSS中使用visited与link控制链接颜色_visited link伪类配合
台积电1.4nm工艺A14瞄准2028:10年来性能提升80%
反效果?《战地6》免费试玩开启后玩家数不升反降
手机屏幕碎了但能正常使用怎么办 手机外屏碎裂的修复建议
今日头条怎么同步内容到抖音_今日头条内容同步到抖音教程
《燕云十六声》两周内达九百万玩家!位居畅销榜第五
Yandex官网搜索引擎免登录_俄罗斯Yandex一键直达入口
Excel Power Pivot如何处理XML数据源 构建高级数据模型
HTML转PPT成品工具有哪些?HTML网页转PPT成品工具大全
深入理解J*a编译器的兼容性选项:从-source到--release
ACG动漫视频网入口 ACG动漫*免费正版观看地址
印象笔记如何设离线包出差查阅_印象笔记设离线包出差查阅【离线阅读】
LINUX的I/O重定向是什么_深入理解LINUX中 >、>> 与 < 的区别
深入理解rpy2中的类型转换:优化Python对象到R矩阵的映射
Python Socket多播通信中指定源IP地址的实践指南
在J*aScript中复现SciPy的B样条拟合与求值:关键考量
Tabulator表格日期时间排序问题及自定义解决方案
b站赚钱渠道_b站收益来源
c++ 命名空间怎么用 c++ namespace使用指南
C#如何安全地从用户上传的XML文件中读取数据? 验证与清理策略
在python-socketio事件处理器中安全访问Flask应用上下文
J*aScript DOM操作:高效清空列表元素的策略与实践
天眼查怎么看公司融资情况 天眼查企业融资历史查询步骤【攻略】
Node.js 中使用 node-cron 实现定时 API 数据抓取与处理
消息称三星明年 2 月正式发布 HBM4,与 SK 海力士同台竞技
Python:递归比较文件夹内容并找出特定类型文件的差异
Win10系统服务哪些可以禁用 Win10安全优化服务列表【干货】
浏览器打开即用 美图秀秀网页版入口
顺丰快递查询系统 官方正版查询入口


2025-11-04
浏览次数:次
返回列表