新闻中心

使用Pandas根据字典定义聚合DataFrame列的教程

2025-11-04
浏览次数:
返回列表

使用Pandas根据字典定义聚合DataFrame列的教程

本文详细介绍了如何利用pandas高效地根据预定义的字典映射,对dataframe中的多列进行求和聚合,生成新的聚合列。通过两种主要的pandas惯用方法,包括列重命名结合`groupby(axis=1)`以及转置结合`groupby`,实现优雅且高性能的数据转换,避免了传统循环的低效。

在数据分析和处理中,我们经常需要根据特定的业务逻辑或分组规则,将DataFrame中的多个列进行聚合操作,例如求和、平均值等。一个常见的场景是,我们有一个DataFrame和一份字典,这份字典定义了新的聚合列应该由哪些原始列组合而成。本教程将深入探讨如何使用Pandas库以“Pythonic”且高效的方式实现这一目标。

问题场景与数据准备

假设我们有一个Pandas DataFrame,其中包含多列数据。同时,我们还有一个字典,其键表示新的聚合列名,值是一个列表,包含了参与该聚合的新列的原始列名。

例如:

import pandas as pd

df = pd.DataFrame([[4, 8, 52, 7, 54],
                   [0, 20, 2, 21, 35],
                   [2, 33, 12, 1, 87]],
                  columns=['A', 'B', 'C', 'D', 'E'])

dic = {'x': ['A', 'D'], 'y': ['E'], 'z': ['B', 'C']}

print("原始DataFrame:")
print(df)
print("\n聚合字典:")
print(dic)

我们的目标是创建一个新的DataFrame,其中包含 'x', 'y', 'z' 三列。列 'x' 的值是原始 'A' 和 'D' 列的行级和;列 'y' 是 'E' 列的值;列 'z' 是 'B' 和 'C' 列的行级和。

解决方案一:利用字典反转、重命名与列方向分组求和

这种方法的核心思想是:首先将原始列名映射到新的聚合列名,然后对DataFrame的列进行重命名,最后使用groupby方法在列方向(axis=1)上进行分组求和。

  1. 反转字典映射: 我们需要一个映射关系,将原始列名(如 'A')映射到它们所属的新聚合列名(如 'x')。这可以通过反转原始字典来实现。

    d2 = {v: k for k, l in dic.items() for v in l}
    print("\n反转后的映射字典:")
    print(d2)
    # 输出: {'A': 'x', 'D': 'x', 'E': 'y', 'B': 'z', 'C': 'z'}
  2. 重命名列: 使用 df.rename(columns=d2) 方法,根据 d2 字典将DataFrame的列名临时重命名为它们所属的聚合组名。此时,可能会出现重复的列名(例如,'A' 和 'D' 都会被重命名为 'x')。

  3. 列方向分组求和: 对重命名后的DataFrame使用 groupby(level=0, axis=1).sum()。

    • axis=1 指定了分组操作在列方向进行。
    • level=0 表示按列名的第一层(也是唯一一层)进行分组。由于我们已经将原始列名重命名为聚合组名,groupby 会将所有具有相同新列名的列视为一个组,并对它们进行求和。

完整代码如下:

d2 = {v: k for k, l in dic.items() for v in l}
out1 = df.rename(columns=d2).groupby(level=0, axis=1).sum()

print("\n解决方案一结果:")
print(out1)

输出:

Pippit AI Pippit AI

CapCut推出的AI创意内容生成工具

Pippit AI 133 查看详情 Pippit AI
    x   y   z
0  11  54  60
1  21  35  22
2   3  87  45

注意事项: 在较新版本的Pandas中,groupby(axis=1) 的用法可能会被弃用。因此,建议考虑下一种更通用的方法。

解决方案二:利用转置、重命名与行方向分组求和

这种方法通过转置DataFrame,将原始列变为行索引,从而可以使用标准的行方向 groupby 操作,避免了 groupby(axis=1) 可能存在的兼容性问题。

  1. 反转字典映射: 与解决方案一相同,首先创建 d2 字典。

  2. 转置DataFrame: 使用 df.T 将DataFrame转置,使原始列名成为新的行索引。

  3. 重命名行索引: 对转置后的DataFrame的行索引进行重命名,使用 rename(d2)。此时,行索引会根据 d2 映射到新的聚合组名。

  4. 行方向分组求和: 对重命名后的转置DataFrame使用 groupby(level=0).sum()。这会在行方向上对具有相同新索引名的行进行分组求和。

  5. 再次转置: 最后,使用 .T 再次转置结果DataFrame,将其恢复到原始的列布局。

完整代码如下:

d2 = {v: k for k, l in dic.items() for v in l}
out2 = df.T.rename(d2).groupby(level=0).sum().T

print("\n解决方案二结果:")
print(out2)

输出:

    x   y   z
0  11  54  60
1  21  35  22
2   3  87  45

总结

这两种方法都提供了优雅且高效的Pandas惯用方式来根据字典定义聚合DataFrame的列。

  • 方法一 (rename + groupby(axis=1)) 简洁直观,但可能受限于Pandas版本兼容性。
  • 方法二 (T + rename + groupby + T) 更具通用性,通过巧妙地利用转置操作,将列聚合问题转换为行聚合问题,从而规避了 groupby(axis=1) 的潜在问题,是处理此类聚合任务的推荐做法。

无论选择哪种方法,它们都比传统的循环遍历列进行求和的方式更具性能优势,尤其是在处理大型DataFrame时。掌握这些Pandas技巧,能够显著提升数据处理的效率和代码的可读性。

以上就是使用Pandas根据字典定义聚合DataFrame列的教程的详细内容,更多请关注其它相关文章!


# 是一个  # 合肥好seo  # 昌都谷歌seo营销公司  # 新媒体媒介推广营销案例  # 政和专业seo价格  # 品牌营销与推广策略论文  # 渭南网站建设笔记  # 久久网站建设工程  # 塔城营销型网站建设平台  # 淘宝开店推广营销技巧有哪些  # 快排seo风险  # python  # 有一个  # 如何实现  # 到新  # 解决方法  # 更具  # 重写  # 自定义  # 命名为  # 重命名 


相关栏目: 【 科技资讯46185 】 【 网络学院92790


相关推荐: 海棠电脑版入口_通过电脑访问海棠官网阅读  excel如何生成目录 excel一键生成工作表目录超链接  Golang如何通过reflect操作map_Golang reflect map操作与遍历技巧  composer的"require-dev"部分是用来做什么的?  AO3中文官网链接_AO3网页版稳定镜像站  学习通在线学习平台 学习通网页版直接进入课程中心  铁路12306的积分有效期是多久_铁路12306积分有效期说明  b站怎么删除评论_b站评论管理与删除操作  《噬血代码2》新预告片发布 展示游戏剧情  PHP中SSG-WSG API的AES加密实践:正确使用初始化向量  Vue.js 图片显示异常排查:理解应用挂载范围与DOM ID唯一性  Composer中的^和~符号代表什么_精通Composer版本号语义化约束  抖音极速版最新版本 抖音极速版官方下载地址  Win10快速启动功能利弊分析 Win10开启或关闭快速启动教程【技巧】  AI泡沫首次被“刺破”:GPU十年都无法存活!  J*aScriptWebpack优化_J*aScript构建工具实战  Golang如何实现容器化日志收集与分析_Golang容器日志收集分析方法  2026春节假期时间安排 2026春节假日查询  谷歌邮箱注册显示错误Gmail服务器异常与延迟处理  Descript怎样用AI剪辑自动去噪_Descript用AI剪辑自动去噪【自动降噪】  TikTok搜索不到用户发布内容怎么办 TikTok用户内容搜索优化方法  如何在CSS中使用visited与link控制链接颜色_visited link伪类配合  台积电1.4nm工艺A14瞄准2028:10年来性能提升80%  反效果?《战地6》免费试玩开启后玩家数不升反降  手机屏幕碎了但能正常使用怎么办 手机外屏碎裂的修复建议  今日头条怎么同步内容到抖音_今日头条内容同步到抖音教程  《燕云十六声》两周内达九百万玩家!位居畅销榜第五  Yandex官网搜索引擎免登录_俄罗斯Yandex一键直达入口  Excel Power Pivot如何处理XML数据源 构建高级数据模型  HTML转PPT成品工具有哪些?HTML网页转PPT成品工具大全  深入理解J*a编译器的兼容性选项:从-source到--release  ACG动漫视频网入口 ACG动漫*免费正版观看地址  印象笔记如何设离线包出差查阅_印象笔记设离线包出差查阅【离线阅读】  LINUX的I/O重定向是什么_深入理解LINUX中 >、>> 与 < 的区别  深入理解rpy2中的类型转换:优化Python对象到R矩阵的映射  Python Socket多播通信中指定源IP地址的实践指南  在J*aScript中复现SciPy的B样条拟合与求值:关键考量  Tabulator表格日期时间排序问题及自定义解决方案  b站赚钱渠道_b站收益来源  c++ 命名空间怎么用 c++ namespace使用指南  C#如何安全地从用户上传的XML文件中读取数据? 验证与清理策略  在python-socketio事件处理器中安全访问Flask应用上下文  J*aScript DOM操作:高效清空列表元素的策略与实践  天眼查怎么看公司融资情况 天眼查企业融资历史查询步骤【攻略】  Node.js 中使用 node-cron 实现定时 API 数据抓取与处理  消息称三星明年 2 月正式发布 HBM4,与 SK 海力士同台竞技  Python:递归比较文件夹内容并找出特定类型文件的差异  Win10系统服务哪些可以禁用 Win10安全优化服务列表【干货】  浏览器打开即用 美图秀秀网页版入口  顺丰快递查询系统 官方正版查询入口 

搜索