pandas透视表常用方法

最新推荐文章于 2025-05-06 22:13:21 发布

置顶法相

最新推荐文章于 2025-05-06 22:13:21 发布

阅读量2.5k

点赞数

CC 4.0 BY-SA版权

分类专栏：数据挖掘开发技术 python 文章标签： pandas 透视表常用方法 pivot_table

39 篇文章

订阅专栏

13 篇文章

订阅专栏

6 篇文章

订阅专栏

在实际工作中，字段较多的数据常以params - values形式存储，一个id对应多行，使用时希望一个id对应一行。可通过操作将其处理成所需形式，避免写长SQL，还可对columns重命名、重置索引。此外，能用pivot_table透视表实现crosstable功能，统计频数。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在实际工作中，一些字段较多的数据，存储时往往以params-values的形式存储。如下所示：

test = pd.DataFrame([['a','var1',1],['a','var2',2],['b','var1',1],['b','var2',2]],columns=['id','params','values'])
test

在这里插入图片描述
一个id对应多行。然而在使用数据的过程中，往往希望一个id对应一行。

下面的操作可以帮助我们迅速处理成我们需要的形式，而避免写太长的sql。

p = pd.pivot_table(test,index=['id'],columns=['params'],values=['values'],aggfunc=np.max)
p

在这里插入图片描述
还需要做下处理，转换成常规的Dataframe。
我们可以看下p.columns。

可以看到columns，多层级结构

p.columns.levels[1]

Index([‘var1’, ‘var2’], dtype=‘object’, name=‘params’)

因此我们可以对columns重命名

p.columns = list(p.columns.levels[1])
p

在这里插入图片描述

p=p.reset_index()
p

在这里插入图片描述
重置索引，就可以得到我们想要的。

另外，也可以用pivot_table透视表实现crosstable的功能。

test = pd.DataFrame([['a','var1',1],['a','var2',2],['b','var1',1],['b','var2',2],['b','var2',2]],columns=['id','params','values'])
test

在这里插入图片描述
我们来统计每个id下，不同params下的频数。

c = pd.pivot_table(test[['id','params']],index=['id'],columns=['params'],aggfunc=len,fill_value=0,margins=True,)
c

在这里插入图片描述