​Pandas​​​是数据挖掘常见的工具,掌握使用过程中的函数是非常重要的。本文将借助可视化的过程,讲解​​Pandas​​的各种操作。

sort_values

(dogs[dogs['size'] == 'medium']
.sort_values('type')
.groupby('type').median()
)

执行步骤:

  • size列筛选出部分行
  • 然后将行的类型进行转换
  • 按照type列进行分组,计算中位数

超强图解Pandas_大数据

超强图解Pandas_数据挖掘_02

超强图解Pandas_大数据_03

超强图解Pandas_python_04

selecting a column

dogs['longevity']

超强图解Pandas_python_05

groupby + mean

dogs.groupby('size').mean()

执行步骤:

  • 将数据按照size进行分组
  • 在分组内进行聚合操作

超强图解Pandas_python_06

超强图解Pandas_算法_07

grouping multiple columns

dogs.groupby(['type', 'size'])

超强图解Pandas_算法_08

groupby + multi aggregation

(dogs
.sort_values('size')
.groupby('size')['height']
.agg(['sum', 'mean', 'std'])
)

执行步骤

  • 按照size列对数据进行排序
  • 按照size进行分组
  • 对分组内的height进行计算

超强图解Pandas_大数据_09

超强图解Pandas_数据挖掘_10

超强图解Pandas_数据挖掘_11

超强图解Pandas_机器学习_12

filtering for columns

df.loc[:, df.loc['two'] <= 20]

超强图解Pandas_算法_13

filtering for rows

dogs.loc[(dogs['size'] == 'medium') & (dogs['longevity'] > 12), 'breed']

超强图解Pandas_算法_14

dropping columns

dogs.drop(columns=['type'])

超强图解Pandas_算法_15

joining

ppl.join(dogs)

超强图解Pandas_数据挖掘_16

merging

ppl.merge(dogs, left_on='likes', right_on='breed', how='left')

超强图解Pandas_机器学习_17

pivot table

dogs.pivot_table(index='size', columns='kids', values='price')

超强图解Pandas_数据挖掘_18

melting

dogs.melt()

超强图解Pandas_数据挖掘_19

pivoting

dogs.pivot(index='size', columns='kids')

超强图解Pandas_数据挖掘_20

stacking column index

dogs.stack()

超强图解Pandas_大数据_21

unstacking row index

dogs.unstack()

超强图解Pandas_数据挖掘_22

resetting index

dogs.reset_index()

超强图解Pandas_机器学习_23

setting index

dogs.set_index('breed')

超强图解Pandas_算法_24