**复习:**回顾学习完第一章,我们对泰坦尼克号数据有了基本的了解,也学到了一些基本的统计方法,第二章中我们学习了数据的清理和重构,使得数据更加的易于理解;今天我们要学习的是第二章第三节:数据可视化,主要给大家介绍一下Python数据可视化库Matplotlib,在本章学习中,你也许会觉得数据很有趣。在打比赛的过程中,数据可视化可以让我们更好的看到每一个关键步骤的结果如何,可以用来优化方案,是一个很有用的技巧。
2 第二章:数据可视化
开始之前,导入numpy、pandas以及matplotlib包和数据
# 加载所需的库
# 如果出现 ModuleNotFoundError: No module named 'xxxx'
# 你只需要在终端/cmd下 pip install xxxx 即可
%matplotlib inline
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt
#加载result.csv这个数据
text=pd.read_csv('result.csv')
text.head()
Unnamed: 0 | PassengerId | Survived | Pclass | Name | Sex | Age | SibSp | Parch | Ticket | Fare | Cabin | Embarked | |
0 | 0 | 1 | 0 | 3 | Braund, Mr. Owen Harris | male | 22.0 | 1.0 | 0.0 | A/5 21171 | 7.2500 | NaN | S |
1 | 1 | 2 | 1 | 1 | Cumings, Mrs. John Bradley (Florence Briggs Th... | female | 38.0 | 1.0 | 0.0 | PC 17599 | 71.2833 | C85 | C |
2 | 2 | 3 | 1 | 3 | Heikkinen, Miss. Laina | female | 26.0 | 0.0 | 0.0 | STON/O2. 3101282 | 7.9250 | NaN | S |
3 | 3 | 4 | 1 | 1 | Futrelle, Mrs. Jacques Heath (Lily May Peel) | female | 35.0 | 1.0 | 0.0 | 113803 | 53.1000 | C123 | S |
4 | 4 | 5 | 0 | 3 | Allen, Mr. William Henry | male | 35.0 | 0.0 | 0.0 | 373450 | 8.0500 | NaN | S |
2.7 如何让人一眼看懂你的数据?
《Python for Data Analysis》第九章
2.7.1 任务一:跟着书本第九章,了解matplotlib,自己创建一个数据项,对其进行基本可视化
【思考】最基本的可视化图案有哪些?分别适用于那些场景?(比如折线图适合可视化某个属性值随时间变化的走势)
#思考回答
#这一部分需要了解可视化图案的的逻辑,知道什么样的图案可以表达什么样的信号b
2.7.2 任务二:可视化展示泰坦尼克号数据集中男女中生存人数分布情况(用柱状图试试)。
#代码编写
sex=text.groupby('Sex')['Survived'].sum()#.plot()
sex.plot.bar()
plt.title('survived_count')
plt.show()
sex_sur=text.groupby('Sex')['Survived'].count()-text.groupby('Sex')['Survived'].sum()#.plot()
sex_sur.index=['female_die','male_die']#.plot.bar()
sex.index=['female_sur','male_sur']
temp=pd.concat([sex_sur,sex])
temp.plot.bar()
plt.title('count_of_die_and_survived')
plt.show()
【思考】计算出泰坦尼克号数据集中男女中死亡人数,并可视化展示?如何和男女生存人数可视化柱状图结合到一起?看到你的数据可视化,说说你的第一感受(比如:你一眼看出男生存活人数更多,那么性别可能会影响存活率)。
思考题回答
- def一眼男生存活的少死亡的多,女生人数相对男生较少,但存活率上要明显高于男生,那么性别确实可能会影响存活率,在前面做过分析,可能性别跟客舱跟票价也有较大关系
2.7.3 任务三:可视化展示泰坦尼克号数据集中男女中生存人与死亡人数的比例图(用柱状图试试)。
#代码编写
# 提示:计算男女中死亡人数 1表示生存,0表示死亡
temp=text.groupby('Sex')['Survived'].sum()/(text.groupby('Sex')['Survived'].count()-text.groupby('Sex')['Survived'].sum())
temp.plot.bar()
plt.title('proportion_sur_die')
plt.show()
temp=text.groupby('Sex')['Survived'].sum()/text.groupby('Sex')['Survived'].count()
temp.plot.bar()
plt.title('proportion_sur')
plt.show()
【提示】男女这两个数据轴,存活和死亡人数按比例用柱状图表示
text.groupby(['Sex','Survived'])['Survived'].count()
Sex Survived
female 0 81
1 233
male 0 468
1 109
Name: Survived, dtype: int64
text.groupby(['Sex','Survived'])['Survived'].count().unstack().plot(kind='bar',stacked=True)
plt.title('proportion_sur_die')
plt.show()
2.7.4 任务四:可视化展示泰坦尼克号数据集中不同票价的人生存和死亡人数分布情况。(用折线图试试)(横轴是不同票价,纵轴是存活人数)
【提示】对于这种统计性质的且用折线表示的数据,你可以考虑将数据排序或者不排序来分别表示。看看你能发现什么?
text.groupby(['Fare'])['Survived'].value_counts()
Fare Survived
0.0000 0 14
1 1
4.0125 0 1
5.0000 0 1
6.2375 0 1
..
247.5208 1 1
262.3750 1 2
263.0000 0 2
1 2
512.3292 1 3
Name: Survived, Length: 330, dtype: int64
text.groupby(['Fare','Survived'])['Survived'].count()
Fare Survived
0.0000 0 14
1 1
4.0125 0 1
5.0000 0 1
6.2375 0 1
..
247.5208 1 1
262.3750 1 2
263.0000 0 2
1 2
512.3292 1 3
Name: Survived, Length: 330, dtype: int64
#代码编写
# 计算不同票价中生存与死亡人数 1表示生存,0表示死亡
text.groupby(['Fare','Survived'])['Survived'].count().unstack().plot(grid=True)
plt.title('conunt_along_with_Fare')
plt.show()
plt.figure(figsize=(20, 18))
text.groupby(['Fare','Survived'])['Survived'].count().sort_values(ascending=False).plot(grid=True)
plt.legend()
plt.show()
plt.figure(figsize=(20, 18))
text.groupby(['Fare','Survived'])['Survived'].count().plot(grid=True)
plt.legend()
plt.show()
2.7.5 任务五:可视化展示泰坦尼克号数据集中不同仓位等级的人生存和死亡人员的分布情况。(用柱状图试试)
#代码编写
# 1表示生存,0表示死亡
text.groupby('Pclass')['Survived'].value_counts().unstack().plot(kind='bar',stacked=True)
plt.show()
import seaborn as sns
sns.countplot(x="Pclass", hue="Survived", data=text)
<matplotlib.axes._subplots.AxesSubplot at 0x223ced913c8>
【思考】看到这个前面几个数据可视化,说说你的第一感受和你的总结
思考题回答
一定程度上数据可视化确实会让结果更加的直观,让我们更能够发现数据与数据间的联系
2.7.6 任务六:可视化展示泰坦尼克号数据集中不同年龄的人生存与死亡人数分布情况。(不限表达方式)
text.groupby('Age')['Survived'].value_counts().unstack().plot()
<matplotlib.axes._subplots.AxesSubplot at 0x223d244b550>
#代码编写
import seaborn as sns
sns.countplot(x="Age", hue="Survived", data=text)
<matplotlib.axes._subplots.AxesSubplot at 0x223cebfeb00>
核密度估计(kernel density estimation)是在概率论中用来估计未知的密度函数,属于非参数检验方法之一。通过核密度估计图可以比较直观的看出数据样本本身的分布特征。具体用法如下:
seaborn.kdeplot(data,data2=None,shade=False,vertical=False,kernel=‘gau’,bw=‘scott’,
gridsize=100,cut=3,clip=None,legend=True,cumulative=False,shade_lowest=True,cbar=False, cbar_ax=None, cbar_kws=None, ax=None, **kwargs)
facet = sns.FacetGrid(text, hue="Survived",aspect=3)
facet.map(sns.kdeplot,'Age',shade= True)
facet.set(xlim=(0, text['Age'].max()))
facet.add_legend()
<seaborn.axisgrid.FacetGrid at 0x223c9760390>
2.7.7 任务七:可视化展示泰坦尼克号数据集中不同仓位等级的人年龄分布情况。(用折线图试试)
#代码编写
text.groupby('Pclass')['Age'].value_counts().unstack(0).plot(kind='kde')
plt.xlabel("age")
Text(0.5, 0, 'age')
text.Age[text.Pclass == 1].plot(kind='kde')
text.Age[text.Pclass == 2].plot(kind='kde')
text.Age[text.Pclass == 3].plot(kind='kde')
plt.xlabel("age")
plt.legend((1,2,3))#,loc="best"
<matplotlib.legend.Legend at 0x223d57adfd0>
【思考】上面所有可视化的例子做一个总体的分析,你看看你能不能有自己发现
思考题回答
存活率跟性别,票价,仓位等级,年龄都是强相关的,另外性别跟舱位等级和票价也有很大关系,考虑性别是不是也通过影响票价的选择来影响仓位进而来影响存活率
【总结】到这里,我们的可视化就告一段落啦,如果你对数据可视化极其感兴趣,你还可以了解一下其他可视化模块,如:pyecharts,bokeh等。
如果你在工作中使用数据可视化,你必须知道数据可视化最大的作用不是炫酷,而是最快最直观的理解数据要表达什么,你觉得呢?