数据分析案例：利用pandas清洗数据.pdfVIP

数据分析案例：利⽤pandas清洗数据 假如你有⼀份数据，有淘宝店铺的⼀些基本数据，⽐如店铺名称、发货地址、付款⼈数、评论数、商品价格、商品名称。由于爬取的数据较 乱不能直接⽤于数据分析，所以要先进⾏数据清洗。数据如下⼤概如下： （关于如何爬取可以参考前⾯博⽂） 加载数据 import pandas as pd pro_data=pd.read_csv(taobaoproducts.csv,header=0) pro_data 数据清洗：地址列 爬取的地址列是省+城市名，当然还有北京这种直辖市，这⾥我们要把城市和省份分开，分成两列，对于北京则让城市和省份都显⽰为北 京。 def get_province(x): if len(x)==2: return x+市 else: pro_list=x.split() return pro_list[0]+省 def get_city(x): if len(x)==2: return x+市 else: pro_list=x.split() return pro_list[1]+市 pro_data[省份]=pro_data[地址].map(get_prov