王冠嵩的网站

AQI数据搜集整理

标签: 2015中国空气质量指数 2015-08-21

收集并清理从2008年到2014年中国五个城市(美国使馆所在城市:北京,上海,广州,沈阳,成都)的每小时空气指数(AQI)。

收集并清理从2008年到2014年中国五个城市(美国使馆所在城市:北京,上海,广州,沈阳,成都)的每小时空气指数(AQI)。

原始数据和整理数据:百度盘

数据源: stateair.net
创建日期: 20150406
更新日期: 20150407

本数据的定义和介绍可在这网址下载:http://www.stateair.net/web/historical/1/1.html

适用于本数据的使用声明:http://www.stateair.net/web/historical/1/1.html

文件:

City_PM25_From_To.csv
分城市清理过的数据
USEmbassyAQI.csv
五个城市组合
USEmbassyAQI.RData
R数据格式
Raw/*
原始数据

清理过程:

  • 删除前三行文字。
  • 删除“Parameter”列,因为所有值都是“PM2.5”。
  • 删除“Date(LST)”列,保留“Year”,“Month”,“Day”和“Hour”列。
  • 删除“Unit”列,因为所有值都是“ug/m3”。
  • 删除“QC NAME”列,因为都是空。
  • 转换“Duration”列,原只有两个值“Valid”或”Missing“,改为真假变量“Valid”。

更新 20150407:

有17个重复的数据(同样地点和时间),所有的重复数据都是在上午三点(3:00am)。但重复数据的AQI不同,而且没有当日两点(2:00am)的数据,所以把第一个重复视为前一小时数据。以下数据被调整:

Row Site Year Month Day Hour Value Valid
6675Beijing2009383179TRUE
15579Beijing2010314375TRUE
24315Beijing20113133351TRUE
50523Beijing201439355TRUE
59355Chengdu20123113-999FALSE
68091Chengdu20133103176TRUE
76827Chengdu201439365TRUE
85683Guangzhou20113133-999FALSE
94419Guangzhou20123113-999FALSE
103155Guangzhou2013310392TRUE
111891Guangzhou201439323TRUE
120747Shanghai20113133-999FALSE
129483Shanghai2012311389TRUE
138219Shanghai20133103107TRUE
146955Shanghai201439355TRUE
155739Shenyang20133103-999FALSE
164475Shenyang201439353TRUE

另外,上海有无效的数据(-999)但没有被“Valid”列标记,比如:

Row Site Year Month Day Hour Value Valid
127905Shanghai201215949TRUE
127906Shanghai2012151049TRUE
127907Shanghai20121511-999TRUE
127908Shanghai20121512-999TRUE
127909Shanghai2012151350TRUE
127910Shanghai2012151450TRUE

中间两个数据无效但没有被标记。一共有296个类似的记录,都被更新标记为“Valid=FALSE”。