数据可视化入门、进阶与实战_项目2数据准备.pptxVIP

学习目标会使用八爪鱼工具获取网页数据，会获取公开的数据，会获取数据库中的数据。能力目标知识目标了解数据常用的获取途径。思政目标理解知识共享的含义，自觉履行数据安全保护义务，数据获取要合理合法合规。

CONTENTS工作任务列表使用主动公开的数据使用八爪鱼工具爬取网页数据12获取数据库中的数据3

使用主动公开的数据01[任务1]

在学习数据可视化技术过程中，我们需要数据来增加实践经验。数据最常见的获取方式是通过网络搜索，可搜索到的数据属于主动公开的数据，浩瀚的互联网中有哪些主动公开的数据呢？问题引入

主动公开的数据有政府数据、国际组织数据、科研机构及第三方数据资源这三类。解决方法

政府数据2015年国务院印发的《促进大数据发展行动纲要》，要求“2018年底前建成国家政府数据统一开放平台，率先在信用、交通、医疗、卫生、就业、社保、地理、文化、教育、科技、资源、农业、环境、安监、金融、质量、统计、气象、海洋、企业登记监管等重要领域实现公共数据资源合理适度向社会开放”，目前已经有多个地市建成了数据开放平台，开放了约15个领域数据，包括教育科技、民生服务、道路交通、健康卫生、资源环境、文化休闲、机构团体、公共安全、经济发展、农业农村、社会保障、劳动就业、企业服务、城市建设、地图服务。

政府数据开放平台省、市、区和城市名称URL北京市北京市政务数据资源网/jkfb/index.htm上海市上海市政府数据服务网/index.html天津市天津市信息资源统一开放平台/福建省福建省公共信息资源统一开放平台/odweb/广东省开放广东/贵州省贵阳市政府数据开放平台/海南省海南省政府数据统一开放平台/河南省河南省公共数据开放平台/odweb/江西省江西省政府数据开放网站/宁夏回族自治区宁夏回族自治区数据开放平台/odweb/index.htm山东省山东公共数据开放网/陕西省陕西省公共数据开放平台/浙江省浙江政务服务网“数据开放”专题网站/武汉市武汉市政务公开数据服务网/whData/长沙市长沙市政府门户网站数据开放平台/data/苏州市苏州市政府数据开放平台/dataOpenWeb/data黑龙江省哈尔滨市政府数据开放平台/新疆维吾尔自治区新疆维吾尔自治区政务数据开放网/index.html香港特别行政区香港政府数据中心.hk/sc/

政府数据/home!toHomePage.action

政府数据

政府数据此外还可以通过国家相关部门统计信息网站获取专项数据。名称URL中国人民银行/diaochatongjisi/116219/index.html国家统计局/tjsj/数据-中国政府网/shuju/中国互联网信息中心/国家气象科学数据中心/

国际组织数据国际组织主要涉及国家层面的数据。常见的国际组织包括联合国及其下设机构、世界经贸组织、世界银行或者比较专业、有针对性的国际组织等。名称URL联合国数据库世界卫生组织世界银行公开数据谷歌公开数据搜索欧盟统计局https://ec.europa.eu/eurostat/data/database国际货币基金组织全球贸易经济网/

科研机构及第三方数据资源名称URL公共卫生科学数据中心/Share/公众环境研究中心/北京大学开放研究数据平台上海纽约大学数据平台/datasets百度数据开放平台数据堂/阿里研究院——阿里价格指数BOM票房数据/charts/艺恩娱数/DataMarket/Index收视率排行http://www.tvtv.hk/archives/category/tv新榜/高德地图中国路况/detail.do?city=110000CEIC数据库/zh-hans搜数网/index.do阿里天池/Kaggle/Datafountain/中财网/cfidata.aspx

1.网络营销的产生同步实训使用国家气象科学数据中心数据1.实训目的掌握使用国家气象科学数据中心数据的方法。2.实训内容及步骤（1）进入国家气象科学数据中心/，注册（选择个人实名注册用户）；（2）点开共享目录中“数据和产品”，选择中国地面气象站逐小时观测资料，检索江苏省南京市近7日内最高气温，最低气温，降水量，并放入数据筐。（3）生成订单，下载数据。

任务小结主动公开的数据有政府数据、国际组织数据、科研机构及第三方数据资源这三类。我国已建成了多个省、市的政府开放数据平台，但全面的、各级政府数据开放还需要一定的时间。网民在使用公开数据时，需要在知识共享许可协议下对数据进行利用和再利用，让开放的数据产生更大的社会价值、经济价值和公共价值。

知识拓展知识共享许可协议（CreativeCommonslicense），又叫CC协议，是一种允许他人分发作品的公共版权许可。/licenses/licenses_exp/“知