数据采集工具.pptxVIP

数据采集工具

【典型工作任务】小丁经营着一家淘宝店铺，主要销售自己家乡的特产，包括白姜、香菇、木耳等特色农产品。2019年9月，小丁家种的花椒“大红袍”产量大增，她准备将花椒作为新品，在网店上架，并将其打造为当季引流商品。为此，小丁通过百度指数进行了查询，发现9月中旬到10月中旬，花椒的搜索指数一直维持在中等偏上的水平，并有逐渐上升的态势，如图3-1所示。小丁认为可以安排花椒即时上架。图3-1花椒搜索指数

同时，小丁还注意到，搜索花椒的人群以20-29岁为主，如图3-2所示，小丁认为可以针对这部分人群进行重点推广。图3-2人群属性思考一下，数据采集与分析的渠道与工具除了上述提到的“百度指数”，还有哪些？

一、数据采集渠道电子商务数据的有效性、准确性与及时性，都是建立在可靠数据来源的基础上的。数据采集过程中对数据来源的渠道应做一个可信度的划分，确定哪些数据可信性更高，这就要求数据采集人员必须建立相应的机制。常见的可靠数据来源渠道有内部数据和外部数据。（一）内部数据渠道内部数据渠道是指在电子商务项目运营过程中，电子商务站点、店铺自身所产生的数据信息，如站点的访客数、浏览量、收藏量，商品的订单数量、订单信息、加购数量等数据。（二）外部数据渠道外部数据渠道是指在进行行业及竞争对手数据采集时，通常需要借助外部数据。在选择外部数据时尤其需要注意的是数据的真实性和有效性。

一、数据采集渠道常用的外部数据渠道有：1.政府部门、行业协会、新闻媒体、出版社政府部门、行业协会、新闻媒体、出版社等发布（发行）的统计数据、行业调查报告、新闻报道、出版物等都会涉及相关的数据报告。例如，国家统计局每个阶段都会发布宏观经济、居民消费价格指数等数据报告，如图3-3所示。图3-3

一、数据采集渠道2.权威网站、数据机构权威网站、数据机构发布的报告、白皮书等也会涉及相应的数据报告，常见的网站和数据机构有如中国互联网信息中心、阿里研究院、易观数据、艾瑞咨询等。这些平台提供了行业或行业类龙头企业的数据，其数据参考性较高，是重要的行业及企业数据采集渠道。如图3-4所示。图3-4艾瑞咨询《2020年中国功能性儿童学习用品行业白皮书》中的部分内容

一、数据采集渠道3.电子商务平台电子商务平台上聚集着众多行业卖家和买家，也是电子商务数据产生的重要来源。图3-5360趋势4.指数工具百度指数、360趋势（如图3-5所示）、搜狗指数、阿里指数等工具依托于平台海量用户行为数据，将相应搜索数据趋势、需求图谱、用户画像等数据通过指数工具向用户公开，该类型数据可为市场行业、用户需求和用户画像数据分析提供重要参考依据。例如本项目“典型工作任务”中的案例就是通过百度指数对淘宝网特定商品的搜索指数、受众人群等数据进行采集，分析出最受用户欢迎的商品，从而进行重点推广。这就直接利用了百度指数的相关数据。

一、什么是数据采集针对以上数据源，数据采集人员如何从中选择适合自身数据分析需求的数据源呢？首先，数据分析人员需要明确以上几类数据源所能获取的数据指标，选择具有所需数据指标的数据源（见表3-1）。其次数据采集人员还需要对数据源按照所提供数据的精准度为其划分等级，优先获取等级更高的数据源。数据采集渠道数据类型典型代表电子商务网站、店铺后台或平台提供的数据工具产品数据、市场数据、运营数据、人群数据等淘宝、京东店铺后台及所提供的数据工具如生意参谋、京东商智等政府部门、机构协会、媒体行业数据国家及各级统计局、各类协会、电视台、报刊、杂志等权威网站、数据机构行业数据、产品数据易观数据、艾瑞咨询、199IT等电子商务平台行业数据淘宝/天猫、京东、苏宁等指数工具行业数据、人群数据百度指数、360趋势等表3-1数据采集渠道适用场景

二、数据采集常用工具（一）什么是数据采集工具：（二）数据采集工具分类：是指使用数据采集技术，通过识别数据渠道中所需数据指标，将数据进行摘录整理，形成数据文档工具。掌握数据采集工具的使用是数据采集人员快速、准确获取数据的基础。常用的数据采集工具分为三类：第一类：平台提供的数据工具。主要包括平台店铺后台、生意参谋（淘宝/天猫）、京东商智（京东）、数据易道（苏宁）等数据采集工具。

二、数据采集常用工具1.生意参谋通过生意参谋，数据采集人员不仅可以采集自己店铺的各项运营数据（如流量、交易、服务、产品等数据），通过市场行情板块还能够获取到在淘宝/天猫平台的行业销售经营数据。如图3-6所示。图3-6生意参谋首页

二、数据采集常用工具2.京东商智京东商智是京东为卖家提供数据服务的平台，卖家在订购京东商智之后，可以从PC端、APP、微信、手机QQ、移动端五大渠道获取店铺的流量、销量、