情景导入杭州湖滨银泰in77利用大数据实现精准采集31课件.pptxVIP

情景导入杭州湖滨银泰in77利用大数据实现精准采集in77在试点区域的出入口和中堂安装具有AI功能的摄像头，通过人脸（大数据）抓拍精准统计客流量以及顾客在各个区域停留的时间和运动轨迹（数据采集），顾客停留时间越长，消费可能性就越高。商场对用户画像进行属性分析并分类贴标签，通过运营策略将符合品牌商目标用户特征的客流导向品牌商、将品牌商促销信息推送给目标用户，实现双向精准匹配，提高转化率。如摆放带有人脸识别摄像头的屏幕，展示新奇有趣且极富个性化的广告和互动，当系统识别出顾客，屏幕广告将展示该品牌的促销信息。

认识大数据和数据采集

数据的概念一大数据基础二人工智能与大数据三数据采集方式四数据采集对象五目录CONTENTS

任务二、认识数据采集一数据采集方式二数据采集对象

一、数据采集方式

大数据01数据来源搜索数据和网站的点击浏览数据来源于搜索引擎，搜索平台拥有庞大的用户行为数据。利用点击和浏览数据对消费者进行分析，可以找到用户的关注点、兴趣点，利用这些信息，企业可以对用户进行个性化推送，精准营销，极大提高了广告的效率。搜索引擎商品的搜索数据、浏览数据、交易数据、评价数据以及对应的用户数据来源于电子商务平台。通过对商业大数据的分析，能够更直接地了解消费者的动态。通过用户的点评数据，企业能够分析出用户满意或者不满意的地方，这些因素就是企业存在的优势和劣势。收集、分析用户的点评数据还有一个重要之处就是倾听用户的意见、了解用户的真实需求。电子商务平台用户属性标签、用户生成内容（UGC）、用户间社交网络数据来源于社交媒体平台。通过对社交网络的研究，企业可以跟踪信息传播路径。基于用户的行为和属性标签，可以生成用户画像，从而了解用户喜好，企业根据分析结果来开展精准营销。半结构化数据

02数据采集方式系统日志数据采集主要是收集公司业务平台日常产生的大量日志数据，供离线和在线大数据分析系统使用。很多互联网企业都有自己的海量数据采集工具用于系统日志采集如：系统日志Hadoop公司的ChukwaCloudera公司的FlumeFacebook公司的Scribe这些工具均采用分布式架构，能满足每秒数百兆字节的日志数据采集和传输需求。

02数据采集方式感知设备数据采集是指通过传感器、摄像头和其它智能终端自动采集信号、图片或录像来获取数据。在智能制造、可穿戴设备、物联网愈发普及的今天，高速、可靠的数据采集技术是当前需要重点突破的方向。科技快速发展，技术创新给大数据采集提供了新的方法，比如基于眼动(EM)、脑电图(EEG)、事件相关电位(ERP)、皮肤电反应(GSR)、肌电(EMG)、心电图(ECG)等前沿科技来采集数据。通过感知设备对生物数据进行采集的方式在广告、消费者评论领域均有很强的应用价值，逐渐成为营销领域研究者的“新宠”。感知设备

02数据采集方式网络爬虫是指按照一定规则在搜索引擎下载并存储网页的程序或脚本，又被称为网页蜘蛛、网络机器人。传统爬虫从获得一个或若干初始网页的URL开始，在抓取网页的过程中，不断从当前页面抽取新的URL放入队列，直到满足系统的停止条件后结束。从严格意义上来说，爬虫更像一种数据下载逻辑，很多软件都具备爬虫的功能(如Python、R、“火车头”、“八爪鱼”等)。网络爬虫

02数据采集方式利用上文所说的信息化手段收集资料非常方便，但对于有些数据，如顾客需求及偏好、顾客满意度、市场环境和行情信息、竞争对手信息以及战略合作伙伴方的情况等无法通过信息化手段取得资料时，则需要通过市场调查或科学的实验方法来获取一手数据。市场调查市场调查分为线下、线上两种。线下即传统人与人面对面的调查方式；线上即网络在线调查方式，相比线下方式可以在投入较少人力、时间和资金的情况下获取更大规模数据，许多企业和市场调研机构越来越多地采用线上网络市场调研的方式进行网络营销数据采集。市场调查分为：

03大数据采集面临的问题数据获取渠道缺乏缺少数据获取渠道，是数据分析面临的一大难题。很多行业和企业并没有积累数据的意识，导致很多数据存在空白。此外，大数据包含大量信息，可能涉及到用户的隐私和公司的机密，企业和政府不愿意分享数据。数据质量难以保证大数据的“大”是指全体样本，而非单指数据量大。现有平台数据质量参差不齐，大数据采集能力有待提升，实践中很难获得全样本数据，庞杂的数据中充斥着大量无效的干扰性数据、缺失内容，如何让收集到的数据样本丰富全面，是大数据给营销变革带来的挑战之一。隐私安全问题凸显互联网时代，在线活动与在线交易不断增多，用户数据与隐私泄露事件时有发生，网络安全威胁更为严峻。数据挖掘一方面可以被企业有效利用，增强营销活动的精准度，提升营销效率；但另一方面，如果缺乏有效监管，用户数据被不法分子得到，将会带来严重的损失与危害。

二、数据采集对象

01