大数据小数据.doc

大数据（big data）正酣，小数据（iData）又来！ 主题概述： (一)小数据的介绍和定义(二)小数据产生的原因 (1) 大数据对隐私无止境的侵犯和个体对主动保护隐私的需求。(2) 对统一全面管理分析个人数据的巨大需求.(三)小数据的特性和大数据的对比(四)小数据发展的广阔前景。(五)小数据的发展最需解决的三个大问题. 蔡凯龙： 大家好，我是蔡凯龙，很高兴也很感谢秘书长易欢欢，让我有机会和大家一起在互联网金融千人会举办的早餐会来交流体会和心得。我这次主题是:小数据（iData)的大时代：数据革命的下一个前沿阵地。每一小节我都会预留点时间，欢迎大家提问题，让我们的交流碰出思想的火花吧。 刚才开车回来，在路上bloomberg广播，说美国大IT行业，Google . Facebook Twitter,Apple. Microsoft. AOL, Linkedlin, Yahoo联名给国会和总统写信。要求制定政府窃取个人隐私的详细策略，并且要求有独立第三方来监督，这个呼吁是跟Snowden的泄露的棱镜计划有关，因为在他泄露的计划里曾经说到美国政府公开或者非公共入侵所有美国大科技公司的数据库，监控所有的信息。美国总统今天出来讲话，说政府不会偷看美国公民的个人信息，只是为了反恐和监测海外活动，不会违反宪法，一定会尽力保护美国公民隐私。他提到的个人隐私，和我今天要和大家交流的小数据有关。 (一) 小数据的介绍和定义 数据革命的最终目的，就是给每个人都配备类似于美国总统的白宫级别的服务。这不是科幻，这是数据革命即将开创的另一个前沿阵地，小数据的大时代。 小数据(iData), 指的是围绕个人为中心全方位的数据，及其配套的收集，处理，分析，和对外交互的综合系统。人的一举一动，一分一秒，产生的数据，包括生活习惯，身体状况，社交，财务，喜好，情绪，行为的等等，全部被收集和利用和分析，并对外形成一个富有个人色彩的数据系统，统一执行交换数据，保护隐私等多项对外功能。 小数据跟大数据的根本区别在于，小数据以单个人为唯一的对象，重点在于深度，对个人数据全方位全天候深入精确的挖掘利用，大数据则侧重在某个领域方面，大范围大规模全面数???收集处理分析， 侧重在于广度。小数据只有围绕一个人，你就是小数据世界里的美国总统，小数据就是你的白宫办公室，它听命于你，收集关于你全方位信息，提供给你最贴心最完整的数据服务，同时担任对外界大数据的唯一接口。小数据并不是大数据老酒装新瓶，把大数据思维操作模式简单套在小数据上并不适用。 接下来我具体从小数据的成因， 特性，发展前景和问题，这四个方面来谈谈小数据是怎样作为大数据的互补和延伸的。 (二) 小数据产生的原因 1. 大数据对隐私无止境的侵犯和个人对主动保护隐私的需求。 1993年《纽约客》刊登了一副漫画：标题是：“互联网上，没有人知道你是一条狗”。经过20年互联网，移动互联网和社交网络以及大数据的快速发展，我们已经毫无隐私成为透明人了。现在这句话应该改成：“不要说互联网另一端是一个人，即使是一条狗，我甚至能知道它身上有没有跳蚤”。 在数据为王的时代，个人隐私遭到肆意的践踏和侵犯。 你上网买个东西，或者在社交网上发个言，很简单一个动作，瞬间同时的在政府网络监控，电话上网公司， 买东西网站，社交网，搜索网站， 信用卡银行，还有专门收集资料的爬虫系统。。等等，留下你详细的个人资料。更可怕的是，这些都是永久的，任何时候都不知道会被谁调用，会被人肉搜索到。大数据的基因里有对数据无限的渴求。因此以企业为主的大数据，在追求最大商业利益的同时，是不可能主动保护个人隐私的。可以说，大数据和个人隐私保护是天生不可调和的根本矛盾。 随着隐私被侵犯的弊端逐渐浮现， 各国都有不同程度的立法来保护个人隐私。但是至今为止，实际收效甚微，我们对隐私大规模被侵犯仍然束手无策。不过想想连德国总理默克尔，这么一个大国最高领导人的手机都会被窃听，我们这些普通大众的隐私在国家利益和商业利润面前，又怎么能够被真正被保护呢？难怪Steven Rambam, 一个互联网隐私专家曾经说过一句让人很绝望的话：Privacyis dead --- get over it. “隐私已死，爱怎么着怎么着吧” 这时候，迫切需要从技术上，让个人主动而不是被动的保护自己的隐私。小数据就能很好解决个人隐私和大数据的矛盾。小数据对内是一切个人数据的集合，对外是个人数据的唯一接口。任何对外的数据输出，都需通过预先设定授权程序。 而外面大数据其实不是真的对你的隐私感兴趣，就比如说大数据要分析用户对一个新车的市场， 他需要同时知道你年龄性别收入等等，但是大数据最终目的不是要拿这些隐私，而是拿这些作为大数据分析模型必须的素材，最后分析出你喜欢或者不喜欢这辆车。其实小数据在这