大数据潜能系列.docVIP

大数据潜能系列 一： 现在，业界对“大数据”的热情达到了前所未有的高度。很多机构希望通过提取更多的数据，第一时间解答关于客户、产品、合作伙伴及影响其业务的所有问题。他们在思考：我们是否能/要根据客户们在Twitter和Facebook上的最新信息，来优化市场营销活动？我们能不能从呼叫记录中找出客户问题？我们怎样才能根据传感器数据，减少制造缺陷？ 大数据同时带来了数据多样性、复杂性和增长速度的大规模增长。许多企业机构已经面临大数据带来的无情冲击——在全球范围内，来自数百个来源的数据以几十种不同形式源源不断地实时涌入。还有一些人则认为，与大数据比较，所有过往前例都将是小巫见大巫。 公司积极地将数据视作寻求创新、增长和效率的一种资产，着眼于众多垂直领域，帮助客户解决上述问题。统一数据集成平台，提供了大数据集成、权威可信的数据、自助服务和自适应数据服务这四项创新功能，旨在帮助广大用户和合作伙伴轻松对应大数据时代的新需求，充分释放大数据潜能。 客户和合作伙伴对大数据的意向和兴趣都急剧上升。主要体现在两个方面。一方面是技术层面。这完全与Hadoop有关吗？企业在思考：我们如何引入社交数据流，来丰富企业层面的洞察力？我们是否已为处理持续增长的数据量作好准备？虽然点击流数据、移动设备数据和传感器数据等数据源在驱动大数据，但许多组织正在以方兴未艾的大数据潮流为契机，完善传统的基础设施，而不是另外建立一个孤立的环境。形势的发展也要求我们积极接受Hadoop和MapReduce等分布式计算系统，并将它们引入到扩展型环境中的现有信息管理实践中，以便充分利用关系型数据和非关系型数据。IT人员可能想要提供数据，无论这些数据是来自10年来的历史数据，还是瞬间不断生成的数据流。 另一方面是业务层面。从企业高层到业务经理，大家对数据的热情高涨到前所未有的地步。一个简单又不可否认的现实情况是，数据在不断产生、数据围绕在我们。人们通过写博客和发送微博的方式，表明他们喜欢什么、不喜欢什么，对他们的网络圈产生影响。我们都想知道这些人来自哪里，他们有什么样的感受，他们为什么有那样的评价，谁具有影响力。传统上，企业组织依赖样本数据和本能直觉，来做出决定或改进运营。而现在，技术变得很成熟、很经济高效，以至于每一个数据都带来了集成的可能性——助力企业机构创新，更快地发展，更加环保，进而建立一个更安全的环境。 我们已经来到大数据时代！正处在兑现以数据为中心的承诺的重要关头。在这个大好机会面前，我们都有必要重新思考以数据为中心意味着什么 二：关于大数据项目，有一个好处经常被提及——那就是从过去无法取得数据的地方（至少是无法以划算的方式取得数据的地方）切入，深入理解企业的运营状态，来激发业务的活力。这牵扯到了社会化数据、移动数据以及云数据，当然也包括从管理得当的传统关系型数据源中获取的历史数据。从基于文本的数据以及对关系的挖掘中，可以了解您的客户及合作伙伴对您的企业有着怎样的感受，比如说，通过对搜索索引和网页访问的分析。如果您知道这些数据之间的关系历史，就可以作更深入的了解。这里要再强调一下，关键在于测试那些能转化为更好的“行为模式”作为介入模型。在这个过程中，需要满怀实验精神与好奇心。Hadoop真切感受到了这种体会，它使得IT能存储原来那些在经过一段时间后就被丢弃的数据，并且以低成本、更有效的方式来利用它们，用强大的数据处理能力来解决非结构化数据，而传统的数据库则并不适合采用这样的处理方式。 在探索如何将大数据项目关联起来、并让它对于业务更有意义的过程中，各个阶段都需要试验。这些试验可以帮助人们跨越传统的业务与IT之间的壁垒，分享能展现行为模式的业务规则。一些企业创建了新的业务组织架构，使得业务分析师能够与数据库专业人员在统一的领导下真正达成富有团队精神的协作。很多人认为这是一个不可逆转的转变，或许可以最终填补长期存在的IT与业务部门间的鸿沟。 不久前，一个大型运输及物流公司的IT负责人。这家公司已经拥有了可以支持成熟、实时商业智能实践的平台，他们正在将Hadoop环境引入这个架构中。说：“Hadoop对于业务内容问题进行了优化，比如及时将货物运交给特定客户，并且显示司机的名字以及他正在进行的活动等等。我们希望利用其他的模型来主动地接触客户，并且与正确的部门联系。我们现在正在去除“中间人”这个概念——无论是业务方面的还是IT方面的。也就是说，允许业务方面不通过任何中介就可以直接以互动的方式提出问题，并获取答案。这对我们的信息管理实践来说，文字信息的整合非常关键，而且可以通过Hadoop这样的分布式环境进行不断的扩展。行为分析数据及预测是取得成功的关键。当然，这一切都将与管理指示板以及运营报告等我们在信息管理实践中已经提供的部分进行整合。” 他让业务最终能跳出原来的条框去思考怎样