如何使用Python分析大数据_光环大数据培训.pdfVIP

光环大数据--大数据培训知名品牌 如何使用Python 分析大数据_光环大数据培训 光环大数据培训机构了解到，大数据无处不在。在时下这个年代，不管你喜 欢与否，在运营一个成功的商业的过程中都有可能会遇到它。 本教程将会简要介绍何谓大数据，无论你是尝试抓住时机的商人，抑或是寻 找下一个项目的编程高手，你都可以学到它是如何为你所用，以及如何使用 Twitter API 和Python 快速开始。 何谓大数据？ 大数据就像它看起来那样——有大量的数据。单独而言，你能从单一的数据 获取的洞见穷其有限。但是结合复杂数学模型以及强大计算能力的TB 级数据， 却能创造出人类无法制造的洞见。大数据分析提供给商业的价值是无形的，并且 每天都在超越人类的能力。 大数据分析的第一步就是要收集数据本身，也就是众所周知的“数据挖掘”。 数据来自于四面八方。大部分的企业处理着GB 级的数据，这些数据有用户数据、 产品数据和地理位置数据。在本教程中，我们将会探索如何使用数据挖掘技术收 集Twitter 的数据，这可能会比你想象中的更有用。 光环大数据 光环大数据--大数据培训知名品牌 举个例子，假设你运营着脸书，想使用Messager 数据为如何更好地向用户 投放广告提供一些见解。而Messager 拥有着 12 亿月活跃用户。在这个案例中， 大数据就是用户之间的对话。假设你能逐个阅读每个用户的对话，那么就能清楚 知道他们喜欢什么，从而有针对性地向他们推荐相应的产品。使用广为人知的自 然语言处理（NLP）这一机器学习技术，你可以大型地实现这一点，并且整个过 程自动化，一切交给机器即可。 这仅仅是机器学习和大数据分析为公司带来价值的无数的示例中的一个。 为什么选择Twitter 数据？ Twitter 是一个数据金矿。不像其他的社交平台，几乎每个Twitter 用户的 微博都是完全开放并且是可拉取的。如果你想尝试获取大量的数据然后对其进行 分析，这是相当有帮助的。同时，Twitter 的数据也是非常具体的。它的API 接 口允许你进行复杂的查询，例如拉取最近20 分钟内关于指定某个话题的每一条 微博，或者是拉取某个用户非转发的微博。 这里一个简单的应用就是，分析大众是怎么看待你们公司的。你可以收集提 到你们公司（或者其他任何词语）的最近2,000 条微博，然后对其运行情感分析 算法。 我们可以圈定具体居住在某个位置的用户，也就是所谓的空间数据。另一个 应用可以是，在地球上标志出你们公司提及次数最多的地区。 光环大数据 光环大数据--大数据培训知名品牌 如你所见，Twitter 数据是通往大众见解的一扇大门，以及他们是如何针对 某个主题进行大数据分析的。这些，结合透明度和Twitter API 接口慷慨的调用 次数，可以产出非凡的结果。 工具一览 对于这些示例，我们将使用 Python 2.7。理想情况下，你应该有一个编写 代码的IDE。我使用的是PyCharm –社区版。 为了连接Twitter 的API 接口，将会用到叫做Tweepy 的类库，这个类库稍 微安装一下就可以了。 入门指南 Twitter 开发者账号 为了使用Twitter 的API 接口，需要先在Twitter 应用站点上创建一个开发 者账号。 1、登录或者在/ 2、创建一个新的应用（可点击右上角的按钮） 光环大数据 光环大数据--大数据培训知名品牌 3、在创建应用的页面填写上唯一的名字，网站名字（如果没有可以使 用默认值），和项目描述。接受协议和条款然后进入到下