Python 与大数据分析.pptx

Python 与大数据分析 ——对外经贸大学信息学院 大数据专业 Python教研组Python与大数据分析 外经贸-信息学院Python基础（5次课）网络爬虫（2次课）期中随堂上机考试（1次课）金融数据分析案例（2次课）文本数据分析案例（3次课）图像数据分析（3次课）自我介绍外经贸-信息学院刘宁宁对外经济贸易大学信息学院讲师。专注于对图像分类(Visual Object Classification)、文本处理(Natural Language Processing)、模式识别(Pattern Recognition)等方面的研究。mailto:6.00@163.com6.00@163.com为什么大数据首选是Python呢？外经贸-信息学院初识Python第一部分基本概念变量、注释、print函数、数据类型、算术运算符、类型转换第二部分数据的容器列表、元组、字典、集合第三部分控制结构与推导式第四部分外经贸-信息学院第五部分数据的读写操作错误类型和异常捕获第六部分字符编码问题处理第七部分编写函数处理数据第八部分外经贸-信息学院第九部分变量作用域Python中的模块第十部分Python中的类第十一部分正则表达式第十三部分日期数据的处理第十四部分Numpy基础知识第十五部分Pandas数据分析第十六部分外经贸-信息学院第一部分 初识PythonPython语言的诞生和发展历史Python语言的特点运行环境及安装外经贸-信息学院Python语言的诞生和发展历史Python语言是一种解释型、面向对象、动态数据类型的高级程序设计语言Python语言是数据分析师的首选数据分析语言，也是智能硬件的首选语言数据分析动画电影效果……创建复杂的Web应用程序游戏开发网站开发智能硬件开发外经贸-信息学院Python语言的诞生Guido van Rossum（人称“龟叔”）Python与蟒蛇有关？Guido van Rossum 于1989年在荷兰国家数学和计算机科学研究所设计出来的BBC “Monty Python‘s Flying Circus”（蒙提·派森的飞行马戏团）外经贸-信息学院Python语言的发展历史Python 2.0版本于2000年10月发布。在2008年12月，Python 3.0发布，此版本没有完全兼容之前的Python 2.0Python也因此分为了Python 3.5派系和Python 2.7派系两大阵营外经贸-信息学院Python语言的TIOBE INDEXTIOBE INDEX:编程语言流行程度排行榜外经贸-信息学院Python语言的TIOBE INDEXPython曾在2007年和2010年两度被TIOBE排行榜评为“年度编程语言”现已成为了第五大流行编程语言（截至2016年10月）外经贸-信息学院Python语言的特点优点一：优雅、简单、明确（减少花哨、晦涩或以“炫技”为目的的代码）让数据分析师们摆脱了程序本身语法规则的泥潭，更快的进行数据分析Python语言C语言外经贸-信息学院优点二：强大的标准库完善的基础代码库，覆盖了网络通信、文件处理、数据库接口、图形系统、XML处理等大量内容，被形象地称为“内置电池”（batteries included）Python使用者——“调包侠”外经贸-信息学院优点三：良好的可扩展性大量的第三方模块，覆盖了科学计算、Web开发、数据接口、图形系统等众多领域，开发的代码通过很好的封装，也可以作为第三方模块给别人使用。如Pandas、Numpy、Seaborn、Scikit-learn等等优点四：免费、开源外经贸-信息学院Python语言的缺点缺点一：运行速度慢缺点二：加密难缺点三：缩进规则缺点四：多线程灾难外经贸-信息学院Python语言与Java动态类型和静态类型Python中一切皆对象括号与缩进应用领域外经贸-信息学院Python语言与R语言机器学习的一把利器可读性强，便于上手灵活性强：可与其他如Web应用程序进行整合以统计推断为导向数据分析之外的领域有所限制包凌乱且一致性较差外经贸-信息学院Python语言与R语言的应用场景对比网络爬虫连接数据库内容管理系统API构建统计分析互动式图标/面板外经贸-信息学院运行环境及安装推荐使用Anaconda进行Python安装、环境配置及工具包管理IpythonqtconsolePyCharmJupyter NotebookSpyder外经贸-信息学院交互式计算和开发环境：IPythonIPython鼓励一种“执行-探索”（execute-explore）的工作模式输入代码之后，按下回车，便会立即得到代码运行结果外经贸-信息学院交互式计算和开发环境：IPython输入“?”获得IPython的详细介绍输入“%quickref”获得IPy