数据科学与大数据技术专业导论学习总结(1).pdfVIP

人不知而不愠，不亦君子乎？——《论语》 数据科学与大数据技术专业导论学习总结 选择数据科学与大数据技术专业本身是自己对于该专业的喜欢，同时自己也 对于此专业有一定的了解。 数据科学与大数据技术专业是在数据信息爆炸式发展背景下设立的 面 向大数据 时代 巨大人才 需求 的一个新兴专业, 旨在培养具有 良好 的科 学素养和社会责任感与使命感,具有较为宽广 的国际视野,具有从事数据 科学与大数据相关的软硬件及网络的研究、设计、开发以及综合应用的高 级工程技术人才。而我们需要更加努力去成为数据技术方面的人才，成为 社会不断发展不断进步的推动者之一。 据了解，本科专业 中和大数据相对应的是 “数据科学与大数据技术 ” 专业,它是 2015 年教育部公布 的新增专业。2016 年 3 月公布的 《高校本 科专业备案和审批结果》中,北京大学、对外经济贸易大学和 中南大学 3 所高校首批获批开设 “数据科学与大数据技术 ”专业。随后第二年又有 32 所高校获批“数据科学与大数据技术 ”专业。两次获批 的名单中显示,该 专业学制为 四年,大部分为工学。就业前景广 阔,毕业生能够在计算机和 互联 网领域 以及大数据相关产业从事数据科学研究、大数据相关工程应 用开发、技术管理与咨询等工作 。该专业适合升学考研。在 2018 年，淮 北师范大学也开设数据科学与大数据专业，紧跟教育部的教育发展方向， 为国家和社会培养更多的互联网方面的人才。数据科学与大数据技术主要研 究计算机科学和大数据处理技术等相关的知识和技从大数据应用的能， 三个主要 层面 （即数据管理、系统开发、海量数据分析与挖掘）出发，对实际问题进行分 析和解决。 谈及数据科学与大数据技术的专业特点我觉得可以从以下方面概括。首先最 重要的一点就是处理的信息量非常庞大，从一开始的 TB 级别，增到 PB 级别。其 起始计量单位至少是 P （1000 个 T）、E （100 万个 T）或Z （10 亿个 T）。随着 信息技术的不断飞速发展，数据呈爆发性的增张。信息量的剧增化趋势日益明显， 以刚刚度过的双十一狂欢节为例，阿里巴巴内部需要处理的信息量及其庞大。随 着第 12 个天猫双 11 落下帷幕，根据阿里巴巴公布的数据显示，今年天猫双 11 成交额达 4982 亿元，再次创下新高。相比较下，2019 年双 11 成交额为 2684 亿 元，2018 年双 11 成交额为 2135 亿元，2017 年双 11 成交额为 1682 亿元。庞大 的数字背后的信息量是惊人的，几千亿的订单信息，物流信息等构成了庞大的数 据库。其次，还有其他的不同类型数据。这些数据的来源有社交网络 （微博、推 特、脸书）、移动网络、各种智能工具，服务工具等。而在淘宝网，有近 4 亿的 会员每日产生的商品交易数据约 20TB；在脸书约有 10 亿的用户，每日产生的日 人不知而不愠，不亦君子乎？——《论语》 丈夫志四方，有事先悬弧，焉能钧三江，终年守菰蒲。——《顾炎武》 志数据超过 300TB。所以急需要智能的算法、强大的数据处理平台和新的数据处 理技术，来统计、分析、预测和实时处理这么大规模的数据。 第二点，数据的类型有很多。众多的数据来源，也就决定了大数据形式的 多样性。无论怎样形式的数据都能产生作用，而如今应用最广泛的就是推荐系 统，像新浪微博，网易云音乐和今日头条等这些平台，都可以对用户的日志数 据进行分析，进而推荐用户喜欢的东西。 日志数据是一种结构化明显的数据，但还有一些数据结构化并不明显，像图 片、音频、视频。在现实世界所产生的数据里，一般有价值的数据所占比例很 小 第三点就是分析数据的可利用性，与传统的小数据相比