大数据环境下高校云存储平台建设的思考.docVIP

大数据环境下高校云存储平台建设的思考 　　【摘要】大数据时代促使互联网数据的建设、管理和维护出现了转变，带动着视频应用、网络游戏、图片等互联网衍生业务迅速发展。面对高校校园内数据资源的爆炸性增长，海量数据如何有效存取，校园内复杂的数据共享需求怎样满足是高校信息化工作者面临的难题之一。本文通过提出建设分布式云存储平台有效解决高校在数据存储、共享互动、管理的方面遇到的系列问题。 　　【关键词】云存储，分布式，群组 　　1传统存储面临的挑战 　　存储是用户、校园数字化系统保存数据，共享数据的主要形式。目前常用的存储方式是将数据放置在在计算机的硬盘、U盘、移动硬盘等设备中；需要数据共享的时候，采用邮件、MSN文件传输等方式。这些方式的使用起来方便，容易被老师和学生掌握，但这些常规方式中也存在着诸多问题。同时面对海量信息内容（视频、照片、图片、杂志、音乐、数据等）的指数性增长，高校在存储成本和技术方面面临巨大挑战。 　　（1）携带不：在任何需要数据的地方，老师都必须随身携带这些存储设备，电脑之类的设备体积庞大，不便于携带。 　　（2）数据容易受损丢失：相关信息都存储在老师自己的硬盘、U盘中，设备缺乏有效的存储冗余机制，在设备损坏或者病毒木马攻击的情况下，数据就会丢失。 　　（3）数据安全不可靠：数据存储在个人设备中，凡使用过该设备的人，均可获取这些数据，从而带来不必要的损失。 　　（4）容量：通过邮件等方式传输的数据，一般都存在附件大小的限制，过大的文件则无法传递。 　　（5）重复数据存储：由于采用个人的存储设备，一些好的教学资源，在很多老师的机器上都会存储，从而造成存储资源的浪费。 　　（6）难与数字化校园系统对接。校园信息化的管理系统需要对相关文件进行统一的调用，这就需要存储系统能够提供一个高度共享的存储池，才能实施资源共享及对数据统一进行访问。 　　（7）存储空间（动辄PB级）和文件数量指数型增长，而且对访问速度与IO要求高。 　　（8）容灾备份：当前，数据安全性正遭受着前所未有的威胁，自然灾害、系统故障、用户误操作和病毒感染都有可能导致数据的破坏和丢失。 　　（9）重复建设，资金浪费。 　　2解决方案 　　近年来，高校信息化建设的重点已经由硬件基础设施建设扩展到了系统平台建设和数据资源建设，特别是数据资源已经成为学校文化积淀和可持续发展的重要保障，为了有效实现校园数据资源的收集、存储、管理和应用，迫切需要建设符合校园特点，能够激发师生自主资源建设的意愿，提高数据资源使用率的云平台及教师空间系统。建立一个基于云存储管理的平台，帮助学校和教育主管部门管理所有的教师和学生空间，统计教师利用网络从事教学活动的频率、效果和教师自己创造的课件资源的数量，对教师的教学活动及信息技术应用水平进行评价，对学生的学习进展进行统计分析，为学校或区域教育行政主管部门组织网上教学活动提供技术条件支撑。 　　根据校园数据资源建设及使用特点，系统除了给用户提供个人空间的数据存储模式，还要能够提供社区空间数据存储模式，让有共同数据需求和兴趣爱好的人建立关于科学实验、学科建设、资源共享、行政办公、社团组织等社区空间，让每个人既是数据的贡献者，也是数据的使用者。 　　同时，云服务体系的建设，也可以最大限度实现软、硬件资源的集约共享，降低学校信息化成本和建设难度；推动资源建设与使用良性互动，提高应用水平。为“优质资源班班通”和“网络学习空间人人通”提供技术支撑和网络服务的云服务体系。 　　3 云平台功能设计 　　校园资源云存储平台直接面向师生提供数据存储服务，应具备主流公有云盘服务的易用性，具备Web访问、客户端访问、移动端访问等多平台、多终端服务能力，同时考虑到安全性、可用性、扩展性和IO问题，适合采用分布式存储架构。因此云平台必须有效解决以下几方面功能性问题。 　　（1）共建共享共评、解决资源利用率低。云平台不仅仅提供针对于师生个人能够实现个人数据的存储和访问；还能针对于部门、班级、科研组等团队用户，能够按照部门、班级等群组关系进行共享数据资源的存储和分享管理。云存储平台能够直接为用户提供服务，数据无论大小，均可在线使用无需下载，直接网络读写，办公学习轻松自如。能够通过客户端以虚拟磁盘的方式让用户在线操作云存储中的数据资源，能够通过Web浏览器预览云存储中的Office文档。 　　根据学校数据资源建设及使用特点，系统除了给用户提供个人空间的数据存储，还应该提供了社区、群组模式，让每个人既是数据的贡献者，也是数据的使用者，实现互联网“我为人人、人人为我”的理念。社区、群组应具有完备的权限控制功能，具备对数据资源的读写删创的基本权限控制能力。 　　学校主管部门可以利用本平台统计教师利用网络从事教学活动的情况和教师自己创造