基于SDL的集成R语言大数据挖掘系统设计.pdfVIP

DataBaseTechnique ·数据库技术 基于SDL的集成R语言大数据挖掘系统设计 文／陈景超 在数据信息迅速膨胀增长的 表 I：信号及意义 信息化时代，大数据挖掘与分析方 法发挥着越来越重要 的作用。开 信号名称 信号意义 源 R软件集成 了各种的数据分析 USemame 用户名 和可视化方法，具备强大的数据 分析功能和 良好的可扩展性，适 passwd 用户密码 用于数据挖掘 ，但把 R语言应用 selectal1 用户选择算法 1 于海量数据分析领域的研究较少， selecta12 用户选择算法2 对 于R语言在数据挖掘 系统里的 定位较模糊 。SDL(Specification setparl 用户设置参数 1 _ anddescription language)是一 setpar2 用户设置参数2 种基于扩展有限状态机和抽 象数 _ 据类型 的形式化描述语 言，本文 login 用户登录 基于 SDL，给出了一种集成R语言 input _ wrg 用户输入错误 的大数据挖掘 系统的设计方法。 该设计 方案基 于SDL语 言对 系统 resulttext 用户选择显示文本结果 的描述可以把系统划分为层次清 resul gure 用户选择显示图形结果 晰的各个功能模块，使程序员无 displayresulttext 返 回文本形式结果 需对底层复杂的计算框架做深入 _ _ display resultfigure 返回图形化结果 的 了解，只需对相应模块接 口进 _ _ _ 行编程，减少出错 ，缩短开发周期。 quit 退出系统 的嵌入两个技术难点来实现的，通过Hadoop (2)用户选择算法种类，并选择设置参 集群的搭建实现了分布式文件的存储管理和访 数，确认 。 【关键词】SDL数据挖掘 大数据 R语言 系 问，但Hadoop本身基于Java语言实现，并不 (3)系统管理模块生成R语言代码，经 统设计 支