第十三章 批量处理(数据量大).docxVIP

批量处理  PAGE \* MERGEFORMAT14 批量处理 目录  TOC \o 1-3 \h \z \u  HYPERLINK \l _Toc288638718 1.1 批量添加数据  PAGEREF _Toc288638718 \h 1  HYPERLINK \l _Toc288638719 2 批量查询  PAGEREF _Toc288638719 \h 7  HYPERLINK \l _Toc288638720 2.1 批量查询一  PAGEREF _Toc288638720 \h 7  HYPERLINK \l _Toc288638721 2.2 批量查询二  PAGEREF _Toc288638721 \h 11   批量添加数据 解析批量添加数据的规则配置，规则包“批量添加”主要是完成将大量数据添加到数据库中，在此数据库使用的是mysql，用户(table_user)是临时创建的一张表，表中两个字段id和name。 为数据源添加方法 点击数据源“hr”—“”，如下图：  弹出窗体，先点击“返回值类型”进行排序 为了能方便的找到方法，这个两个方法的类型是都是“void”类型 ，勾选setAutoCommit(boolean)和executeBatch()方法，  要进行批量操作的表 进行批量操作的表需要设置属性“结果集缓存”，属性值为“不缓存结果集并且不支持后退”，没有进行设置将不能进行批量操作，如下图： 怎样使用数据源中的方法 开始搭建坏境，首先我们需要在对象库中添加一个变量i，如下图： 新建规则集，属性“编辑类型”对应的值为“循环运行”，首先要使用数据源中的“根据{arg1}设置自动提交hr”方法，如下图： 添加操作  最后使用数据源中的“通过hr开始执行批处理更新”，如下图： 从上诉规则中我们可以看出，“根据{arg1}设置自动提交hr”和“通过hr开始执行批处理更新”不参与循环，同时“根据{arg1}设置自动提交hr”方法一定要在批量添加数据的先执行，而“通过hr开始执行批处理更新”一定要在批量添加数据后执行，这样才能快速完成批量添加数据，默认设置是一万条数据提交一次。  批量查询 批量查询一 首先我们已经将数据源“hr”导入了，右键点击数据源“hr”—“添加计算表格”，如下图：  我们需要初始化SQL，进行了初始化SQL操作的内存表才会有方法“根据sql语句初始化用户信息”即loadFromSql方法，如下图： 展示如下： 在对象库中添加变量“userList”，如下图：  规则配置如下，其中“根据sql语句初始化用户信息”方法和“取用户信息中所有数据”方法，都是内存表“用户信息”提供的，可以直接在内存表中找到，当方法选择不出来的时候可以在内存表“用户信息”的“用户信息操作”选项卡中复制方法，在粘贴到规则中，规则如下图：  批量查询二 首先我们需要在数据源“hr”下“添加查询结果集”，SQL语句是“select id,name from table_user”，生成如下查询结果集  右键点击数据源“hr”—“添加内存表”，如下图： 在此不初始化SQL，添加一个空白的内存表，如下图：  内存表将展示如下图： 在内存表中添加如下字段，如下图： 注：内存表“用户信息”中的“用户信息结构”需要与结果集“用户数据”中的“用户数据结果集结构”匹配。 配置规则如下，其中“根据SQL语句执行用户数据查询”方法是结果集“用户数据”提供的，而“将查询结果({arg1})中的数据全部导入表格(用户信息)”和“取用户信息中所有数据”则是由内存表“用户信息”提供，在此可以看出“将查询结果({arg1})??的数据全部导入表格(用户信息)”方法中结果({arg1})就是用户数据，这样是为什么上述中内存表“用户信息”和结果集“用户数据”匹配的原因。 总结：从“批量查询一”和“批量查询二”都是通过内存表的转换的，在不是处理大数据量的时候也可以使用内存表，这样可以大大提高性能。