- 6
- 0
- 约 7页
- 2016-11-03 发布于贵州
- 举报
java千万级别据生成文件思路和优化,千万级数据查询优化,lte网格优化思路,mysql千万级数据优化,mysql千万级查询优化,lte高铁优化思路,千万级别数据库查询,volte优化思路,网格优化的流程及思路,千万级数据库查询优化
java千万级别数据生成文件思路和优化
现场提的问题概况:
? ? 数据量:生成xml,每个文件100W+ 条的数据
? ? 内存控制:最好不要超过512M
? ? 问题详情:在处理70W左右的时候内存溢出
一、先来看一下程序要生成的xml文件的结构
Xml代码 ?
File??
??FileType1/FileType??
??RType12/RType??
??Version03/Version??
??BNo004/BNo??
??FileQ5/FileQ??
??FNo0006/FNo??
??RecordNum1000000/RecordNum??
??!--?上面是文件头??下面是百万个RecordList??--??
??RecordList??
????Msisdn10350719507/Msisdn??
????State1/State??
????StartDatStartDate??
????DatDate??
????Balance45000/Balance??
??/RecordList??
???...??!--?可能百万个??RecordList?块--??
?/File??
File
FileType1/FileType
RType12/RType
Version03/Version
BN
原创力文档

文档评论(0)