创新大数据计算引擎.PDFVIP

下载本文档

3
0
约3.52千字
约 8页
2019-12-29 发布于天津
举报
版权申诉

创新大数据计算引擎.PDF

1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击这里二次下载。
3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
7、VIP文档为合作方或网友上传，每下载1次，网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档

集算器大清单报表创新大数据计算引擎润乾软件出品传统模式实现大清单报表一般的报表工具或 BI 系统都是怎么实现大清单报表的呢？ • 数据全部读出，直接报表呈现 • 游标方式逐步读入呈现大清单报表？ • 使用数据库的分页机制按页读出传统模式实现大清单报表-全量/游标读全量读模式报表呈现层清单报表1 清单报表N • 全部读出耗时太长，用户体验恶劣调用请求处理(HTML) • 全内存计算的报表可能溢出全量/游标读取全量/游标返回数据库游标读模式 RDB • 只能向后翻页 - 大多数数据库游标只能向后取数而不能倒回取数，导致报表呈现时只能向后翻页，向前时又要重读传统模式实现大清单报表-分页读报表呈现层清单报表1 清单报表N 请求处理(HTML) 分页读模式调用返回 • 初始响应慢，翻页慢 SQL接收页号参数（PN） - SQL常常要执行完之后才能获得行号用于分页 - 读后页时要重读前页，无法直接跳过 … … • 可能出现数据不一致数据库页号X 行数=行号范围 - 每次按页取数的SQL独立，两次取数之间数据库分页读取分页返回有数据变更时，会导致数据统计结果错误 RDB 大清单报表问题的最佳解决方案有什么好办法呢？ • 采用取数和呈现两个异步线程，取数线程发出一句SQL后不断取出数据缓存到本地，保证取出数据的一致性；呈现线程从本地缓存中获取数据并快速提供大清单报表数据的翻页呈现新“烦恼”！！！ • 传统数据库系统不直接支持这种机制 • 需要应用系统硬编码实现引入数据计算引擎-集算器，零编码，流式计算实现大清单报表的呈现大清单报表-大数据计算引擎-集算器报表呈现层清单报表1 清单报表N 引入集算器提升翻页性能对比请求处理(HTML) 调用分页读取 50 45