什么报表工具对大数据量报表的支持最好?
作者:互联网
大量数据从数据库里全部查出来,然后再生成报表输出到 web 端,一般需要很长时间,用户体验很差,而且报表一般采用内存计算,全读入的话也容易爆掉内存。所以大数据量报表呈现时都是采用分页的方式,尽量快速呈现第一页,用户也可以随意翻页,每次显示的一页数据量比较小,也就不会内存溢出。
大部分报表工具通常是使用数据库的分页机制。利用数据库提供的返回指定行号范围内记录的语法,即界面端根据当前页号计算出行号范围(每页显示固定行数)作为参数拼入 SQL 中,数据库就会只返回当前页的记录,从而实现分页呈现的效果。
但是这种方式会有两个问题:一个是向后翻页时,需要重新计算 sql,等待感会比较强;另一个是可能会因为在翻页时执行数据库更新操作导致数据不一致。虽然这两个问题可以通过游标取数方式解决,但是游标是一个单向操作,只能向后翻页,不能向前翻页,并不能从根本上解决问题。
润乾报表则提出了完全不同的大数据报表处理方案,采用两个异步线程完成取数和呈现,取数线程发出 SQL 后不断取出数据缓存到本地,由呈现线程从本地缓存中获取数据进行显示。这样,已经取出并缓存的数据就能快速呈现,不再有等待感;而取数线程所涉及的 SQL,在数据库中保持同一个事务,也不会有不一致的问题。同时集文件存储格式支持跳转到任意页访问,从而极大地改善了用户体验。
数据库系统本身并不直接支持这种机制,需要在报表工具层面做大量工作,润乾报表因为其内置的独特计算引擎可以很方便实现这一点,其他报表工具则难以做到。润乾报表中大报表展现设置很简单,例如 sql 数据集可以直接在报表属性里设置大数据集:
然后使用 big 标签就可以快速展现报表数据了(在展现的同时后台还在计算中,所以页码是会变化的):
导出 excel 时会有进度提醒:
标签:报表,翻页,数据库,对大,取数,线程,数据量 来源: https://www.cnblogs.com/xiaohuihui-11/p/12965543.html