lucene查询结果集分页代码

gzl8425459 45 0 ZIP 2018-12-29 16:12:40

在lucene搜索分页过程中,可以有两种方式 一种是将搜索结果集直接放到session中,但是假如结果集非常大,同时又存在大并发访问的时候,很可能造成服务器的内存不足,而使服务器宕机 还有一种是每次都重新进行搜索,这样虽然避免了内存溢出的可能,但是,每次搜索都要进行一次IO操作,如果大并发访问的时候,你要保证你的硬盘的转速足够的快,还要保证你的cpu有足够高的频率 而我们可以将这两种方式结合下,每次查询都多缓存一部分的结果集,翻页的时候看看所查询的内容是不是在已经存在在缓存当中,如果已经存在了就直接拿出来,如果不存在,就进行查询后,从缓存中读出来. 比如:现在我们有一个搜索结果集 一个有100条数据,每页显示10条,就有10页数据. 安装第一种的思路就是,我直接把这100条数据缓存起来,每次翻页时从缓存种读取 而第二种思路就是,我直接从搜索到的结果集种显示前十条给第一页显示,第二页的时候,我在查询一次,给出10-20条数据给第二页显示,我每次翻页都要重新查询 第三种思路就变成了 我第一页仅需要10条数据,但是我一次读出来50条数据,把这50条数据放入到缓存当中,当我需要10--20之间的数据的时候,我的发现我的这些数据已经在我的缓存种存在了,我就直接存 缓存中把数据读出来,少了一次查询,速度自然也提高了很多. 如果我访问第六页的数据,我就把我的缓存更新一次.这样连续翻页10次才进行两次IO操作 同时又保证了内存不容易被溢出.而具体缓存设置多少,要看你的服务器的能力和访问的人数来决定 缓存中把数据读出来,少了一次查询,速度自然也提高了很多. 如果我访问第六页的数据,我就把我的缓存更新一次.这样连续翻页10次才进行两次IO操作 同时又保证了内存不容易被溢出.而具体缓存设置多少,要看你的服务器的能力和访问的人数来决定

用户评论
请输入评论内容
评分:
Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

谢谢分享!

Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

我是把查询结果缓存到内存中,只要条件相同,就从缓存中取,如果条件不同了,重新查询。这样有缺点,就是数据不同步,还好我们对同步周期以天为单位,要求不高

Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

可以作为参考~建议看Lucene inaction 这本书

Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

版本很老,只能参考

Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

有些bug还的解决

Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

可以用就是有点过时了

Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

代码很好,自己修改之后能够很好地运行

Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

很好用的 代码啊

Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

版本确实有点老了,不太适合

Generic placeholder image 卡了网匿名网友 2018-12-29 16:12:42

代码版本很老,已不适用。