如果控制查询数据量大时,导致的Java内存溢出
请大神帮忙,小弟在从A库里抽取数据插入到B库里,结果数据量太大,110多万条数据循环放入List中之后插入到B库的表中,在查询放入时导致了内存溢出,后来使用Oracle的...
请大神帮忙,小弟在从A库里抽取数据插入到B库里,结果数据量太大,110多万条数据循环放入List中之后插入到B库的表中,在查询放入时导致了内存溢出,后来使用Oracle的分页查询,但只能控制插入10000条数据,并不能全部插入,郁闷了...
展开
2个回答
展开全部
oracle的rownum用起来还真不太方便,我给你提供个思路试试,
首先在查询的时候按照某个唯一字段升序排序,一般来说应该是按主键排序。
并且在where里加一个条件就是对主键进行比较,
每次查询一定数量的记录,然后记录下该次查询时最大的主键ID是多少,记为MAXID,然后执行插入到B中的操作
下一次查询时在where里加入主键ID>MAXID,查出来之后将MAXID设置为此次查询的最大主键ID。在插入B,
如此循环应该就可以实现了。
首先在查询的时候按照某个唯一字段升序排序,一般来说应该是按主键排序。
并且在where里加一个条件就是对主键进行比较,
每次查询一定数量的记录,然后记录下该次查询时最大的主键ID是多少,记为MAXID,然后执行插入到B中的操作
下一次查询时在where里加入主键ID>MAXID,查出来之后将MAXID设置为此次查询的最大主键ID。在插入B,
如此循环应该就可以实现了。
本回答被网友采纳
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询