生产环境上,对于较大的数据导出,使用了ThreadPoolTaskExecutor 的异步任务。
实际使用中发现,对于较大的数据导出如4G的sqlite的DB文件,异步任务执行到一半的时候不在执行,通过进度最终发现,进度到一定的时候就不在进行任务了,们目前试了2次,一次是1520/3344,一次是1778/3344 停止任务。
我不清楚是不是线程抛出异常了,因为我在现有的日志中没有发现相关异常记录,如果是 我应该怎么记录这个日志呢?
Spring配置
<!-- 核心线程数,默认为1 -->
<!-- 最大线程数,默认为Integer.MAX_VALUE -->
<!-- 队列最大长度,一般需要设置值>=notifyScheduledMainExecutor.maxNum;默认为Integer.MAX_VALUE-->
<!-- 线程池维护线程所允许的空闲时间,默认为60s -->
<!-- 线程池对拒绝任务(无线程可用)的处理策略,目前只支持AbortPolicy、CallerRunsPolicy;默认为后者 -->
<!-- AbortPolicy:直接抛出java.util.concurrent.RejectedExecutionException异常 -->
//自动注入
@Autowired
ThreadPoolTaskExecutor threadPoolTaskExecutor;
//异步任务
ExportDbTaskThread zipPackageThread = new ExportDbTaskThread(resultPackageService,expFile,contextPath,
tbType,filterParam,sortParam,xzqdm+xzqmc,progressId);
threadPoolTaskExecutor.execute(zipPackageThread);
问题已解决; sqllite 存入blob字段时 以流的形式将多媒体文件读入流中,并在流中组装prmt,导致堆内存溢出,使线程无限等待。