我现在有一个任务,要把大量的数据从数据库A中读出来写入到TXT中平(这中间我把数据库中的数据显示写入到map缓存中)均一天的数据是3个G,然后再从TXT中读取数据,并计算数据中的一些值然后插查入到数据库B中,由于数据量很大,所以这个过程很耗时,读写文件的方式都是用FileWriter和FileReader这俩个流来实现的,想请问一下大神们用什么样的方法才能使读写操作的速度更快一些呢,提高一下效率。
另外,采用什么样的方法才能才能使该功能同时启动多个,即是把代码编程多线程,多进程的方式,同时读取文件中的数据并计算或者把数据写入到TXT中,当中互不影响,保证数据的准确性。
最大的问题是,当我的程序运行到一半是,由于某些原因突然停电或者一些意外原因,程序突然中止了,在程序重新启动时,我要怎么保证程序继续运行按照停电时的数据,而不是重新开始。
求大神指教了!!!!!!