2 zhmailm zhmailm 于 2016.02.26 13:46 提问

怎样在java中实现sqlite的.import功能

在java中想把csv文件(百万条数据)导入到sqlite中。

3个回答

zhmailm
zhmailm   2016.02.26 18:21
已采纳
public static List readeCsv(String outPutPath, String tableName, Object obj) {
    List list = new ArrayList();
    Object o = null;
    try {
        ArrayList<String[]> csvList = new ArrayList<String[]>(); // 用来保存数据
        String csvFilePath = outPutPath + File.separator + tableName
                + ".csv";
        CsvReader reader = new CsvReader(csvFilePath, ',',
                Charset.forName("GBK")); // 一般用这编码读就可以了

        // reader.readHeaders(); // 跳过表头 如果需要表头的话,不要写这句。

        while (reader.readRecord()) { // 逐行读入除表头的数据
            csvList.add(reader.getValues());
        }
        reader.close();
        String[] d = ToObjUtil.getFiledName(obj);
        for (int row = 0; row < csvList.size(); row++) {
            String[] s = csvList.get(row);
            Map map = new HashMap();
            for (int i = 0; i < s.length; i++) {
                map.put(d[i], s[i]);
            }
            o = ToObjUtil.mapToObject(map, obj.getClass());
            list.add(o);
        }
    } catch (Exception ex) {
    }
    return list;

}
这个是我的代码,每次读取一行,一次放到list中,但是百万条数据不支持。
sqlite有相关的命令.import可以直接读取文件插入库里边。我测试了一下70万条只要30秒。
我想在java程序中执行这种方式:比如:
cd C:\sqlite

sqlite3 POS.db
.separator ","
.import D:/666666/Commod.csv QT_COMMOD
上边的怎么写成命令形式,
写成 strng cmd="?";
然后在java中运用Process p = Runtime.getRuntime()run.exec(cmd);去执行,以达到要求!

u011249920
u011249920   2016.02.26 13:51

可以通过BufferedReader 流的形式进行流缓存,之后通过readLine方法获取到缓存的内容。
BufferedReader bre = null;
try {
String file = "D:/test/test.txt";
bre = new BufferedReader(new FileReader(file));//此时获取到的bre就是整个文件的缓存流
while ((str = bre.readLine())!= null) // 判断最后一行不存在,为空结束循环
{
String item[] = bre.split(",");//CSV格式文件为逗号分隔符文件,这里根据逗号切分
String last = item[item.length-1];//通过此方法获取到数据信息
//int value = Integer.parseInt(last);//如果是数值,可以转化为数值
System.out.println(last);//此处转换成数据库相应的语句即可实现存储操作
};
备注: 流用完之后必须close掉,如上面的就应该是:bre.close(),否则bre流会一直存在,直到程序运行结束。

zhmailm
zhmailm 你看一下我的代码
2 年多之前 回复
Royal_lr
Royal_lr   Ds   Rxr 2016.02.26 16:55

写个程序直接读进去,,太慢,,最好是能直接copy

Csdn user default icon
上传中...
上传图片
插入图片
准确详细的回答,更有利于被提问者采纳,从而获得C币。复制、灌水、广告等回答会被删除,是时候展现真正的技术了!
其他相关推荐
Android 使用SQLite实现本地登录注册
简单的Splash启动页,本地SQLite的基本操作,从而达到本地登录注册的作用,简单的东西,希望给小白初学者一点帮助吧。
android之利用SQLite实现登陆和注册
android之利用SQLite数据库实现登陆和注册,使用SQLiteOpenHelper抽象类建立数据库,建立数据库类DatabaseHelper,写业务类实现查询和插入
android SQLite实现本地登录注册功能,SQLite简单应用(android studio)
android SQLite实现本地登录注册功能,SQLite简单应用(android studio)
java菜单打开外部文件
java菜单打开外部文件,比如说打开帮助文档。<br>:-)<br>-----------newton111@126.com
留言板,用java做的可以实现留言效果
留言板,用java做的可以实现留言效果 留言板,用java做的可以实现留言效果
typeinfo.pets的jar包(第四版 thinking in java)
在java编程思想一书中经常需要用到的jar包,typeinfo.pets
android sqlite数据库实现登录注册功能
使用SQLiteOnpeHelper,SQLiteDatabase实现对数据库的增删查改。以及对按钮及文本框实现获取焦点后的效果
java界面button实现不同功能
用Java语言实现具有不同功能的多个button
SQLite sql jdbc基于java的封装类
关于java对SQLite和sql的封装类,可以实现增删改,查,事务操作
Sqlite java 应用实例(附源码)
压缩包中有jdbc测试文件,和数据库维护工具 sqlite 不用我多介绍了吧,呵呵 该jdbc 支持 Mac Linux Windows 平台 支持jdk 1.4,原jdbc包只支持5.0以后的版本 将JNI库文件整合到jar包中,运行时自动部署到jar包同级文件夹中。 免去必须将库文件放在程序根文件夹,或者jdk库文件夹,或者在环境变量中还得配置库文件的路径。