事情是这样的，文件是TXT形式，数据库是ORACLE [color=red]<------- 不可变[/color]
从文本文件中(TXT)读取数据,把这些数据汇总统计后的批量导入到数据库（ORACLE）里。
原本是用sqlldr方式首先读取到数据库的临时表里，再用Merge来判断并做汇总统计处理后
再插入到真正要用的表当中。
但是项目经理说这样做不符合需求，按需求应该把批量导入的时候要处理 汇总与统计....
这样用sqlldr显然不行，ext/imp这个只能导入dump文件....
我现在不知道应该怎么做了，请求帮助！
从文件读取导入数据库的问题
- 写回答
- 好问题 0 提建议
- 关注问题
分享- 邀请回答
-
3条回答 默认 最新
enet_java 2010-10-22 15:33关注不知道数据量有多大？汇总统计主要是统计什么呢？
一般来讲可以通过程序实现，定义一个Bean，匹配文本中的字段，然后对文本文件进行IO操作，将生成的bean放入一个Map或者是List中，然后再进行SQL的组装，批量进行插入就可以了。
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报 分享
- 2020-10-19 11:35然而，当CSV文件中数据量达到数百万条时，文件大小可能会非常庞大，这导致直接读取和导入数据库会遇到超时或系统资源耗尽等问题。 在处理这种大规模文件时，为了优化性能，通常需要采用分批处理的策略。分批处理...
- 2020-08-25 16:36"java读取cvs文件并导入数据库" Java读取CSV文件并导入数据库是很常见的一种数据导入方式，今天我们就来详细介绍这个过程。 为什么需要读取CSV文件并导入数据库？ 在实际应用中，我们经常会遇到需要将数据从CSV...
- 2020-10-23 14:36在读取文件之前，需要进行错误处理，确保文件确实存在并且可读，否则整个操作会因为文件读取错误而失败。 之后，使用`explode()`函数将读取的SQL文件内容按照分号（`;`）分割成数组，因为SQL语句一般在每条语句末尾...
- 2021-01-20 03:05在测试的时候，需要造模拟数据，或者是将生产环境的数据导出到测试环境中去，本文记录通过python读取txt文件，并将数据导入mysql数据库 1、示例代码： import pymysql # 打开数据库连接 conn = pymysql.connect(host...
- 2020-10-27 11:16接下来，当需要从TXT文件读取数据时，文章使用了file_get_contents函数来获取文件内容。这个函数能够方便地读取整个文件到一个字符串变量中。但是当文件特别大时，使用file_get_contents可能会导致内存消耗过大。...
- 2025-03-07 11:00全栈Demo的博客 以下主要用于各种各样的数据导入至数据库中，我这里使用.csv文件进行举例（使用Navicat进行）
- 2020-09-09 09:15本文将详细讲解如何使用Python从MySQL数据库导入和导出CSV文件。 首先，我们来理解一下CSV（Comma Separated Values）文件。CSV是一种通用的、轻量级的数据交换格式，它以纯文本形式存储表格数据，每行代表一条记录...
- 2020-08-25 16:37java实现批量导入.csv文件到mysql数据库 概述 本文主要介绍了使用Java实现批量导入.csv文件到MySQL数据库的方法。该方法可以快速地将.csv文件中的数据批量导入到数据库中，具有很高的实用价值。 Java实现批量导入...
- 2020-07-20 10:24总的来说，"易语言记事本txt文本文件导入access数据库"是一个典型的文件数据与数据库交互的实例，它涵盖了易语言编程、文本解析、数据库操作等多个技术领域，对于学习和提升易语言编程及数据库应用能力具有很高的...
- 2020-10-24 21:29从提供的文件内容来看，本文主要探讨了如何使用PHP语言通过PHPExcel类来导入Excel文件数据到MySQL数据库中。本文内容丰富，具体涵盖了数据库准备、PHPExcel类文件的使用、SQL语句编写、数据导入等关键技术点。下面将...
- 没有解决我的问题, 去提问
