每天定时从FTP上下载一份上百万数据量的压缩文件到服务器，然后解压，再然后读取这批文件，一个文件可能就1KB,可能一个文件夹里有上百万个文件，怎样快速的读取这批文件的信息，然后插入数据库呢，读完一个文件要同时把这个文件备份到另一个目录下，同时原目录下这个文件也要删除，请问各位大神，有什方法可以快速的写入数据，有没有demo参考一下，本人是菜鸟中菜鸟来的！
1条回答 默认 最新
oyljerry 2015-02-04 03:20关注这个基本上选取一个你熟悉的脚本语言来做，就比较简单
比如python
你用urllib库下载文件，ZipFile解压，open打开文件，读取内容，通过mysql存储数据库，mysqldb类库存入数据库，shutil类库删除文件本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报
分享
- 2015-02-04 03:04回答 1 已采纳 这个基本上选取一个你熟悉的脚本语言来做，就比较简单 比如python 你用urllib库下载文件，ZipFile解压，open打开文件，读取内容，通过mysql存储数据库，mysqldb类库存入数
- 2022-11-29 18:05回答 4 已采纳 你的目的验证 ，一句话就也行吧，js没法多行匹配再验证，所以你在网上找不到，你看这个能不能满足你的要求 function test(data) { return data.split('\n'
- 2021-08-30 16:12回答 1 已采纳 要不试试MySQL服务器增加本地DNS，把localhost_temp映射成127.0.0.1
- 2023-03-28 16:25lingkun_孟�的博客 使用python向oracle中插入clob字段
- 2022-10-22 17:48回答 1 已采纳 int main() { int m, n, max = 1, sum = 0, deletion; scanf("%d", &m); for (int i = 0; i
- 2021-11-09 14:40回答 2 已采纳 一个表，俩字段，一个存key,一个存value，这不就是键值对吗然后你键值对里面value如果存的是其它节点的key，不就是树形了比如我写一个最简单的树0 10 20 31 41 51 62 72 8
- 2022-03-27 10:17回答 1 已采纳 你看看你的mysql版本是多少,创建索引时的VISIBLE关键词是mysql 8.0才增加的,具体可参考官方文档 MySQL :: MySQL 8.0 Reference
- 2022-09-18 11:17G11176593的博客 2,其实很简单，只有三个文件： UploadImage.java：负责将图片存入数据库 showImage.jsp：负责将图片从数据库中读出来 index.jsp：负责显示，插入图片等操作 先上效果图： 然后咱们来看整个项目的大体框架： 闲话少...
- 2017-08-23 06:06回答 6 已采纳 可以通过放在域对象例如request或者session来实现，页面中el表达式获取
- 2017-07-19 09:44回答 1 已采纳 (1)日期不能修改，但是可以指向一个新的日期对象 (2)用delete * from 数据表 where 用户=你的用户id (3)可以， foreach S As String TextBox
- 2021-07-24 20:46回答 2 已采纳 如果是版本问题，那就重新安装下依赖试试
- 2021-08-10 15:07室点密可汗的博客 重装软件后，数据安装时出现“无法分离数据库，zy-sos 当前在使用”。 解决方法：停止服务管理器。 双击桌面右小角图标，点击停止，右键退出 或 点击开始--程序--sql企业管理器--停止--退出。 8、软件升级。 解决...
- 2021-12-17 14:00回答 1 已采纳 你题目的解答代码如下： class Person: def __init__(self,name,age,sex): self.name = name self
- 2021-03-16 22:07weixin_39696518的博客 本文使用mysql数据库举例插入图片到数据库和从数据库取出图片在页面显示：一、建表创建一个测试保存图片的表create table t_save_img(name varchar(200), 文件名称img longblob ,primary key(name))二、建实体类:...
- 2021-05-08 18:05kikikuka的博客 1、oracle 批量插入：insert into tableName(col1,col2,col3...)select 1,'第一行第一列值','第二列值' from dual unionselect 2,' 第二行第一列值 ','第二列值' from dual unionselect 3,' 第三行第一列值 ','第二...
- 2023-06-15 13:59DolphinDB智臾科技的博客 综上所述，业界在地震波形数据异常检测场景中，通常是先使用 FilterPicker 进行一级异常检测，若有异常点，则进一步使用深度学习的方法进行更加精确的检测。 2. 波形数据异常检测相关算法介绍 2.1 模板匹配算法 ...
- 2020-02-08 21:33威少SOS的博客 楼主也是编码了好几年了，常常有些问题看起来很简单，但细品之下却也说不出个所以然，特作此篇文章进行阐述 题目总纲： 1、什么是编码（Code）？ 2、硬件和软件的区别是什么？ 3、计算机的三大基本特征？ 4、...
- 2017-03-02 15:53闭家锁sos的博客 1.数据库DBHELper: using System; using System.Collections.Generic; using System.Linq; using System.Text; using System.Data.SqlClient; using System.Data; namespace FalutWinform { public ...
- 2015-11-28 16:20往事随风ing的博客 本文使用mysql数据库举例插入图片到数据库和从数据库取出图片在页面显示： 一、建表 创建一个测试保存图片的表 create table t_save_img( name varchar(200), 文件名称 img longblob , primary key(name) ) 二、...
- 2020-04-29 14:31举世无双勇的博客 1. 环境:pycharm2019中文版 python... 不用管自带的表 直接找到你创建的表的表名 比如我之前的video_info 双击打开 在其上方有个+号可以插入数据。鼠标又移 会显示出一个绿色上标 点击这个就可以把新增的上传到数据库
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 用windows做服务的同志有吗
- ¥60 求一个简单的网页(标签-安全|关键词-上传)
- ¥35 lstm时间序列共享单车预测，loss值优化，参数优化算法
- ¥15 基于卷积神经网络的声纹识别
- ¥15 Python中的request，如何使用ssr节点，通过代理requests网页。本人在泰国，需要用大陆ip才能玩网页游戏，合法合规。
- ¥100 为什么这个恒流源电路不能恒流？
- ¥15 有偿求跨组件数据流路径图
- ¥15 写一个方法checkPerson，入参实体类Person，出参布尔值
- ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题，上传的坐标文件里是怎么对无序点进行编号的，以及xy坐标在处理的时候是进行整体模型分片处理的吗
- ¥15 一直显示正在等待HID—ISP