每天定时从FTP上下载一份上百万数据量的压缩文件到服务器，然后解压，再然后读取这批文件，一个文件可能就1KB,可能一个文件夹里有上百万个文件，怎样快速的读取这批文件的信息，然后插入数据库呢，读完一个文件要同时把这个文件备份到另一个目录下，同时原目录下这个文件也要删除，请问各位大神，有什方法可以快速的写入数据，有没有demo参考一下，本人是菜鸟中菜鸟来的！
1条回答 默认 最新
oyljerry 2015-02-04 03:20关注这个基本上选取一个你熟悉的脚本语言来做，就比较简单
比如python
你用urllib库下载文件，ZipFile解压，open打开文件，读取内容，通过mysql存储数据库，mysqldb类库存入数据库，shutil类库删除文件本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报
分享
- 2015-02-04 03:04回答 1 已采纳 这个基本上选取一个你熟悉的脚本语言来做，就比较简单 比如python 你用urllib库下载文件，ZipFile解压，open打开文件，读取内容，通过mysql存储数据库，mysqldb类库存入数
- 2022-11-29 18:05回答 4 已采纳 你的目的验证 ，一句话就也行吧，js没法多行匹配再验证，所以你在网上找不到，你看这个能不能满足你的要求 function test(data) { return data.split('\n'
- 2021-08-30 16:12回答 1 已采纳 要不试试MySQL服务器增加本地DNS，把localhost_temp映射成127.0.0.1
- 2023-03-28 16:25lingkun_孟�的博客 使用python向oracle中插入clob字段
- 2022-10-22 17:48回答 1 已采纳 int main() { int m, n, max = 1, sum = 0, deletion; scanf("%d", &m); for (int i = 0; i
- 2021-11-09 14:40回答 2 已采纳 一个表，俩字段，一个存key,一个存value，这不就是键值对吗然后你键值对里面value如果存的是其它节点的key，不就是树形了比如我写一个最简单的树0 10 20 31 41 51 62 72 8
- 2022-03-27 10:17回答 1 已采纳 你看看你的mysql版本是多少,创建索引时的VISIBLE关键词是mysql 8.0才增加的,具体可参考官方文档 MySQL :: MySQL 8.0 Reference
- 2022-09-18 11:17G11176593的博客 2,其实很简单，只有三个文件： UploadImage.java：负责将图片存入数据库 showImage.jsp：负责将图片从数据库中读出来 index.jsp：负责显示，插入图片等操作 先上效果图： 然后咱们来看整个项目的大体框架： 闲话少...
- 2017-08-23 06:06回答 6 已采纳 可以通过放在域对象例如request或者session来实现，页面中el表达式获取
- 2017-07-19 09:44回答 1 已采纳 (1)日期不能修改，但是可以指向一个新的日期对象 (2)用delete * from 数据表 where 用户=你的用户id (3)可以， foreach S As String TextBox
- 2021-07-24 20:46回答 2 已采纳 如果是版本问题，那就重新安装下依赖试试
- 2021-08-10 15:07室点密可汗的博客 重装软件后，数据安装时出现“无法分离数据库，zy-sos 当前在使用”。 解决方法：停止服务管理器。 双击桌面右小角图标，点击停止，右键退出 或 点击开始--程序--sql企业管理器--停止--退出。 8、软件升级。 解决...
- 2021-12-17 14:00回答 1 已采纳 你题目的解答代码如下： class Person: def __init__(self,name,age,sex): self.name = name self
- 2021-03-16 22:07weixin_39696518的博客 本文使用mysql数据库举例插入图片到数据库和从数据库取出图片在页面显示：一、建表创建一个测试保存图片的表create table t_save_img(name varchar(200), 文件名称img longblob ,primary key(name))二、建实体类:...
- 2021-05-08 18:05kikikuka的博客 1、oracle 批量插入：insert into tableName(col1,col2,col3...)select 1,'第一行第一列值','第二列值' from dual unionselect 2,' 第二行第一列值 ','第二列值' from dual unionselect 3,' 第三行第一列值 ','第二...
- 2023-06-15 13:59DolphinDB智臾科技的博客 综上所述，业界在地震波形数据异常检测场景中，通常是先使用 FilterPicker 进行一级异常检测，若有异常点，则进一步使用深度学习的方法进行更加精确的检测。 2. 波形数据异常检测相关算法介绍 2.1 模板匹配算法 ...
- 2020-02-08 21:33威少SOS的博客 楼主也是编码了好几年了，常常有些问题看起来很简单，但细品之下却也说不出个所以然，特作此篇文章进行阐述 题目总纲： 1、什么是编码（Code）？ 2、硬件和软件的区别是什么？ 3、计算机的三大基本特征？ 4、...
- 2017-03-02 15:53闭家锁sos的博客 1.数据库DBHELper: using System; using System.Collections.Generic; using System.Linq; using System.Text; using System.Data.SqlClient; using System.Data; namespace FalutWinform { public ...
- 2015-11-28 16:20往事随风ing的博客 本文使用mysql数据库举例插入图片到数据库和从数据库取出图片在页面显示： 一、建表 创建一个测试保存图片的表 create table t_save_img( name varchar(200), 文件名称 img longblob , primary key(name) ) 二、...
- 2020-04-29 14:31举世无双勇的博客 1. 环境:pycharm2019中文版 python... 不用管自带的表 直接找到你创建的表的表名 比如我之前的video_info 双击打开 在其上方有个+号可以插入数据。鼠标又移 会显示出一个绿色上标 点击这个就可以把新增的上传到数据库
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 安卓adb backup备份应用数据失败
- ¥15 eclipse运行项目时遇到的问题
- ¥15 关于#c##的问题：最近需要用CAT工具Trados进行一些开发
- ¥15 南大pa1 小游戏没有界面，并且报了如下错误，尝试过换显卡驱动，但是好像不行
- ¥15 没有证书，nginx怎么反向代理到只能接受https的公网网站
- ¥50 成都蓉城足球俱乐部小程序抢票
- ¥15 yolov7训练自己的数据集
- ¥15 esp8266与51单片机连接问题(标签-单片机|关键词-串口)（相关搜索：51单片机|单片机|测试代码）
- ¥15 电力市场出清matlab yalmip kkt 双层优化问题
- ¥30 ros小车路径规划实现不了，如何解决？(操作系统-ubuntu)