php操作mysql InnoDB表，导出并删除日志表里数据，由于数据量过大

有这么一个需求，现在有一个表是系统日志表，由于表数据量太大，现在每天执行一次
定时任务，把表里的数据先导出到本地，然后清空，表里的数据。
在清空表里数据的时候，由于数据量太大，需要点时间，这时有新的日志写入的时候
把新数据写入到另一张同结构的表里，等原日志表删除完以后，就可以往进写日志了，再把副表里写入的数据，导入到主表中。
求大神指点思路，能详细点，非常感谢！

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

2条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
兜oo兜 2017-09-01 07:52
关注
定时导出，清空表数据的时候可以根据时间点做过滤进行操作，这样的话不会涉及到新纪录，也不用额外建一张副表做操作了，也省的维护

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

数据未通过PHP从MySQL完全导出到CSV mysql php
2018-07-26 04:09

回答 1 已采纳 You have done small mistake in export.php file: // iteratively exports row by row if (count($c
MySQL将表引擎修改为mrg_myisam后表数据丢失 mysql 数据库有问必答
2022-03-17 22:27

回答 2 已采纳我做了个测试，单纯的修改存储引擎后不会丢失数据 CREATE TABLE `test_20220318` ( `aid` varchar(10) DEFAULT NULL ) ENGINE=Inn
mysql 数据表引擎类型始终是innodb 不能修改成为myisam mysql
2017-07-21 09:18

回答 3 已采纳腾讯云的锅最新版本腾讯mysql云数据库不支持myisam 但是可气的是腾讯云不会提示直接把myisam改为innodb
MySQL的数据都在表内么_你插入MySQL的数据真的存到表里了么？
2021-02-07 01:43

weixin_39938312的博客你插入MySQL的数据真的存到表里了么？现在有这么一个问题：当你执行一条insert语句之后，插入的数据就已经保存在磁盘中了么？答案是不一定，那是为什么呢？首先来了解一下MySQL在InnoDB存储引擎中，数据是怎么存储...
scrapy存到mysql查询无数据 mysql python 数据挖掘测试用例
2020-03-04 16:49

回答 1 已采纳在pipelines文件的内部，打印item，看看数据到底有没有获取到连接数据库成功后，打印一个数据库内部的数据，看看是不是连接成功大概率你没搞到数据，所以什么也没有写入
无法在php中将json数据插入mysql数据库 json mysql php
2019-03-31 08:35

回答 1 已采纳 Seems you have not a proper primary key. Try create in the demo_table a proper primary key bas
PHP网站内从MySQL到JSON到AJAX的数据如何？ ajax json mysql php
2019-03-28 21:17

回答 2 已采纳 I think your problem is that you don't know how to get data from MySQL to JSON in PHP, then get th
mysql大数据量迁移方案
2020-11-17 12:08

陀螺TOP的博客数据量不大可以用navicat，mysqldump进行同步，navicat可视化操作方便。但当数据量达到一定级别3000w，1亿以上，实际使用中发现整个导入过程变得漫长在测试中navacat同步1亿4000w数据在整个同步过程中，mysql ...
InnoDB一棵B+树可以存放多少行数据？开发语言数据结构
2021-09-28 12:13

回答 1 已采纳 https://www.cnblogs.com/leefreeman/p/8315844.html 下面几张图可以帮你理解最小存储单元：文件系统中一个文件大小只有1个字节，但不得不占磁盘上4KB的空
PHP，MySQL - 加载大约100k记录并将它们导出到xml mysql php xml
2016-03-31 05:48

回答 1 已采纳 I found solution, problem was that I load many data. I made 3 upgrades: use function to log mem
mysql :为什么用truncate table 清空表后，内容却还在？ mysql
2022-05-06 21:13

回答 2 已采纳清空表数据,保留表结构,如果要删除表的话参考DROP TABLE 表名; TRUNCATE TABLE 表名不是删除表用的,DESC 是查看表结构,我们要用查询才可以看出数据是否被删除
mysql 归档_MySQL大表数据归档的几种方法介绍
2021-01-18 18:40

奥利奥奥的博客使用MySQL的过程，经常会遇到一个问题，比如说某张”log”表，用于保存某种记录，随着时间的不断的累积数据，但是只有最新的一段时间的数据是有用的；这个时候会遇到性能和容量的瓶颈，需要将表中的历史数据进行归档...
关于MySQL的数据插入（高级用法） java mysql 数据库
2022-07-26 08:57

回答 2 已采纳 ALTER TABLE t_score ADD mark varchar(10); update t_score set mark='ok' where score>=60; update t_
mysql在一个表内写入数据_你插入MySQL的数据真的存到表里了么？
2021-01-21 16:08

zetachow晓代码mkq的博客你插入MySQL的数据真的存到表里了么？现在有这么一个问题：当你执行一条insert语句之后，插入的数据就已经保存在磁盘中了么？答案是不一定，那是为什么呢？首先来了解一下MySQL在InnoDB存储引擎中，数据是怎么存储...
第三篇：Mysql存储引擎、数据导入导出、管理表记录、匹配条件
2019-12-19 08:29

English太次郎的博客 1，Mysql工作原理 mysql服务体系结构管理工具：命令连接池：（空闲进程、内存、CPU） SQL接口：（客户端与服务器建立连接传递SQL给mysqld进程）分析器：（检查sql语句正确性）优化器：（优化执行sql...
没有解决我的问题, 去提问

悬赏问题

¥35 平滑拟合曲线该如何生成
¥100 c语言，请帮蒟蒻写一个题的范例作参考
¥15 名为“Product”的列已属于此 DataTable
¥15 安卓adb backup备份应用数据失败
¥15 eclipse运行项目时遇到的问题
¥15 关于#c##的问题：最近需要用CAT工具Trados进行一些开发
¥15 南大pa1 小游戏没有界面，并且报了如下错误，尝试过换显卡驱动，但是好像不行
¥15 没有证书，nginx怎么反向代理到只能接受https的公网网站
¥50 成都蓉城足球俱乐部小程序抢票
¥15 yolov7训练自己的数据集