有处理好的dataframe，如何按条件导入mysql，对重复的数据做删除或忽略处理？

比如说：我有一个处理好的dataframe（Df_A），与mysql中的某张表（A）结构一致。现在想把Df_A导入表A，条件：
1、如果A没有重复数据，则append
2、如果有重复，则删除或者忽略该条数据。
用to_sql(表名， engine ,if_exists = '')之类简洁的方法可以实现吗？如果不能，应当怎么做？

写回答
好问题 0 提建议
关注问题
分享
邀请回答
编辑收藏删除
收藏举报

1条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
honestman_ 2022-09-19 18:43
关注
在数据库建立表格，设置字段A位唯一索引
遍历数据行，使用replace into 语句插入就行
本回答被题主选为最佳回答 , 对您是否有帮助呢?

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

dataframe与mysql的交互，我的mysql为何查询不到最新数据？ mysql python 数据库
2022-05-24 08:08

回答 1 已采纳 mysql也有commit啊你不执行commit，那写入的都是脏数据
MySQL导入数据后，日期数据发生变化，与原始数据不符，该如何解决？ database mysql 数据库
2022-05-12 09:24

回答 1 已采纳可以先把时间字段当varchar格式先导入临时表，在查询插入结果表
mysql插入数据时如何实现出现重复值时，重复次数自动递增？ mysql
2022-05-28 17:15

回答 2 已采纳 insert into tab1(姓名,重复次数) select 'zhangsan' as 姓名,count(*)+1 as 重复次数 from tab1 where 姓名 = 'zhangsan'
MySQL 表数据的导入导出操作示例
2020-09-08 21:40

此外，如果你需要导入的数据文件与导出时的格式不同，可能需要先进行数据预处理，比如使用文本编辑器或编程语言转换数据格式。对于更复杂的情况，如导入CSV文件，可能需要使用 `LOAD DATA LOCAL INFILE` 命令并指定...
mysql中怎样使用mysqldump导出导入有自增主键的数据？ mysql 有问必答
2021-07-22 10:27

回答 1 已采纳用navicat 直接转成csv，然后csv直接导入。
把Dataframe写入Mysql怎样最快？ mysql python
2021-04-11 23:12

回答 1 已采纳能不能批量插入呢？还有是否考虑分多表
C++里的MySQL语句提示表达式必须有整数或枚举类型怎么处理？ c++ mysql
2022-02-12 12:47

回答 2 已采纳
Python数据处理| Pandas知识大全！
2025-01-10 17:02

Python_trys的博客 Pandas是专门做数据处理和分析的，拥有许多各种复杂的函数。Pandas功能强大，支持类似于SQL的数据处理。Pandas的底层依赖于Numpy，是在Numpy的基础上发展而来。导入数据库：import pandas as pd。
如何解决pycharm爬取数据存入mysql时总会重复存入？ python
2021-10-25 14:23

回答 2 已采纳 1、mysql设置主键,2、入库前先去重1比较好点儿，如果是两份文件有重复的用2没法避免
mysql数据表主键id自增导出导入问题 mysql 数据库
2018-11-27 02:53

回答 2 已采纳导出的时候就把id当做一个普通字段导出来，导出来的id肯定也是断裂的，和数据库一样的，导进去的时候也把id导入，值固定，应该就是和你导出来的一样了
有逗号数据如何导入到mysql mysql
2022-12-12 10:51

回答 4 已采纳 LOAD DATA LOCAL INFILE 'xxx.csv' INTO TABLE table_name FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED
mysql导入主键重复怎么解决_MySQL 处理插入过程中的主键唯一键重复值的解决方法...
2021-02-08 07:53

张昕宇梁红的博客本篇文章主要介绍在插入数据到表中遇到键重复避免插入重复值的处理方法，主要涉及到IGNORE,ON DUPLICATE KEY UPDATE,REPLACE；接下来就分别看看这三种方式的处理办法。IGNORE使用ignore当插入的值遇到主键(PRIMARY ...
mysql 导入 csv 忽略id_将CSV导入MYSQL，但忽略标题行
2021-01-19 08:45

扇贝编程的博客 string($town), mysql_real_escape_string($county), mysql_real_escape_string($postcode), mysql_real_escape_string($phone), mysql_real_escape_string($email), mysql_real_escape_string($gasoiluser), mysql_...
mysql导入库排除某个表_mysql导入数据排除表-mysql导入数据排除某张表或多张表-吾爱编程网...
2021-01-18 23:30

weixin_39766071的博客 mysql在导出数据的时候可以使用--ignore-table参数来排除某张或者多张表，在数据库导入同样也可以使用，接下来吾爱编程就为大家介绍一下关于mysql导入数据排除某张表或多张表的方法，有需要的小伙伴可以参考一下：1...
SQL导入MySQL数据库的源代码
2024-06-16 17:19

总结来说，SQL导入MySQL数据库涉及到数据预处理、创建数据库和表结构、使用`LOAD DATA INFILE`命令、错误处理、性能优化以及备份恢复等多个环节。了解并熟练掌握这些步骤对于有效地管理和操作数据库至关重要。
没有解决我的问题, 去提问

问题事件

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
系统已结题 10月10日
关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
已采纳回答 10月2日
关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
创建了问题 9月19日

有处理好的dataframe，如何按条件导入mysql，对重复的数据做删除或忽略处理？

1条回答 默认 最新

问题事件

1条回答默认最新