Roinging 2019-03-22 13:14 采纳率: 0%
浏览 434
已结题

python scrapy爬虫框架数据库数据量无法增加

python 3.6 ,scrapy爬虫框架,mysql数据库,workbench界面。
第一次运行捕获2w条数据,第二次运行的时候,确定可以获取目标网页新的数据,数据库也显示了新的数据库更新时间,但是数据总量却一直不变,新数据无法写入
请问有朋友遇到过这样的问题吗?

  • 写回答

1条回答 默认 最新

  • gammey 2019-03-22 17:47
    关注

    你的SQL语句是怎么写的,然后表结构是什么样的?
    根据我估计可能是表的主键重复导致数据无法插入

    评论

报告相同问题?

悬赏问题

  • ¥15 求差集那个函数有问题,有无佬可以解决
  • ¥15 【提问】基于Invest的水源涵养
  • ¥20 微信网友居然可以通过vx号找到我绑的手机号
  • ¥15 寻一个支付宝扫码远程授权登录的软件助手app
  • ¥15 解riccati方程组
  • ¥15 display:none;样式在嵌套结构中的已设置了display样式的元素上不起作用?
  • ¥15 使用rabbitMQ 消息队列作为url源进行多线程爬取时,总有几个url没有处理的问题。
  • ¥15 Ubuntu在安装序列比对软件STAR时出现报错如何解决
  • ¥50 树莓派安卓APK系统签名
  • ¥65 汇编语言除法溢出问题