FlyingKoi 2023-03-06 15:41 采纳率: 0%
浏览 45
已结题

关于#爬虫#的问题,如何解决?

在进行水质数据的爬虫时总是提示错误,根据一些博主的帖子猜测为超时问题,已经加入不加载图片的语句chrome_options.add_argument('blink-settings=imagesEnabled=false'),也对wait = WebDriverWait(browser,60)和time.sleep(30)中的数值进行过改变无法解决问题,将谷歌浏览器换成火狐也无法解决问题,麻烦各位厉害的博主帮忙解答疑惑,谢谢
(有一次火狐跑到后面错误提示大概是输出格式错误,data_str = datetime.datetime.now().strftime('%Y_%m_%d'),water_df.to_csv("水质数据.csv" % (data_str),index=None, encoding="GB18030"),可惜当时忘记存个副本,改了之后就改不回去了,麻烦厉害的博主们帮我看看是输出格式也有错误吗,感谢感谢)

img

img

img

  • 写回答

1条回答 默认 最新

  • 阳光宅男xxb 2023-03-07 08:00
    关注

    两个可能原因:
    一个是网页打开后,页面无数据,可能被反爬或者页面本身有问题,你用程序打开浏览器后,你可以观察下打开的网页是否正常
    一个原因是打开的网页中没有叫MF的iframe,或者这个iframe包裹在另一个iframe中,这样你是定位不到的,所以超时报错,你可以不要wait.util 使用time.sleep等待几秒后直接去操作,望采纳!!!

    评论

报告相同问题?

问题事件

  • 已结题 (查看结题原因) 4月13日
  • 创建了问题 3月6日

悬赏问题

  • ¥30 STM32 INMP441无法读取数据
  • ¥100 求汇川机器人IRCB300控制器和示教器同版本升级固件文件升级包
  • ¥15 用visualstudio2022创建vue项目后无法启动
  • ¥15 x趋于0时tanx-sinx极限可以拆开算吗
  • ¥500 把面具戴到人脸上,请大家贡献智慧
  • ¥15 任意一个散点图自己下载其js脚本文件并做成独立的案例页面,不要作在线的,要离线状态。
  • ¥15 各位 帮我看看如何写代码,打出来的图形要和如下图呈现的一样,急
  • ¥30 c#打开word开启修订并实时显示批注
  • ¥15 如何解决ldsc的这条报错/index error
  • ¥15 VS2022+WDK驱动开发环境