在使用selenium的过程中遇到一个问题：通过自动化爬取的页面会比人工操作少几个请求，如下图所示：
请问大家这种情况有什么办法可以解决吗
0条回答 默认 最新
- 2021-09-23 10:04回答 2 已采纳 先进首页，再跳转
- 2021-12-25 00:39回答 6 已采纳 先用postman 测试headers里面那些内容不是必须的。分析那些cookie 是浏览器生成的，那些是服务器返回的。去分析js当中浏览器生成cookie的生成代码抠出来，然后用PyExecJS 这
- 2021-04-22 14:34回答 2 已采纳 题主意思是每次切换时桌面不显示浏览器窗口吧，否则你不打开它，无法获取数据的，如果想要隐藏浏览器界面，在选项中设置, chrome_options = webdriver.ChromeOptions(
- 2020-08-18 15:29基于python requests selenium爬取excel vba过程解析 基于python requests selenium爬取excel vba过程解析是一种高效的数据爬取方法，该方法通过使用python的requests和selenium库来爬取excel vba过程解析的数据。...
- 2022-04-27 18:29回答 1 已采纳 使用session发送请求；获取验证码图片，以及发送验证码数据应该在同一个session请求中： 发送URL请求，得到验证码图片URL访问图片URL，下载验证码图片发送验证码数据 ----------
- 2021-09-22 15:39回答 1 已采纳 使用selenium 填写表单登录成功之后，可以获取到登录的cookie的，driver.get_cookies()再将获取到的cookie，放入header中，使用requests请求接口时带上co
- 2022-07-28 17:33回答 2 已采纳 是不是手动打开的页面是登录状态 脚本打开的没登录
- 2024-03-18 19:27illusionbigdata的博客 Selenium是广泛使用的模拟浏览器运行的库，用于Web应用程序测试。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样，并且支持大多数现代 Web 浏览器。
- 2021-11-27 19:16回答 2 已采纳 该页面数据是动态加载的，需要用此链接用post请求去获取https://www.xuetangx.com/api/v1/lms/get_product_list/?page=1
- 2021-07-02 00:00回答 3 已采纳 我这边直接运行have_html是没有报错的，have_html的url好似不用登录多可以访问的。 windows = self.driver.window_handles
- 2023-02-27 15:28回答 3 已采纳 ..谢邀。页数有点多，就不跑完测了。报错是list index out of range,如果是在371页报的错，跟最后一页条数不够没啥关系。那首先317页和316页有啥区别？ 是317页就不够40条
- 2020-03-30 14:30本篇将详细介绍如何利用Python的Selenium框架来爬取“考试宝典”网站上的题目。 首先，我们需要了解Selenium的基本原理。Selenium是一个自动化测试工具，但同时也常被用于网页爬虫，因为它可以模拟用户的真实行为，...
- 2021-12-23 10:17回答 1 已采纳 headers缺少了cookie，这个网址通过js生成这__jsluid_h，__jsl_clearance这2个cookie，没有的话会输出js生成cookie然后再跳转到搜索结果页 示例代码如下
- 2024-05-21 20:34稍微认真一点的博客 它提供了一组API和工具，可以与多种编程语言一起使用，如Java、Python、C#等，用于模拟用户在浏览器中的行为，如点击、填写表单、提交数据等。Selenium可以运行在各种浏览器上，包括Chrome、Firefox、Safari等，它还...
- 2024-03-01 12:29这通常通过HTTP请求库实现，如Python中的Requests库。 解析内容： 爬虫对获取的HTML进行解析，提取有用的信息。常用的解析工具有正则表达式、XPath、Beautiful Soup等。这些工具帮助爬虫定位和提取目标数据，如文本...
- 没有解决我的问题, 去提问
问题事件
系统已结题
11月8日
创建了问题
10月31日
悬赏问题
- ¥30 STM32 INMP441无法读取数据
- ¥100 求汇川机器人IRCB300控制器和示教器同版本升级固件文件升级包
- ¥15 用visualstudio2022创建vue项目后无法启动
- ¥15 x趋于0时tanx-sinx极限可以拆开算吗
- ¥500 把面具戴到人脸上，请大家贡献智慧
- ¥15 任意一个散点图自己下载其js脚本文件并做成独立的案例页面，不要作在线的，要离线状态。
- ¥15 各位 帮我看看如何写代码，打出来的图形要和如下图呈现的一样，急
- ¥30 c#打开word开启修订并实时显示批注
- ¥15 如何解决ldsc的这条报错/index error
- ¥15 VS2022+WDK驱动开发环境