初学者爬虫一只
最近在学习从页面上获取数值，想从https://fw.f12key.xyz/ 这个网页上获取到对应的数值
但是发现这个数值是动态生成的，只找到应该是在XHR的这里
但是不知道post请求该怎么写，有把请求标头给配置到headers里面，但是返回的却是"code":400,"message":"Invalid Request","error":
Python爬虫动态页面获取问题
- 写回答
- 好问题 0 提建议
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
- 2022-06-24 19:43回答 1 已采纳 其实有的，但是这个网站应该是为了懒加载把url用base64密了一下，然后再动态加载， 其实我下面发的这个就是url 是base64后的url 解码后就是https://s1.aigei.com/
- 2022-04-29 11:12回答 1 已采纳 我给你改了一下，你对比看看吧： from bs4 import BeautifulSoup import pandas as pd import requests def crawer_travel
- 2022-11-22 23:06回答 2 已采纳 news 数据获取错误 import requests import json url = 'https://www.ptpress.com.cn/newsInfo/getCurrentAffairs
- 2024-03-24 13:56python爬虫案例获取歌曲python爬虫案例获取歌曲python爬虫案例获取歌曲python爬虫案例获取歌曲python爬虫案例获取歌曲python爬虫案例获取歌曲python爬虫案例获取歌曲python爬虫案例获取歌曲python爬虫案例获取歌曲...
- 2022-08-17 17:07回答 3 已采纳 因为元素里的你要的内容是通过 ajax 请求动态加载的，可以浏览器抓包去看下，你想要的这条数据到底是哪个请求返回的，找到真正的请求，然后模拟发送就行了
- 2022-07-20 16:54回答 3 已采纳 首先，你这里写错了divs = query(".cm-content-box").items()
- 2022-04-05 22:09回答 3 已采纳 因为 个别标签字典中没有bond_nm和bond_nm_tip键 data2 = data_get['bond_nm'] data5 = data_get['bond_nm_tip']
- 2024-04-09 20:49此外，Python爬虫还具有高级功能，如模拟登录、多线程和异步、代理IP以及动态页面处理等。这些功能可以帮助我们更好地处理和分析问题，并找到问题的最优解。 在使用Python爬虫解决实际问题时，首先需要安装Python和...
- 2022-11-15 23:10回答 1 已采纳 可以查看请求目标地址头的时候，是否有加密参数这一点很重要
- 2021-08-07 13:04回答 3 已采纳 你可以用time模块进行计时，每过10分钟先用os.system()重新打开程序，然后调用sys.exit()关闭旧进程如果有用，希望采纳哦~
- 2018-08-25 08:43回答 4 已采纳 楼主问的可能有点不清楚，我的理解是：https://zh.flightaware.com/live/airport/+{机场代号} 楼主有几千个机场代号，需要爬取这几千个URL的https://zh
- 2024-04-30 10:36Python案例学习，Python数据获取，Python爬虫案例学习，模拟登录，python获取公开网站数据，数据处理与分析，数据切割。爬虫案例。如何学习Python爬虫，python如何自动获取网页数据。
- 2023-06-03 08:10python 爬虫 获取网页信息
- 2023-10-13 13:38python爬虫获取网页图片代码，有需求的可以自行下载
- 2024-12-08 21:57python爬虫开发相关资源获取奖励
- 没有解决我的问题, 去提问
问题事件
系统已结题
12月17日
已采纳回答
12月9日-
修改了问题
12月8日
-
创建了问题
12月8日