2条回答 默认 最新
- 7*24 工作者 2020-11-04 08:55关注
这个网站是动态加载的数据,所以直接用requests模块请求网页内容是请求不到任何数据的,获取动态网页数据的方法:
一是利用python 的selenium
模块,
二是分析网站的接口,可以获取到想到的数据以下是分析接口,然后请求获取的数据
import requests url = 'https://careers.tencent.com/tencentcareer/api/post/Query?countryId=&cityId=&bgIds=&productId=&categoryId=&parentCategoryId=&attrId=&keyword=&pageIndex=1&pageSize=10&language=zh-cn&area=cn' headers = { "User-Agent":"Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1)", "Referer": "https: // careers.tencent.com / search.html", "Host":"careers.tencent.com", "TE":"Trailers", "Accept":"text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8", "Accept-Encoding":"gzip, deflate, br", "Cache-Control":"max-age=0", "Upgrade-Insecure-Requests":"1" } res = requests.get(url=url,headers=headers) print(res.json())
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏 举报
悬赏问题
- ¥15 网络科学导论,网络控制
- ¥100 安卓tv程序连接SQLSERVER2008问题
- ¥15 利用Sentinel-2和Landsat8做一个水库的长时序NDVI的对比,为什么Snetinel-2计算的结果最小值特别小,而Lansat8就很平均
- ¥15 metadata提取的PDF元数据,如何转换为一个Excel
- ¥15 关于arduino编程toCharArray()函数的使用
- ¥100 vc++混合CEF采用CLR方式编译报错
- ¥15 coze 的插件输入飞书多维表格 app_token 后一直显示错误,如何解决?
- ¥15 vite+vue3+plyr播放本地public文件夹下视频无法加载
- ¥15 c#逐行读取txt文本,但是每一行里面数据之间空格数量不同
- ¥50 如何openEuler 22.03上安装配置drbd