2条回答 默认 最新
- 7*24 工作者 2020-11-04 08:55关注
这个网站是动态加载的数据,所以直接用requests模块请求网页内容是请求不到任何数据的,获取动态网页数据的方法:
一是利用python 的selenium
模块,
二是分析网站的接口,可以获取到想到的数据以下是分析接口,然后请求获取的数据
import requests url = 'https://careers.tencent.com/tencentcareer/api/post/Query?countryId=&cityId=&bgIds=&productId=&categoryId=&parentCategoryId=&attrId=&keyword=&pageIndex=1&pageSize=10&language=zh-cn&area=cn' headers = { "User-Agent":"Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1)", "Referer": "https: // careers.tencent.com / search.html", "Host":"careers.tencent.com", "TE":"Trailers", "Accept":"text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8", "Accept-Encoding":"gzip, deflate, br", "Cache-Control":"max-age=0", "Upgrade-Insecure-Requests":"1" } res = requests.get(url=url,headers=headers) print(res.json())
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏 举报
悬赏问题
- ¥15 matlab有关常微分方程的问题求解决
- ¥15 perl MISA分析p3_in脚本出错
- ¥15 k8s部署jupyterlab,jupyterlab保存不了文件
- ¥15 ubuntu虚拟机打包apk错误
- ¥199 rust编程架构设计的方案 有偿
- ¥15 回答4f系统的像差计算
- ¥15 java如何提取出pdf里的文字?
- ¥100 求三轴之间相互配合画圆以及直线的算法
- ¥100 c语言,请帮蒟蒻写一个题的范例作参考
- ¥15 名为“Product”的列已属于此 DataTable