

2条回答 默认 最新
7*24 工作者 2020-11-04 08:55关注这个网站是动态加载的数据,所以直接用requests模块请求网页内容是请求不到任何数据的,获取动态网页数据的方法:
一是利用python 的selenium模块,
二是分析网站的接口,可以获取到想到的数据
以下是分析接口,然后请求获取的数据
import requests url = 'https://careers.tencent.com/tencentcareer/api/post/Query?countryId=&cityId=&bgIds=&productId=&categoryId=&parentCategoryId=&attrId=&keyword=&pageIndex=1&pageSize=10&language=zh-cn&area=cn' headers = { "User-Agent":"Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1)", "Referer": "https: // careers.tencent.com / search.html", "Host":"careers.tencent.com", "TE":"Trailers", "Accept":"text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8", "Accept-Encoding":"gzip, deflate, br", "Cache-Control":"max-age=0", "Upgrade-Insecure-Requests":"1" } res = requests.get(url=url,headers=headers) print(res.json())
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏 举报