2条回答 默认 最新
- 7*24 工作者 2020-11-04 08:55关注
这个网站是动态加载的数据,所以直接用requests模块请求网页内容是请求不到任何数据的,获取动态网页数据的方法:
一是利用python 的selenium
模块,
二是分析网站的接口,可以获取到想到的数据以下是分析接口,然后请求获取的数据
import requests url = 'https://careers.tencent.com/tencentcareer/api/post/Query?countryId=&cityId=&bgIds=&productId=&categoryId=&parentCategoryId=&attrId=&keyword=&pageIndex=1&pageSize=10&language=zh-cn&area=cn' headers = { "User-Agent":"Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1)", "Referer": "https: // careers.tencent.com / search.html", "Host":"careers.tencent.com", "TE":"Trailers", "Accept":"text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8", "Accept-Encoding":"gzip, deflate, br", "Cache-Control":"max-age=0", "Upgrade-Insecure-Requests":"1" } res = requests.get(url=url,headers=headers) print(res.json())
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏 举报
悬赏问题
- ¥15 关于#.net#的问题:End Function
- ¥15 无法import pycausal
- ¥15 VS2022创建MVC framework提示:预安装的程序包具有对缺少的注册表值的引用
- ¥15 weditor无法连接模拟器Local server not started, start with?
- ¥20 6-3 String类定义
- ¥15 嵌入式--定时器使用
- ¥20 51单片机学习中的问题
- ¥30 Windows Server 2016利用兩張網卡處理兩個不同網絡
- ¥15 Python中knn问题
- ¥15 使用C#,asp.net读取Excel文件并保存到Oracle数据库