爬一个图片网站，ul>img,结果我用request获取的ul下面根本没有img。
爬笔趣阁，div下面直接就是小说内容，结果div下面只有一句话。
驱动selenium太浪费机器资源，怎么解决？？
1条回答 默认 最新
- 2021-06-21 14:46回答 2 已采纳 需要添加headers。 headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36
- 2022-06-24 19:43回答 1 已采纳 其实有的，但是这个网站应该是为了懒加载把url用base64密了一下，然后再动态加载， 其实我下面发的这个就是url 是base64后的url 解码后就是https://s1.aigei.com/
- 2023-01-19 17:40回答 4 已采纳 tmp=json.loads(response.text)把这个改成试试，你这啥网址，想给你分析下都没法弄tmp=json.loads(response.content.decode())
- 2020-09-17 21:51主要介绍了Python requests获取网页常用方法解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
- 2022-08-01 11:57回答 3 已采纳 obj变量其实是一个字典, 还需要从obj字典中获取具体的值。示例: for subdict in obj["data"]: print(subdict["k"],":",subdict["
- 2022-03-08 22:50回答 2 已采纳 requests.get得到的是源代码，ajax动态加载或者js动态生成的html代码获取不到，需要直接请求接口获取数据或者从源代码中找到js数据源进行解析。截图中右边块的数据接口为下面这个，直接re
- 2021-11-27 19:16回答 2 已采纳 该页面数据是动态加载的，需要用此链接用post请求去获取https://www.xuetangx.com/api/v1/lms/get_product_list/?page=1
- 2020-09-18 20:41主要给大家介绍了关于Python利用requests模块下载图片的相关资料，文中通过示例代码介绍的非常详细，对大家学习或者使用Python具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧
- 2022-05-22 11:42回答 1 已采纳 请求的参数不对，所以返回的是一个静态页面
- 2022-09-24 23:49回答 1 已采纳 http协议都没加
- 2022-04-29 10:30回答 1 已采纳 需要在浏览器上临时显示后端实时处理的图像，需要将图像数据转成json字符串传输给js绘图。 后端python处理： import cv2 as cvfrom encodings import base
- 2022-12-23 21:57猿小猴子的博客 爬虫的数据爬取量非常大，显然不可能对每个页面都手动复制源代码，因此就有必要使用自动化的方式来获取网页源代码。
- 2018-05-03 02:07回答 3 已采纳 参数写错了,你的username拼接了,写成这样,我postman试过了可以 {'consumer_key': '77081-4664470ecdeaa9c127925c30', 'access_to
- 2020-03-12 10:28IT1995的博客 如下代码： import re import requests class HandleLaGou(object): def __init__(self): self.laGou_session = requests.session() self.header = { 'User-Agent': 'Mozilla/5.0 (M...
- 2022-06-25 11:42kylner的博客 Python用requests库获取网页的cookie
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 c程序不知道为什么得不到结果
- ¥40 复杂的限制性的商函数处理
- ¥15 程序不包含适用于入口点的静态Main方法
- ¥15 素材场景中光线烘焙后灯光失效
- ¥15 请教一下各位，为什么我这个没有实现模拟点击
- ¥15 执行 virtuoso 命令后，界面没有，cadence 启动不起来
- ¥50 comfyui下连接animatediff节点生成视频质量非常差的原因
- ¥20 有关区间dp的问题求解
- ¥15 多电路系统共用电源的串扰问题
- ¥15 slam rangenet++配置