Python爬虫如何获取审查的elements内容而不是网页yuan code内容，困扰好久了
Python爬虫如何获取审查的elements内容而不是网页yuan code内容
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
honestman_ 2022-09-05 08:32关注两者元素不一样是因为有一些内容是Ajax动态加载的，所以直接请求网页地址是没有动态加载的内容的，解决方法是 重新进行抓包，在网络一栏中筛选XHR
请求，找到真正的加载数据的请求然后模拟发送就好了解决 无用评论 打赏举报 编辑记录 分享
- 2022-03-08 22:50回答 2 已采纳 requests.get得到的是源代码，ajax动态加载或者js动态生成的html代码获取不到，需要直接请求接口获取数据或者从源代码中找到js数据源进行解析。截图中右边块的数据接口为下面这个，直接re
- 2022-06-24 19:43回答 1 已采纳 其实有的，但是这个网站应该是为了懒加载把url用base64密了一下，然后再动态加载， 其实我下面发的这个就是url 是base64后的url 解码后就是https://s1.aigei.com/
- 2021-11-27 19:16回答 2 已采纳 该页面数据是动态加载的，需要用此链接用post请求去获取https://www.xuetangx.com/api/v1/lms/get_product_list/?page=1
- 2023-03-09 21:49qq_繁华的博客 python 爬虫代码
- 2021-08-31 14:07回答 2 已采纳 你抓的频率太快，IP被墙了
- 2022-06-15 23:07回答 1 已采纳 很正常，一个网页能运行，不但需要html文件，还需要css和js文件在背后支撑。（前端和后端）你只是爬下来了一个html文件，自然什么都不会展示出来。你仔细想想，如果这么轻易的就能被你爬到百度的htm
- 2021-08-29 16:20回答 1 已采纳 解析不到要么xpath没有写正确，要么是该元素是js动态加载。查看一下requests.get()到得的网页代码，可使用bs4对节点标签解析试试。
- 2020-05-09 10:58思源湖的鱼的博客 Using this book, you\u2019ll learn how to implement world-class Windows Professional Foundation (WPF)\u00a0solutions in a real-world line of business applications, developing the code from the ground...
- 2021-07-20 18:50回答 4 已采纳 在传递json格式数据时（content-type: application/json），使用json参数 import requests headers = { "Content-Type
- 2021-10-24 09:44回答 1 已采纳 爬取内容不完整，应该是文档的更多内容，要往下滑动页面才会出现这个不太清楚，应该不是什么反爬，就是类似于中途给你弹出个广告，要具体分析怎么弄VIP内容肯定是需要你的账号是VIP才能看得到的，与selen
- 2021-08-07 13:04回答 3 已采纳 你可以用time模块进行计时，每过10分钟先用os.system()重新打开程序，然后调用sys.exit()关闭旧进程如果有用，希望采纳哦~
- 2020-06-27 21:16csdn_yuan88的博客 众所周知，Java中强调“一切皆对象”，但是Python中的面向对象比Java更加彻底，因为Python中的类(class)也是对象，函数（function）也是对象，而且Python的代码和模块也都是对象。 Python中函数和类可以赋值给一个...
- 2017-09-29 14:07回答 1 已采纳 网页中有js脚本的话，可以在下载网页后动态修改/添加网页本身，也就是ajax
- 2019-09-21 23:00anglu0752的博客 数据类型 ...频、网页等各种各样的数据，不同的数据，需要定义不同的数据类型。在Python中，能够直接处理的数据类型有以下几种 一 Number(数字) 1.1 数字类型的创建 a=10 b=a b=666 pri...
- 2019-03-09 23:29weixin_30608131的博客 但是，计算机能处理的远不止数值，还可以处理文本、图形、音频、视频、网页等各种各样的数据，不同的数据，需要定义不同的数据类型。在Python中，能够直接处理的数据类型有以下几种 一 Number(数字) 1.1 数字类型...
- 没有解决我的问题, 去提问
问题事件
创建了问题
9月5日
悬赏问题
- ¥15 在centos7安装conda
- ¥15 c#调用yolo3 dll文件获取的数据对不上
- ¥20 WPF 如何实现多语言，label 和cs(live Charts)中是否都能翻译
- ¥15 STM32F103上电短路问题
- ¥15 关于#单片机#的问题：以ATMEGA128或相近型号单片机为控制器设计直流电机调速的闭环控制系统（相关搜索：设计报告|软件设计|流程图）
- ¥15 打开软件提示错误：failed to get wglChoosePixelFormatARB
- ¥15 (标签-python|关键词-char)
- ¥15 python+selenium，在新增时弹出了一个输入框
- ¥15 苹果验机结果的api接口哪里有？？单次调用1毛钱及以下。
- ¥20 学生成绩管理系统设计