如何才能请爬到该页面？

一个异步加载的页面：http://q.10jqka.com.cn/thshy/index/field/199112/order/desc/page/1/ajax/1/
打开上面的链接，右键‘查看源代码’可以看到需要的内容，但用requests.get()请求服务器只返回两个script标签（如下图）。请问各位高手如何才能正确的请求到页面内容？
代码及返回值

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

2条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
threenewbee 2018-11-04 09:00
关注
拿到返回的cookie，再请求一次。

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

python爬虫html获取不全 html python 爬虫
2022-06-24 19:43

回答 1 已采纳其实有的，但是这个网站应该是为了懒加载把url用base64密了一下，然后再动态加载，其实我下面发的这个就是url 是base64后的url 解码后就是https://s1.aigei.com/
Python爬虫可以用IDLE编写吗？ python
2021-08-09 21:50

回答 4 已采纳学习爬虫用IDLE是可以的，一般IDLE可以满足初学者的使用需求。最近我也在学爬虫，写了一些实例，可以来看看我的专栏： https://blog.csdn.net/weixin_52132159/
Python爬虫配合VPN爬取出现报错 python 爬虫
2021-12-22 17:33

回答 1 已采纳你这个是VPN代理问题，你可以将VPN设置成部分代理，不要全部代理你的网络。
python爬虫获取简单页面
2022-03-14 11:46

Autumn fall的博客我们讲过开发者工具可以截取B/S交互的数据包，那么这节我们用python3抓取其截取的数据包目的：通过python3抓取百度的网页工具：pycharm(下载地址：https://www.jetbrains.com/pycharm/download/#section=windows) ...
练习python爬虫，爬小说中途就报错，如何解决？ python 爬虫
2023-02-19 14:02

回答 2 已采纳根据截图显示的错误信息，可能是由于程序访问网站过于频繁导致被封禁了IP地址，需要等待一段时间才能继续访问。为了解决这个问题，可以考虑以下方法：减缓爬取速度：通过在请求头中设置User-Agent和
Python网络爬虫中json解析失败 json python 有问必答爬虫
2022-02-26 20:51

回答 2 已采纳这个接口返回的是jsonp数据，不是json，要获取text替换掉回调函数名称和前后的括号后才是json数据
python爬虫如何自动获取Network中的某个XHR地址？ python 爬虫网络
2018-08-25 08:43

回答 4 已采纳楼主问的可能有点不清楚，我的理解是：https://zh.flightaware.com/live/airport/+{机场代号} 楼主有几千个机场代号，需要爬取这几千个URL的https://zh
整理的用Python编写的爬虫文档.pdf
2023-06-13 21:05

1 Python 爬虫入门教程 [Python]网络爬虫（一）：网络爬虫的定义网络爬虫，即 Web Spider，是一个很形象的名字。把互联网比喻成一个蜘蛛网，那么 Spider 就是在网上爬来爬去的蜘蛛。网络蜘蛛是通过网页的链接...
通过python爬虫，爬取到的图片无法打开，请问要怎么办？ pycharm python
2021-08-11 23:59

回答 2 已采纳你是真的秀，没有请求图片地址获得数据肯定打不开啊，你写入的是列表的的文本的二进制，并不是图片的。应该在图片链接后面再请求一次图片网址，然后写入获得的响应数据的二进制内容，望采纳哈
selenium爬虫遇到VIP页面以及爬取次数限制时该怎么办 python selenium 爬虫
2021-10-24 12:56

回答 1 已采纳遇到VIP页面，我想你应该需要一个VIP会员，并以登入破解。限制爬取次数上，可以用proxy轮转或尽量拉长sleep时间或多办几个账号以上浅见
python爬虫如何解析到$0里的内容 python 有问必答
2021-08-29 16:20

回答 1 已采纳解析不到要么xpath没有写正确，要么是该元素是js动态加载。查看一下requests.get()到得的网页代码，可使用bs4对节点标签解析试试。
python爬虫小实例
2020-12-21 17:13

先打开目标网站的网址，先对其进行观察，俗话说的好，知己知彼才能百战百胜，不观察仔细了，鬼知道我们爬的都是些什么东西！接下来我们正式开始吧首先打开目标网页用浏览器自带的开发者工具对当前页面进行解析，...
Python爬虫 xpath 列表为空 python 有问必答爬虫
2022-03-08 08:32

回答 2 已采纳第二个li的div下少了结束标签导致etree解析出错了少了div结束标签后，etree将建筑类别后的几点全部归类到第二li下了，改下面这样就可以了 import requests from lxm
Python网络爬虫基础进阶到实战教程
2023-06-22 15:27

全栈若城的博客本文是一篇关于Python网络爬虫的教程，从基础概念认识网络爬虫开始，介绍了HTML页面的组成和常用的标签属性、样式和JavaScript效果。接着详细讲解了Python中的Requests模块的get请求和实践，以及Post请求的区别和...
python爬虫：模拟网站登录，获取指定页面信息
2023-09-14 15:04

胡少侠7的博客【代码】python爬虫：模拟网站登录，获取指定页面信息。
没有解决我的问题, 去提问

悬赏问题

¥15 HLs设计手写数字识别程序编译通不过
¥15 Stata外部命令安装问题求帮助！
¥15 从键盘随机输入A-H中的一串字符串，用七段数码管方法进行绘制。提交代码及运行截图。
¥15 TYPCE母转母，插入认方向
¥15 如何用python向钉钉机器人发送可以放大的图片？
¥15 matlab（相关搜索：紧聚焦）
¥15 基于51单片机的厨房煤气泄露检测报警系统设计
¥15 路易威登官网里边的参数逆向
¥15 Arduino无法同时连接多个hx711模块，如何解决？
¥50 需求一个up主付费课程

如何才能请爬到该页面？

2条回答 默认 最新

悬赏问题

2条回答默认最新