请问，在爬去取动态网页get请求时，该怎么写代码呢？它的参数的变化是直接写在url中么？遇到静态网页的post请求时，还需要写data参数么？
望指点，不胜感激。
python爬虫爬取网页的时候get与post区别
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
关注https://www.zhihu.com/tardis/sogou/art/439355463
看链接，requests模块中get的参数可以放到url链接里，也可以封装到一个字典里requests.get(url=url，headers=headers，param=你封装的字典名)，
而post参数放在data里requests.post(url=url，headers=headers，data=参数的字典名)
有帮助的话采纳一下哦！🙊🙊🙊本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报 分享
- 2021-11-27 19:16回答 2 已采纳 该页面数据是动态加载的，需要用此链接用post请求去获取https://www.xuetangx.com/api/v1/lms/get_product_list/?page=1
- 2021-12-22 17:33回答 1 已采纳 你这个是VPN代理问题，你可以将VPN设置成部分代理，不要全部代理你的网络。
- 2022-03-08 22:50回答 2 已采纳 requests.get得到的是源代码，ajax动态加载或者js动态生成的html代码获取不到，需要直接请求接口获取数据或者从源代码中找到js数据源进行解析。截图中右边块的数据接口为下面这个，直接re
- 2024-05-02 21:472401_84562810的博客 [](https://img-blog.csdnimg.cn/img_convert/13e1a324bad638e4f3af07d953d27f45.jpeg) 如果只进行基本的爬虫网页抓取，那么urllib足够用了。 **Requests库** requests库是一个常用于http请求的模块，可以方便的对...
- 2019-04-22 20:43回答 3 已采纳 首先，我建议你主键最好不要设在userId上。让ID自增长。然后把userId作为一个普通的字段。 其次，我个人建议也不要设置外键关系。你可以通过把某一张表的ID放到另一张表里作为关联，但是不建议设
- 2022-10-26 16:35回答 1 已采纳 post和get方法的使用不是你决定的，二十接口使用的是什么请求方式，如果它是get请求那就只能用get请求，是post就只能用post
- 2022-08-16 16:50回答 2 已采纳 rows是行数，你改成10000，一次性爬完，不用翻页。
- 2018-11-19 10:27Python网络爬虫是一种用于自动化获取网页内容的程序，它能够帮助我们从互联网上抓取大量信息，例如新闻、数据、文章等。在这个过程中，我们主要会用到Python的一些库，如requests、BeautifulSoup和Scrapy等。下面...
- 2022-01-27 16:25回答 2 已采纳 接口需要post请求并发送数据，题主get请求没用 改下面就可以了，注意不能采集太快，有防火墙会拦截。。-_-||。。。 import requests import time headers =
- 2022-01-24 16:41回答 1 已采纳 res = requests.post(url=url,headers=self.headers,data=params) 或者 res = requests.post(url=url,headers
- 2022-08-23 18:15回答 1 已采纳 复制我的代码试试： import requests from bs4 import BeautifulSoup def get_page(link): headers = {'User-Ag
- 2023-05-30 23:18Python爬虫技术是数据获取的重要工具，特别是在网络信息丰富的今天，爬取网页数据成为数据分析、研究和应用的基础。本教程将聚焦于如何使用Python来爬取豆瓣音乐的相关信息，这涵盖了网页结构分析、HTTP请求、解析...
- 2023-02-08 21:41Python爬虫主要是通过模拟浏览器发送HTTP请求（GET或POST）到服务器，然后接收服务器返回的HTML或其他格式的网页内容。在Python中，最常用的库是`requests`用于发送HTTP请求，以及`BeautifulSoup`或`lxml`用于解析...
- 2024-03-20 06:06gk12336的博客 大家好，本文将围绕利用python爬取简单网页数据步骤展开说明，如何利用python爬取网页内容是一个很多人都想弄明白的事情，想搞清楚python爬取网页数据步骤图解需要先了解以下几个事情。
- 2020-09-18 03:37Python爬虫主要通过模拟HTTP请求（包括GET和POST请求）与教务系统的服务器进行交互。在本例中，使用到了Python的requests库来执行HTTP请求，并使用BeautifulSoup库对返回的HTML页面进行解析。 实例代码展示了整个...
- 没有解决我的问题, 去提问
问题事件
系统已结题
2月9日
已采纳回答
2月1日-
创建了问题
2月1日
悬赏问题
- ¥30 Matlab打开默认名称带有/的光谱数据
- ¥50 easyExcel模板 动态单元格合并列
- ¥15 res.rows如何取值使用
- ¥15 在odoo17开发环境中，怎么实现库存管理系统，或独立模块设计与AGV小车对接？开发方面应如何设计和开发？请详细解释MES或WMS在与AGV小车对接时需完成的设计和开发
- ¥15 CSP算法实现EEG特征提取，哪一步错了？
- ¥15 游戏盾如何溯源服务器真实ip?需要30个字。后面的字是凑数的
- ¥15 vue3前端取消收藏的不会引用collectId
- ¥15 delphi7 HMAC_SHA256方式加密
- ¥15 关于#qt#的问题：我想实现qcustomplot完成坐标轴
- ¥15 下列c语言代码为何输出了多余的空格