小白一个，刚学python爬虫1天，因为跟朋友夸下海口说简单的都会，但我这个就不会了。
具体需求：python爬取跳页url不变的网页表格数据。
url：http://gs.amac.org.cn/amac-infodisc/res/pof/fund/index.html
爬取表格所有页的数据：
求求大神救救孩纸* _*
python爬取跳页url不变的网页表格数据
- 写回答
- 好问题 0 提建议
- 关注问题
分享- 邀请回答
-
4条回答 默认 最新
关注数据量不大的话 用selenium 自动化 ，或者抓包分析接口
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决评论 打赏无用 1举报 分享
- 2020-02-17 22:52回答 4 已采纳 爬取需要在请求头里面添加Host，要不然爬取不到任何信息，另外源码是不规则的html代码，所以需要指定html解析器 ``` # -*- coding：utf-8 -*- import os
- 2023-01-01 15:08回答 1 已采纳 很简单，加入一个： form_data={ 'page':2 } dd=requests.post(url,headers=headers,data=form_data)#用po
- 2022-11-25 20:06回答 2 已采纳 它这个做了一点点反扒，你需要把标签里面的5取出来，和你的0.9拼在一起。试试下面这个看行不 Moive_score1 = li.xpath('./i/b/text()') Moive_score2 =
- 2023-03-06 15:35网络安全小时光的博客 使用python selenium实现url不变，翻页爬取页面数据
- 2021-09-24 13:08回答 2 已采纳 可以用requests.post获取，需要将参数正确传递。代码可以这么写： import requests import time num=input('input cellphone number:
- 2021-11-11 11:15回答 1 已采纳 先确定需要爬取的网站，然后分析网站的数据来源，是后端生成数据还是ajax生成数据，确定数据来源方式就根据HTTP请求编写代码，这个涉及一些请求参数的加密、转换等等处理，然后清洗数据和数据入库
- 2022-01-27 15:14回答 3 已采纳 直接请求数据接口获取数据接口，不需要用selenium采集，代码如下 import requests import time headers = { 'user-Agent':'Mozilla/5.
- 2020-12-04 12:52See_sea125的博客 在使用python进行爬取数据时，有时会遇到表格筛选条件变化但上方链接不变化的情况。本文介绍一种简单的方法，爬取数据。 例子为nba-stat网站的 [http://www.stat-nba.com/team/ATL.html] 直接获取到的html文件无法...
- 2023-04-10 02:32回答 4 已采纳 结论：1、你的url是错误的。至少格式上来就错了。（https://liansai.500.com/zuqiu-6296/jifen-17831/2023-04-10&page=1）；2、col2之后
- 2022-03-10 00:27回答 1 已采纳 这种结果用正则表达式提取就行，不能用xpath，另外如果结果数据类型为json的话可以把他转换成字典取值。python里面有json，jsonpath等模块就可以搞这种字符串的。有帮助的话采纳一下哦！
- 2021-11-24 07:07回答 5 已采纳 import requests url = r'https://hugovk.github.io/top-pypi-packages/top-pypi-packages-30-days.min.js
- 2024-06-19 11:362401_84123265的博客 2，使用Python 模拟请求，在Headers下找到 Request Headers 部分，这是请求的头数据。 然后找到Form Data 复制以上内容，形成如下代码 `headers = { 'Accept': 'text/html, */*; q=0.01', 'Accept-Encoding': 'gzip...
- 2020-08-04 20:21西瓜之神�的博客 python爬虫-翻页url不变网页的爬虫探究 url随着翻页改变的爬虫已经有非常多教程啦，这里主要记录一下我对翻页url不变网页的探究过程。 学术菜鸡第一次写CSDN，请大家多多包容～ 如果对你有一点点帮助，请帮我点个赞...
- 2022-01-10 15:30Python_QB的博客 针对同一个网页，不同的页码，如软科中国大学排名2021，发现随着页码翻动，url未变 通过 F12，进入到网络，Ctrl+F进行搜索一个大学，会发现一个payload.js的文件 打开这个文件，发现数据都存在这个...
- 2020-12-06 13:23weixin_39587164的博客 python爬虫-翻页url不变网页的爬虫探究url随着翻页改变的爬虫已经有非常多教程啦，这里主要记录一下我对翻页url不变网页的探究过程。学术菜鸡第一次写CSDN，请大家多多包容～ 如果对你有一点点帮助，请帮我点个赞吧...
- 没有解决我的问题, 去提问
