python中如何抓取动态页面的表格里的内容

比如这个网址http://gs.amac.org.cn/amac-infodisc/res/pof/manager/index.html

我想拿到对应表格里面公司点进去之后的URL。。。

用了bs4和parse什么的去做，结果爬下来的页面只是框架，不含表格里的内容的

结果我post去做，不知道如何返回这些表格的内容，在chrome的network分析里面看到的就是在response里的content的内容，这是我想要的，好难啊

或者大神们教我用selenium来模拟点击下一页什么的。。。

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除
收藏举报

1条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
threenewbee 2017-05-09 15:57
关注
chrome的network里找到提交的url和参数，照着写

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

python+selenium+xpath如何定位网页table表格中的数据 python selenium 有问必答爬虫
2022-02-25 12:44

回答 2 已采纳使用last()定位最后一个tr节点，再用索引获取。示例： from lxml import etree with open('a.html','r',encoding='utf-8') as f:
如何使用python爬取canvas中的内容呢？ css javascript python
2022-04-29 10:30

回答 1 已采纳需要在浏览器上临时显示后端实时处理的图像，需要将图像数据转成json字符串传输给js绘图。后端python处理： import cv2 as cvfrom encodings import base
python 爬取表格获取不到数据 python
2020-02-17 22:52

回答 4 已采纳爬取需要在请求头里面添加Host，要不然爬取不到任何信息，另外源码是不规则的html代码，所以需要指定html解析器 ``` # -*- coding：utf-8 -*- import os
Python 抓取动态网页表格信息
2020-05-04 21:36

其实还好啦的博客五一假期，研究了下Python抓取动态网页信息的相关操作，结合封面的参考书、网上教程编写出可以满足需求的代码。由于初涉python，过程中曲折很多，为了避免以后遇到问题找不到相关的信息创建本文。准备工具： ...
python抓取网页上的表格写入CSV，0开头的数字，怎么能完整的写入csv？ python 爬虫
2022-08-20 08:49

回答 3 已采纳 import pandas as pd df = pd.DataFrame() for i in range(1, 5): url = f'http://vip.stock.finance
Python selenium的爬虫无法完整爬取整个页面的内容 python selenium 爬虫
2021-10-24 09:44

回答 1 已采纳爬取内容不完整，应该是文档的更多内容，要往下滑动页面才会出现这个不太清楚，应该不是什么反爬，就是类似于中途给你弹出个广告，要具体分析怎么弄VIP内容肯定是需要你的账号是VIP才能看得到的，与selen
python如何读取企业微信上运营的数据 python 微信公众平台微信开放平台
2022-09-11 12:15

回答 1 已采纳试试，下面网友的方法：（1）《Python获取企业微信汇报数据，机器人推送源码教程》https://www.52pojie.cn/thread-1544465-1-1.html （2）《企业微信开
Python网页数据抓取以及表格的制作
2019-07-16 22:30

Python的网页数据抓取，表格的制作，CSS文件的生成，字体的改变
爬虫如何爬网上的表格？Python python 爬虫
2022-08-17 18:46

回答 2 已采纳爬虫如何爬网上的表格？你是不是一点不会爬虫？
python爬取并下载的文件为什么是空白且加载不出来？ python
2021-08-08 11:16

回答 2 已采纳你只是爬取了html网页，，怎么能让你运行人家的网页呢你说的加载不出来那是肯定的这个样子应该你只是爬了个外壳，css和js都不能用了，所以背景是白的，按钮都是没有样式的如果明白了，点击右上角给个采纳哦
python beautifulsoup 解析html无法获得全部html代码 python
2021-01-04 15:04

回答 3 已采纳因为这个div里面的内容是用ajax动态加载的，而用request获取的是网页的源代码（就是“右键菜单->查看网页源代码”的内容），不包含ajax动态加载的内容。所以要找到ajax加载数据的
Python实现抓取网页生成Excel文件的方法示例
2020-12-24 00:58

本文实例讲述了Python实现抓取网页生成Excel文件的方法。分享给大家供大家参考，具体如下： Python抓网页，主要用到了PyQuery，这个跟jQuery用法一样，超级给力示例代码如下： #-*- encoding:utf-8 -*- import sys...
python爬取网页数据的时候，怎么将不完整的代码补全为一个完整格式的网页代码，什么方法函数来着? html python 爬虫
2022-04-17 17:36

回答 1 已采纳字符串拼接不就行了
python3抓取中文网页的方法
2020-09-21 20:49

主要介绍了python3抓取中文网页的方法,实例分析了Python3页面抓取及编码转换的相关技巧,具有一定参考借鉴价值,需要的朋友可以参考下
python抓取动态网页_Python 抓取动态网页表格信息
2020-12-03 07:38

weixin_39955781的博客五一假期，研究了下Python抓取动态网页信息的相关操作，结合封面的参考书、网上教程编写出可以满足需求的代码。由于初涉python，过程中曲折很多，为了避免以后遇到问题找不到相关的信息创建本文。准备工具：Python ...
没有解决我的问题, 去提问

悬赏问题

¥15 Python中的request，如何使用ssr节点，通过代理requests网页。本人在泰国，需要用大陆ip才能玩网页游戏，合法合规。
¥100 为什么这个恒流源电路不能恒流？
¥15 有偿求跨组件数据流路径图
¥15 写一个方法checkPerson，入参实体类Person，出参布尔值
¥15 我想咨询一下路面纹理三维点云数据处理的一些问题，上传的坐标文件里是怎么对无序点进行编号的，以及xy坐标在处理的时候是进行整体模型分片处理的吗
¥15 CSAPPattacklab
¥15 一直显示正在等待HID—ISP
¥15 Python turtle 画图
¥15 stm32开发clion时遇到的编译问题
¥15 lna设计源简并电感型共源放大器