爬电影详情页的电影简介和主演，使用xpath定位，运行爬虫文件为什么是空的呀，取不到值是为什么？
在开发者工具中验证了xpath的路径是对的呀，为什么爬出来的数据还是空的呢？求指导
xpath定位获取数据为空的问题
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
关注本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报 分享
- 2023-03-23 14:13回答 1 已采纳 https://blog.csdn.net/superwfei/art
- 2021-09-30 17:40回答 2 已采纳 你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。requests只能获取网页的静态源代码，动态更新的内容取不到。对于动态更新的内容要用selenium 来爬取。 或者是通
- 2021-10-23 17:12回答 3 已采纳 该页面数据在XHR中找，构建一下headers和params，使用如下方式获json数据，然后从中解析即可： response = requests.get('https://fr.oppein.co
- 2021-03-17 02:40weixin_39819138的博客 一、Xpath定位方法深入探讨(1)常用的Xpath定位方法及其特点使用绝对路径定位元素。例如：driver.findElement(By.xpath("/html/body/div/form/input"))。特点：这个路径是从网页起始标签开始一直到要定位的元素的路径...
- 2021-09-14 11:27回答 4 已采纳 有可能你的程序跑到最后的时候，网页还没加载。sleep一下试一试。
- 2021-11-20 15:43回答 2 已采纳
- 2021-12-10 11:12回答 1 已采纳 为空的地方xpath主要是为了拿到什么数据，贴一下网页和要拿到的数据，帮你写一下xpath。上面图上的xpath那么长那么绝对路径，大概率拿不到数据的。
- 2024-03-08 12:17其主要功能是访问网页、提取数据并存储，以便后续分析或展示。爬虫通常由搜索引擎、数据挖掘工具、监测系统等应用于网络数据抓取的场景。 爬虫的工作流程包括以下几个关键步骤： URL收集： 爬虫从一个或多个初始...
- 2023-02-12 21:37回答 3 已采纳 最好不要用全路径，路径写的越长月容易出错，页面经过浏览器渲染会增加一些诸如tbody的标签，而代码请求的相应中不一定会有，因此建议尽量简化xpath路径，我的宗旨是：在能准确定位的基础上，路径越短越好
- 2021-12-16 20:07回答 2 已采纳 是text的问题，因为获取的内容是隐藏元素的文本，不能直接.text进行获取 from selenium import webdriver driver = webdriver.Chrome()
- 2020-10-28 20:47回答 1 已采纳 网页上的所有东西，都可以用js来生成， 而requests获取的，只是服务器第一次渲染的html内容。 等浏览器运行后，js开始运行的时候，JS可以再次对原始的html进行修改。 sel
- 2024-06-22 09:33许煦津的博客 探索GraphQuery：打造无与伦比的后端数据提取体验 项目地址:https://gitcode.com/storyicon/graphquery ???? 项目介绍 GraphQuery是一款革命性的查询语言和执行引擎，它能够跨越不同的后端服务，实现对文本的高效...
- 2022-02-25 12:44回答 2 已采纳 使用last()定位最后 一个tr节点，再用索引获取。示例： from lxml import etree with open('a.html','r',encoding='utf-8') as f:
- 2021-11-08 16:33Peaunt_Python的博客 根据xpath定位到了tr，注意游览器自动生成了tbody，在python中要把自动生成的tbody层级去掉。 此时我们想获取tr下面的td，请看代码 import requests from lxml import etree url = ...
- 2019-02-26 08:56fighting_1982的博客 以百度首页为例，先简单讲一下怎么在Chrome浏览器中使用XPath解析网页的数据。 在Chrome浏览器中打开百度首页：www.baidu.com，然后按F12快捷键打开浏览器控制台，切换到Elements页签，就可以看到当前网页的HTML...
- 没有解决我的问题, 去提问
问题事件
系统已结题
4月1日
已采纳回答
3月24日-
创建了问题
3月23日
悬赏问题
- ¥15 latex投稿显示click download
- ¥15 请问读取环境变量文件失败是什么原因？
- ¥15 在若依框架下实现人脸识别
- ¥15 网络科学导论，网络控制
- ¥100 安卓tv程序连接SQLSERVER2008问题
- ¥15 利用Sentinel-2和Landsat8做一个水库的长时序NDVI的对比，为什么Snetinel-2计算的结果最小值特别小，而Lansat8就很平均
- ¥15 metadata提取的PDF元数据，如何转换为一个Excel
- ¥15 关于arduino编程toCharArray()函数的使用
- ¥100 vc++混合CEF采用CLR方式编译报错
- ¥15 coze 的插件输入飞书多维表格 app_token 后一直显示错误，如何解决？