爬电影详情页的电影简介和主演，使用xpath定位，运行爬虫文件为什么是空的呀，取不到值是为什么？
在开发者工具中验证了xpath的路径是对的呀，为什么爬出来的数据还是空的呢？求指导
xpath定位获取数据为空的问题
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
关注本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报 分享
- 2023-03-23 14:13回答 1 已采纳 https://blog.csdn.net/superwfei/art
- 2021-09-30 17:40回答 2 已采纳 你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。requests只能获取网页的静态源代码，动态更新的内容取不到。对于动态更新的内容要用selenium 来爬取。 或者是通
- 2021-10-23 17:12回答 3 已采纳 该页面数据在XHR中找，构建一下headers和params，使用如下方式获json数据，然后从中解析即可： response = requests.get('https://fr.oppein.co
- 2021-03-17 02:40weixin_39819138的博客 一、Xpath定位方法深入探讨(1)常用的Xpath定位方法及其特点使用绝对路径定位元素。例如：driver.findElement(By.xpath("/html/body/div/form/input"))。特点：这个路径是从网页起始标签开始一直到要定位的元素的路径...
- 2021-09-14 11:27回答 4 已采纳 有可能你的程序跑到最后的时候，网页还没加载。sleep一下试一试。
- 2021-11-20 15:43回答 2 已采纳
- 2021-12-10 11:12回答 1 已采纳 为空的地方xpath主要是为了拿到什么数据，贴一下网页和要拿到的数据，帮你写一下xpath。上面图上的xpath那么长那么绝对路径，大概率拿不到数据的。
- 2024-03-08 12:17其主要功能是访问网页、提取数据并存储，以便后续分析或展示。爬虫通常由搜索引擎、数据挖掘工具、监测系统等应用于网络数据抓取的场景。 爬虫的工作流程包括以下几个关键步骤： URL收集： 爬虫从一个或多个初始...
- 2023-02-12 21:37回答 3 已采纳 最好不要用全路径，路径写的越长月容易出错，页面经过浏览器渲染会增加一些诸如tbody的标签，而代码请求的相应中不一定会有，因此建议尽量简化xpath路径，我的宗旨是：在能准确定位的基础上，路径越短越好
- 2021-12-16 20:07回答 2 已采纳 是text的问题，因为获取的内容是隐藏元素的文本，不能直接.text进行获取 from selenium import webdriver driver = webdriver.Chrome()
- 2020-10-28 20:47回答 1 已采纳 网页上的所有东西，都可以用js来生成， 而requests获取的，只是服务器第一次渲染的html内容。 等浏览器运行后，js开始运行的时候，JS可以再次对原始的html进行修改。 sel
- 2021-11-08 16:33Peaunt_Python的博客 根据xpath定位到了tr，注意游览器自动生成了tbody，在python中要把自动生成的tbody层级去掉。 此时我们想获取tr下面的td，请看代码 import requests from lxml import etree url = ...
- 2022-02-25 12:44回答 2 已采纳 使用last()定位最后 一个tr节点，再用索引获取。示例： from lxml import etree with open('a.html','r',encoding='utf-8') as f:
- 2019-02-26 08:56fighting_1982的博客 以百度首页为例，先简单讲一下怎么在Chrome浏览器中使用XPath解析网页的数据。 在Chrome浏览器中打开百度首页：www.baidu.com，然后按F12快捷键打开浏览器控制台，切换到Elements页签，就可以看到当前网页的HTML...
- 2024-03-10 13:54其主要功能是访问网页、提取数据并存储，以便后续分析或展示。爬虫通常由搜索引擎、数据挖掘工具、监测系统等应用于网络数据抓取的场景。 爬虫的工作流程包括以下几个关键步骤： URL收集： 爬虫从一个或多个初始...
- 没有解决我的问题, 去提问
问题事件
系统已结题
4月1日
已采纳回答
3月24日-
创建了问题
3月23日
悬赏问题
- ¥15 关于#hadoop#的问题
- ¥15 (标签-Python|关键词-socket)
- ¥15 keil里为什么main.c定义的函数在it.c调用不了
- ¥50 切换TabTip键盘的输入法
- ¥15 可否在不同线程中调用封装数据库操作的类
- ¥15 微带串馈天线阵列每个阵元宽度计算
- ¥15 keil的map文件中Image component sizes各项意思
- ¥20 求个正点原子stm32f407开发版的贪吃蛇游戏
- ¥15 划分vlan后，链路不通了？
- ¥20 求各位懂行的人，注册表能不能看到usb使用得具体信息，干了什么，传输了什么数据