1条回答 默认 最新
- 2021-11-21 00:19回答 2 已采纳 你需要先确定返回的响应内容中有没有这些分类信息，有的话则是xpath没写对。 没有分类信息的话，需要在请求时构造和浏览器相同的请求头信息。 爬虫逆向社区-爬虫逆向论坛-
- 2021-11-03 16:05回答 3 已采纳 url方便发一下？本地xpath试试
- 2022-01-27 12:25回答 4 已采纳 图片是js解析出来的，xpath无效，数据在js变量里面，正则提取下数据用json.loads加载获取 代码如下 import requests import re import json def
- 2023-07-15 10:30光仔December的博客 XPath是由W3C（World Wide Web Consortium）组织发布的。W3C是一个国际性组织，负责制定Web标准和推动Web技术的发展。XPath最初在1999年发布，并成为XML Path Language的一部分。它由James Clark提出并提交给W3C进行...
- 2022-01-11 23:14回答 2 已采纳 xpath是用于对xml或html文档信息搜索工具，在python中是lxml的方法，只需pip 安装 lxml,就可以使用xpath来解析网页了。具体参考：https://zhuanlan.zhih
- 2021-12-10 11:12回答 1 已采纳 为空的地方xpath主要是为了拿到什么数据，贴一下网页和要拿到的数据，帮你写一下xpath。上面图上的xpath那么长那么绝对路径，大概率拿不到数据的。
- 2022-09-27 00:17回答 5 已采纳 import urllib.request from lxml import etree def create_request(page): if (page == 1):
- 2020-12-20 11:56我们首先来看下实例代码： from time import sleep import faker import requests from lxml import etree fake = faker.Faker() ... next_url = html.xpath("//a[@class='ch next']/@href") if next_ur
- 2022-01-10 19:47回答 3 已采纳 已经找到原因，爬取的为静态的数据，对动态数据会有问题
- 2022-05-18 17:43回答 3 已采纳 //span[text()="名字:"]/following::a[position()<count(//span[text()="名字:"]/following::a)-count(//spa
- 2021-09-30 17:40回答 2 已采纳 你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。requests只能获取网页的静态源代码，动态更新的内容取不到。对于动态更新的内容要用selenium 来爬取。 或者是通
- 2020-07-25 10:03罚酒饮得的博客 def get_detail(url,dbs): #每个网页设置延时 time.sleep(random.random() * 3) selector = comp(url) title_url = selector.xpath('//div[@class... title_title = selector.xpath('//div[@class="topic_list_det.
- 2019-03-27 09:11回答 2 已采纳 要爬取的是中国货币网上的内容，发现不是静态网页，最后找到了request返回包含json数据的url，得到了所需的信息~ ``` r = requests.get(url) pr
- 2021-03-03 21:05题海无涯10的博客 #提取下一页链接 from selenium import webdriver from lxml import etree #启动浏览器 cb = webdriver.Chrome() #cb就是浏览器 cb.get('http://angelimg.spbeen.com/') #get就是访问这个地址 ...
- 2020-07-10 18:23猛男技术控的博客 xpath是学爬虫的必备工具，其选择功能十分强大，它提供了非常简明的路径选择表达式，另外，它还提供了超过100个内建函数，用于字符串、数值、时间的匹配以及节点、序列的处理等，几乎所有我们想要定位的节点，都可以...
- 没有解决我的问题, 去提问
问题事件
创建了问题
12月5日
悬赏问题
- ¥15 #MATLAB仿真#车辆换道路径规划
- ¥15 java 操作 elasticsearch 8.1 实现 索引的重建
- ¥15 数据可视化Python
- ¥15 要给毕业设计添加扫码登录的功能！！有偿
- ¥15 kafka 分区副本增加会导致消息丢失或者不可用吗？
- ¥15 微信公众号自制会员卡没有收款渠道啊
- ¥100 Jenkins自动化部署—悬赏100元
- ¥15 关于#python#的问题：求帮写python代码
- ¥20 MATLAB画图图形出现上下震荡的线条
- ¥15 关于#windows#的问题：怎么用WIN 11系统的电脑 克隆WIN NT3.51-4.0系统的硬盘