我想通过搜索值，获取下一级页面的网址，但是这个网址经过重定向处理，里面的docId是加工过的，不用selenium+浏览器的方法，我该如何获取这个docId值？
网址：https://patentscope2.wipo.int/search/en/search.jsf
我输入的docId是 US20180094236
跳转页面后docId变成了 US214329541
- 2021-11-11 11:15回答 1 已采纳 先确定需要爬取的网站，然后分析网站的数据来源，是后端生成数据还是ajax生成数据，确定数据来源方式就根据HTTP请求编写代码，这个涉及一些请求参数的加密、转换等等处理，然后清洗数据和数据入库
- 2022-08-17 17:07回答 3 已采纳 因为元素里的你要的内容是通过 ajax 请求动态加载的，可以浏览器抓包去看下，你想要的这条数据到底是哪个请求返回的，找到真正的请求，然后模拟发送就行了
- 2023-02-16 10:59回答 3 已采纳 。。我试了一下，确实在构造infos时，XPATH没问题，但是infos没有值 这里看到protected Attributes 了吗，说明哔哩哔哩还是有反爬机制的。百度一下~https://ask
- 2022-04-05 15:25plexming的博客 而用python做爬虫也十分简单方便，下面通过一个简单的小爬虫程序来看一看写爬虫的基本过程： 准备工作 语言：python IDE：pycharm 首先是要用到的库，因为是刚入门最简单的程序，我们主要就用到下面这两： ...
- 2021-11-27 11:36回答 3 已采纳 你爬虫应该是用requests发送http请求的吧，这个是无法从elements找到，你要在network的doc分析网页，你找不到的数据很大可能是ajax请求渲染前端的
- 2021-12-15 22:43回答 1 已采纳 get_product()函数里的xpath语法全都有问题啊1、//*后面不能有div了，直接接属性及属性值了2、说实话你第一句//*div[@class="items"]/div[@class="i
- 2021-08-11 23:59回答 2 已采纳 你是真的秀，没有请求图片地址获得数据肯定打不开啊，你写入的是列表的的文本的二进制，并不是图片的。应该在图片链接后面再请求一次图片网址，然后写入获得的响应数据的二进制内容，望采纳哈
- 2020-07-13 11:16码农BookSea的博客 关于Python爬虫的超详细讲解，用例子来给大家一步步分析爬虫的代码原理，由浅入深，老年人来了，我也给你整明白。
- 2022-01-27 12:25回答 4 已采纳 图片是js解析出来的，xpath无效，数据在js变量里面，正则提取下数据用json.loads加载获取 代码如下 import requests import re import json def
- 2022-09-08 16:31回答 3 已采纳 你输出con，输出的con是空列表，说明你节点的定位是有问题的，直接去开发者面板复制定位路径
- 2021-11-13 19:59回答 2 已采纳 有写入csv操作，但csv写入的话不可以用字典传进去，写入代码如下： import csv file=open('文件名字.csv','a',encoding='utf-8',newline='')
- 2020-09-20 22:30利用爬虫我们可以获取大量的价值数据，从而获得感性认识中不能得到的信息，这篇文章给大家带来了一个月入门Python学习,爬虫轻松爬取大规模数据，感兴趣的朋友一起看看吧
- 2020-12-25 10:40回答 3 已采纳 res = requests.post(url,headers=headers,json=payload)
- 2020-09-20 21:59下面小编就为大家分享一篇Python爬虫实例_城市公交网络站点数据的爬取方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 用windows做服务的同志有吗
- ¥60 求一个简单的网页(标签-安全|关键词-上传)
- ¥35 lstm时间序列共享单车预测，loss值优化，参数优化算法
- ¥15 Python中的request，如何使用ssr节点，通过代理requests网页。本人在泰国，需要用大陆ip才能玩网页游戏，合法合规。
- ¥100 为什么这个恒流源电路不能恒流？
- ¥15 有偿求跨组件数据流路径图
- ¥15 写一个方法checkPerson，入参实体类Person，出参布尔值
- ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题，上传的坐标文件里是怎么对无序点进行编号的，以及xy坐标在处理的时候是进行整体模型分片处理的吗
- ¥15 一直显示正在等待HID—ISP
- ¥15 Python turtle 画图