爬取页面信息的时候中间有广告导致返回None
效果如图
爬取页面信息的时候怎么才能直接跳过这个广告信息，不爬取广告部分呢
爬取页面网址：https://www.kylc.com/stats/global/yearly_per_country/g_gdp_per_capita/chn.html
爬取页面信息中间有广告导致返回None
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
3条回答 默认 最新
CSDN专家-showbo 2022-09-15 23:04关注判断为none continue继续下一个循环
本回答被题主选为最佳回答 , 对您是否有帮助呢?评论 打赏解决 1无用举报 分享
- 2021-11-25 13:50回答 1 已采纳 好巧，，我也爬过这个网站； 估计是你的参数没设置对，你再看看
- 2021-08-02 15:47回答 2 已采纳 返回的数据中有None值，说明按正则获取的节点中有的就无图片链接。你可以在语句中加入 if else 去剔除掉None值。
- 2021-12-07 21:42回答 1 已采纳 流程通了细节没改 import copy from scrapy import Request from scrapy.spiders import Spider class AniRank(S
- 2020-04-21 08:16吴秋霖的博客 限定关键词参数 Python3重新抛出异常不会丢失栈信息(raise from) 一切返回迭代器:range, zip, map, dict.values yield form 链接子生成器 asyncio内置库,asyn/await 原生协程支持异步编程 Python中静态方法、类方法...
- 2021-08-31 14:07回答 2 已采纳 你抓的频率太快，IP被墙了
- 2021-11-27 01:37
python爬虫在爬取页面时，修改页面编码出现问题AttributeError: 'NoneType' object has no attribute 'apparent_encoding'
python
开发语言
有问必答
爬虫
回答 3 已采纳 那是因为gethtml函数中请求超时或其他原因，抛出异常，返回了None 值 。在调用时出现None类型无apparent_encoding属性。你可以将timeout设置大些。 如解答对你有帮助，请 - 2020-05-29 14:50回答 2 已采纳 200说明成功了，返回None是因为你返回值本来就设置成None，或者没设置返回值导致python默认返回None
- 2021-12-25 22:22有两把刷子的博客 && 逻辑与 两边都是true，才返回true，否则返回false || 逻辑或 两边只要有一个是true，就返回true，否则返回false ！ 逻辑非 用来取一个布尔值相反的值 数据类型判断 typeof 对于基本数据类型判断是没有问题的，...
- 2022-09-05 20:31回答 2 已采纳 只有第一屏的图片的src直接存储地址，后续的都是js动态加载的，放在lz_src属性里面 应该判断src得到none，则获取lz_src的中
- 2020-09-01 19:12回答 2 已采纳 ``` browser.quit() return HtmlResponse(url=request.url, body=browser.page_source, re
- 2021-12-04 01:41回答 1 已采纳 img_url = div.xpath('./div/a/img/src').extract_first() src前面少了 @ 改成 img_url = div.xpath('./
- 2022-10-26 08:52周亚鑫的博客 默认值false get // 当有人读取 prop 的时候 get函数就会调用,并且返回就是 sss 的值 set // 当有人修改 prop 的时候 set函数就会调用, 有个参数这个参数就是修改后的值 Object.defineProperty 能定义symbol类型...
- 2022-07-11 07:35「已注销」的博客 爬虫教程：...服务器接到请求后给予相应的响应信息，其格式为一个状态行，包括信息的协议版本号、一个成功或错误的代码，后边是 MIME 信息包括服务器信息、实体信息和可能的内容。实体消息：...
- 2023-01-30 21:08蒙奇不想敲代码的博客 返回 iframe会阻塞主页面的Onload事件 搜索引擎的检索程序无法解读这种页面，不利于SEO iframe和主页面共享连接池，而浏览器对相同域的连接有限制，所以会影响页面的并行加载 使用iframe之前需要考虑这两个缺点。...
- 2023-04-19 21:02weixin_45754783的博客 通过css实现隐藏元素方法有如下： 方法一：display：none .conceal {display：none} //display：none是通常最实用的隐藏元素的方法 此元素原本所占据的位置，会被其他元素占据，也就是说它会导致浏览器的重排和重绘...
- 2024-04-30 15:07Bearin的博客 Promise对象有三种状态，他们分别是 pending（等待中） resolved（已完成）rejected（拒绝）Promise.all哪怕一个请求失败了也能得到其余正确的请求结果的解决方案promise 的then会返回一个新的 promise 对象，能保证...
- 2022-09-20 14:10guigu2012的博客 两个嵌套关系（父子关系）的块级元素、当父元素有上外边距或者没有上外边距、子元素也有上外边距，两个上外边距汇合成一个上外边距，以值相对较大的上外边距为准 解决方案： 子元素或者父元素的float不为none...
- 没有解决我的问题, 去提问
问题事件
系统已结题
9月24日
已采纳回答
9月16日-
创建了问题
9月15日
悬赏问题
- ¥15 平板录音机录音问题解决
- ¥15 请问维特智能的安卓APP在手机上存储传感器数据后，如何找到它的存储路径?
- ¥15 (SQL语句|查询结果翻了4倍)
- ¥15 Odoo17操作下面代码的模块时出现没有'读取'来访问
- ¥50 .net core 并发调用接口问题
- ¥15 网上各种方法试过了，pip还是无法使用
- ¥15 用verilog实现tanh函数和softplus函数
- ¥15 Hadoop集群部署启动Hadoop时碰到问题
- ¥15 求京东批量付款能替代天诚
- ¥15 slaris 系统断电后，重新开机后一直自动重启