Bugbug223 2022-01-05 16:02 采纳率: 89.5%
浏览 21
已结题

python 爬虫 问题

我想问下 现在 b站 爬取热度榜 可以爬嘛 

User-agent: Yisouspider
Allow: /

User-agent: Applebot
Allow: /

User-agent: bingbot
Allow: /

User-agent: Sogou inst spider
Allow: /

User-agent: Sogou web spider
Allow: /

User-agent: 360Spider
Allow: /

User-agent: Googlebot
Allow: /

User-agent: Baiduspider
Allow: /

User-agent: Bytespider
Allow: /

User-agent: PetalBot
Allow: /

User-agent: *
Disallow: /
  • 写回答

3条回答 默认 最新

  • KEE_YiM 2022-01-05 16:49
    关注

    综合热门吗，可以的，找到它的抓包，应该是没有问题的

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题？

  • python爬虫问题求解 python 爬虫
    2022-04-29 11:12
    回答 1 已采纳 我给你改了一下，你对比看看吧： from bs4 import BeautifulSoup import pandas as pd import requests def crawer_travel
  • python爬虫数据显示问题 python 爬虫
    2022-07-20 16:54
    回答 3 已采纳 首先，你这里写错了divs = query(".cm-content-box").items()
  • python爬虫问题 python 爬虫
    2022-10-09 11:41
    回答 2 已采纳
  • python爬虫基础python爬虫基础
    2023-12-28 00:56
    python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础...
  • python 爬虫 问题 python 爬虫
    2022-01-05 16:02
    回答 3 已采纳 综合热门吗，可以的，找到它的抓包，应该是没有问题的
  • 如何解决python爬虫问题？ python 人工智能 爬虫
    2022-08-15 09:11
    回答 1 已采纳 应该是css选择器里面的规则不够明确，可改成href = selectors.css('div.container div div div ul li a::attr(href)').getall()
  • python爬虫位置问题 python 爬虫
    2023-03-08 13:31
    回答 2 已采纳 该回答引用GPTᴼᴾᴱᴺᴬᴵ如果您想要提取 div class="detail-context"标签下所有的 tr 标签，并进一步提取每个 tr 中的 td 标签内的内容，可以使用以下代码： impo
  • Python爬虫：爬取网页内容
    2024-06-28 22:13
    python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例...
  • python爬虫selenium点击按钮 python selenium 爬虫
    2022-10-21 12:35
    回答 2 已采纳 可以看下xpath语法，还有个插件（xPath Finder）在firefox浏览器里可以一键定位到 元素并复制xpath路径，如果插件给出的xpath路径定位不到，可以尝试自己写相对路径
  • python爬虫html获取不全 html python 爬虫
    2022-06-24 19:43
    回答 1 已采纳 其实有的，但是这个网站应该是为了懒加载把url用base64密了一下，然后再动态加载， 其实我下面发的这个就是url 是base64后的url 解码后就是https://s1.aigei.com/
  • python爬虫运行问题 python 数据挖掘 爬虫
    2023-01-06 11:14
    回答 1 已采纳 pip install openpyxl 安装下这个openpyxl库。望采纳哦！！！！
  • python爬虫20个案例
    2018-03-25 07:34
    讲诉python爬虫的20个案例 。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。
  • Python爬虫教程文档
    2024-09-07 14:28
    Python爬虫教程文档Python爬虫教程文档Python爬虫教程文档Python爬虫教程文档Python爬虫教程文档Python爬虫教程文档Python爬虫教程文档Python爬虫教程文档Python爬虫教程文档Python爬虫教程文档Python爬虫教程文档...
  • 精通Python爬虫框架Scrapy.pdf
    2020-12-20 13:57
    精通Python爬虫框架Scrapy.pdf
  • 没有解决我的问题, 去提问

问题事件

  • 系统已结题 6月28日
  • 已采纳回答 6月20日
  • 创建了问题 1月5日

悬赏问题

  • ¥15 Ios抖音直播的时候如何添加自定义图片在直播间！
  • ¥60 riscv-pulpino总线上挂载axi从机
  • ¥15 ssh登录页面的问题
  • ¥50 关于在matlab上对曲柄摇杆机构上一点的运动学仿真
  • ¥15 jetson nano
  • ¥15 :app:debugCompileClasspath'.
  • ¥15 windows c++内嵌qt出现数据转换问题。
  • ¥15 stm32 串口通讯过程中的问题
  • ¥20 公众号如何实现点击超链接后自动发送文字
  • ¥15 用php隐藏类名和增加类名