Bugbug223 2022-01-05 16:02 采纳率: 89.5%
浏览 21
已结题

python 爬虫 问题

我想问下 现在 b站 爬取热度榜 可以爬嘛 

User-agent: Yisouspider
Allow: /

User-agent: Applebot
Allow: /

User-agent: bingbot
Allow: /

User-agent: Sogou inst spider
Allow: /

User-agent: Sogou web spider
Allow: /

User-agent: 360Spider
Allow: /

User-agent: Googlebot
Allow: /

User-agent: Baiduspider
Allow: /

User-agent: Bytespider
Allow: /

User-agent: PetalBot
Allow: /

User-agent: *
Disallow: /
  • 写回答

3条回答 默认 最新

  • KEE_YiM 2022-01-05 16:49
    关注

    综合热门吗，可以的，找到它的抓包，应该是没有问题的

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题？

  • python爬虫问题求解 python 爬虫
    2022-04-29 11:12
    回答 1 已采纳 我给你改了一下，你对比看看吧： from bs4 import BeautifulSoup import pandas as pd import requests def crawer_travel
  • python爬虫数据显示问题 python 爬虫
    2022-07-20 16:54
    回答 3 已采纳 首先，你这里写错了divs = query(".cm-content-box").items()
  • python爬虫问题 python 爬虫
    2022-10-09 11:41
    回答 2 已采纳
  • python爬虫基础python爬虫基础
    2023-12-28 00:56
    python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础python爬虫基础...
  • 如何解决python爬虫问题？ python 人工智能 爬虫
    2022-08-15 09:11
    回答 1 已采纳 应该是css选择器里面的规则不够明确，可改成href = selectors.css('div.container div div div ul li a::attr(href)').getall()
  • python爬虫位置问题 python 爬虫
    2023-03-08 13:31
    回答 2 已采纳 该回答引用GPTᴼᴾᴱᴺᴬᴵ如果您想要提取 div class="detail-context"标签下所有的 tr 标签，并进一步提取每个 tr 中的 td 标签内的内容，可以使用以下代码： impo
  • python爬虫selenium点击按钮 python selenium 爬虫
    2022-10-21 12:35
    回答 2 已采纳 可以看下xpath语法，还有个插件（xPath Finder）在firefox浏览器里可以一键定位到 元素并复制xpath路径，如果插件给出的xpath路径定位不到，可以尝试自己写相对路径
  • Python爬虫：爬取网页内容
    2024-06-28 22:13
    python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例python爬虫案例...
  • python爬虫html获取不全 html python 爬虫
    2022-06-24 19:43
    回答 1 已采纳 其实有的，但是这个网站应该是为了懒加载把url用base64密了一下，然后再动态加载， 其实我下面发的这个就是url 是base64后的url 解码后就是https://s1.aigei.com/
  • python爬虫运行问题 python 数据挖掘 爬虫
    2023-01-06 11:14
    回答 1 已采纳 pip install openpyxl 安装下这个openpyxl库。望采纳哦！！！！
  • python爬虫20个案例
    2018-03-25 07:34
    讲诉python爬虫的20个案例 。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。
  • 精通Python爬虫框架Scrapy.pdf
    2020-12-20 13:57
    精通Python爬虫框架Scrapy.pdf
  • 81个Python爬虫源代码
    2018-12-13 14:23
    81个Python爬虫源代码，内容包含新闻、视频、中介、招聘、图片资源等网站的爬虫资源
  • 没有解决我的问题, 去提问

问题事件

  • 系统已结题 6月28日
  • 已采纳回答 6月20日
  • 创建了问题 1月5日

悬赏问题

  • ¥15 乌班图ip地址配置及远程SSH
  • ¥15 怎么让点阵屏显示静态爱心，用keiluVision5写出让点阵屏显示静态爱心的代码，越快越好
  • ¥15 PSPICE制作一个加法器
  • ¥15 javaweb项目无法正常跳转
  • ¥15 VMBox虚拟机无法访问
  • ¥15 skd显示找不到头文件
  • ¥15 机器视觉中图片中长度与真实长度的关系
  • ¥15 fastreport table 怎么只让每页的最下面和最顶部有横线
  • ¥15 java 的protected权限 ，问题在注释里
  • ¥15 这个是哪里有问题啊？