Run_youngman 2021-07-11 12:56 采纳率: 60%
浏览 320
已采纳

robots.txt 文件中 Allow: /$有什么含义？

浏览一个网站，发现他的爬虫协议中是这样写的：

User-agent: *
Disallow: /
Allow: /$

不太明白是什么含义，有知道的吗？

  • 写回答

1条回答 默认 最新

  • blkq 2021-07-11 13:16
    关注

    这个意思是允许访问/结尾的地址，它在disallow:/后面，所以整体的意思是不允许访问根地址，可以访问其它子一级的/结尾的地址
    有帮助的话，麻烦点个采纳

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？

问题事件

  • 已采纳回答 7月12日
  • 创建了问题 7月11日

悬赏问题

  • ¥30 STM32 INMP441无法读取数据
  • ¥100 求汇川机器人IRCB300控制器和示教器同版本升级固件文件升级包
  • ¥15 用visualstudio2022创建vue项目后无法启动
  • ¥15 x趋于0时tanx-sinx极限可以拆开算吗
  • ¥500 把面具戴到人脸上，请大家贡献智慧
  • ¥15 任意一个散点图自己下载其js脚本文件并做成独立的案例页面，不要作在线的，要离线状态。
  • ¥15 各位 帮我看看如何写代码，打出来的图形要和如下图呈现的一样，急
  • ¥30 c#打开word开启修订并实时显示批注
  • ¥15 如何解决ldsc的这条报错/index error
  • ¥15 VS2022+WDK驱动开发环境