京东商城的robots协议为什么看不了？

Question

今天在学爬虫,发现 京东商城的robots协议看不了，
这是什么情况？

Answer 1

京东的robots.txt地址https://jd.com/robots.txt%E5%B7%B2%E7%BB%8F%E9%87%8D%E5%AE%9A%E5%90%91%E5%88%B0%E4%B8%BB%E9%A1%B5%E4%BA%86

这是之前看得到的时候的京东robots.txt