p1838272724 2019-12-27 22:16 采纳率: 0%
浏览 223

初学python,爬取京东商品数据时无法获取内容

  1. import requests from lxml import html

def spider_JD(sn):
url = 'https://search.jd.com/Search?keyword={0}'.format(sn)
html_doc=requests.get(url).text
selector=html.fromstring(html_doc)
ul_list2=selector.xpath('//div[@id="J_goodsList"]/ul/li')
print(len(ul_list2))

if name=='__main__':
spider_JD('9787115428028')
图片说明
如图所示 可以看到很多li
但上述代码运行显示为0

  • 写回答

1条回答

  • dudu7615 2024-03-10 00:46
    关注

    这个建议你设置一个请求头 ua 然后访问,不然服务器会给你拦截掉

    关于提问也提个建议,你可以把代码放到代码框里,这样看起来更直观

    评论

报告相同问题?

悬赏问题

  • ¥15 c程序不知道为什么得不到结果
  • ¥40 复杂的限制性的商函数处理
  • ¥15 程序不包含适用于入口点的静态Main方法
  • ¥15 素材场景中光线烘焙后灯光失效
  • ¥15 请教一下各位,为什么我这个没有实现模拟点击
  • ¥15 执行 virtuoso 命令后,界面没有,cadence 启动不起来
  • ¥50 comfyui下连接animatediff节点生成视频质量非常差的原因
  • ¥20 有关区间dp的问题求解
  • ¥15 多电路系统共用电源的串扰问题
  • ¥15 slam rangenet++配置