7voyage 2019-01-14 20:49 采纳率: 100%
浏览 864
已采纳

怎么爬取猫眼电影里的所有城市信息,不要selenium的

就是获取下拉列表里的信息。如下:

图片说明

  • 写回答

2条回答 默认 最新

  • lyhsdy 2019-01-15 11:26
    关注

    1.通过网页加载后的代码,可以找到城市信息

    <a class="js-city-name" data-ci="150" data-val="{ choosecityid:150 }" data-act="cityChange-click">  阿拉善盟</a>
    

    2.通过查找js-city-name等关键词,可发现城市信息是由https://s0.meituan.net/bs/?f=myfe/mywww:/common.98f4f69f.js 这个JS文件加载出来的
    3.可以在该文件找到函数localStorage.getItem("cities")为所有城市信息,在浏览器上开发工具的控制台输入localStorage.getItem("cities")可以得到所有的数据
    所以,只能用selenium的方法抓取,但是可以不通过解析html提取,可以直接运行JS函数得到数据
    driver.execute_script('localStorage.getItem("cities")')

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 freertos下使用外部中断失效
  • ¥15 输入的char字符转为int类型,不是对应的ascall码,如何才能使之转换为对应ascall码?或者使输入的char字符可以正常与其他字符比较?
  • ¥15 devserver配置完 启动服务 无法访问static上的资源
  • ¥15 解决websocket跟c#客户端通信
  • ¥30 Python调用dll文件输出Nan重置dll状态
  • ¥15 浮动div的高度控制问题。
  • ¥66 换电脑后应用程序报错
  • ¥50 array数据同步问题
  • ¥15 pic16F877a单片机的外部触发中断程序仿真失效
  • ¥15 Matlab插值拟合差分微分规划图论