7voyage 2019-01-14 20:49 采纳率: 100%
浏览 859
已采纳

怎么爬取猫眼电影里的所有城市信息,不要selenium的

就是获取下拉列表里的信息。如下:

图片说明

  • 写回答

2条回答 默认 最新

  • lyhsdy 2019-01-15 11:26
    关注

    1.通过网页加载后的代码,可以找到城市信息

    <a class="js-city-name" data-ci="150" data-val="{ choosecityid:150 }" data-act="cityChange-click">  阿拉善盟</a>
    

    2.通过查找js-city-name等关键词,可发现城市信息是由https://s0.meituan.net/bs/?f=myfe/mywww:/common.98f4f69f.js 这个JS文件加载出来的
    3.可以在该文件找到函数localStorage.getItem("cities")为所有城市信息,在浏览器上开发工具的控制台输入localStorage.getItem("cities")可以得到所有的数据
    所以,只能用selenium的方法抓取,但是可以不通过解析html提取,可以直接运行JS函数得到数据
    driver.execute_script('localStorage.getItem("cities")')

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 数值计算离散正交多项式
  • ¥30 数值计算均差系数编程
  • ¥15 redis-full-check比较 两个集群的数据出错
  • ¥15 Matlab编程问题
  • ¥15 训练的多模态特征融合模型准确度很低怎么办
  • ¥15 kylin启动报错log4j类冲突
  • ¥15 超声波模块测距控制点灯,灯的闪烁很不稳定,经过调试发现测的距离偏大
  • ¥15 import arcpy出现importing _arcgisscripting 找不到相关程序
  • ¥15 onvif+openssl,vs2022编译openssl64
  • ¥15 iOS 自定义输入法-第三方输入法