点点滴滴cc 2015-11-02 12:59 采纳率: 0%
浏览 2407
已结题

wget爬取网页失败问题

用wget工具爬取指定url的页面，我的url是www.baidu.com时，就没问题，要是这个url就爬不下来https://www.baidu.com/s?wd=1446544426%40qq.com&rsv_spt=1&rsv_iqid=0x93249e020001a818&issp=1&f=3&rsv_bp=0&rsv_idx=2&ie=utf-8&tn=98050039_dg&rsv_enter=0，就是在百度首页里输入关键字后得到的页面，
我的wget参数为 -p -A txt -U Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.9.0.3) Gecko/2008092416 Firefox/3.0.3 -t 5 -T 120，，，跪求大神看看哪有问题

  • 写回答

2条回答 默认 最新

  • oyljerry 2015-11-02 14:37
    关注

    页面可能是异步返回ajax，所有直接获取不到对应页面内容

    评论

报告相同问题？

悬赏问题

  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson，入参实体类Person，出参布尔值
  • ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题，上传的坐标文件里是怎么对无序点进行编号的，以及xy坐标在处理的时候是进行整体模型分片处理的吗
  • ¥15 CSAPPattacklab
  • ¥15 一直显示正在等待HID—ISP
  • ¥15 Python turtle 画图
  • ¥15 关于大棚监测的pcb板设计
  • ¥15 stm32开发clion时遇到的编译问题
  • ¥15 lna设计 源简并电感型共源放大器
  • ¥15 如何用Labview在myRIO上做LCD显示？(语言-开发语言)