cocococococo_ 2016-11-26 08:02 采纳率: 100%
浏览 1113
已采纳

Heritrix 爬虫手机信息时 只能爬到图片 不能爬到手机产品的详情页

新手 在学习建立 搜索引擎 需要爬取网易手机的相关信息，
但是试了好久都只能爬取到图片，而没有手机产品的详情页
不知道rontierScheduler类里的问题在哪

以下是我的工程里的 Mobile163Extractor
图片说明

以下是FrontierScheduler类

图片说明

网页http://product.mobile.163.com/brand/ 的源代码截图
图片说明

这是一个手机产品具体型号的详情页
图片说明

  • 写回答

1条回答 默认 最新

  • devmiao 2016-11-26 16:10
    关注

    http://blog.csdn.net/historyasamirror/article/details/6604344

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？

悬赏问题

  • ¥15 uniapp uview http 如何实现统一的请求异常信息提示？
  • ¥15 有了解d3和topogram.js库的吗？有偿请教
  • ¥100 任意维数的K均值聚类
  • ¥15 stamps做sbas-insar，时序沉降图怎么画
  • ¥15 买了个传感器，根据商家发的代码和步骤使用但是代码报错了不会改，有没有人可以看看
  • ¥15 关于#Java#的问题，如何解决？
  • ¥15 加热介质是液体，换热器壳侧导热系数和总的导热系数怎么算
  • ¥100 嵌入式系统基于PIC16F882和热敏电阻的数字温度计
  • ¥15 cmd cl 0x000007b
  • ¥20 BAPI_PR_CHANGE how to add account assignment information for service line