qq_18994911
2015-09-07 13:48
采纳率: 0%
浏览 4.1k

【求助】用Python写出一个遍历网站所有url的小工具

用Python 怎么写出一个 遍历网站所有url的小工具, 包括首页的url和所有子网页url
不能有重复的url,我自己写的只能遍历一个网页的 首页,子网页的遍历不出来,新人 没币 ,求好心人帮助!!!

  • 写回答
  • 好问题 提建议
  • 关注问题
  • 收藏
  • 邀请回答

4条回答 默认 最新

  • threenewbee 2015-09-07 13:52
    评论
    解决 无用
    打赏 举报
  • threenewbee 2015-09-07 13:53
    评论
    解决 无用
    打赏 举报
  • oyljerry 2015-09-07 14:06

    直接用scrapy,专业的爬虫框架。帮你解决各种问题,只用自己稍微代码设置i 就既可以调用

    评论
    解决 无用
    打赏 举报
  • liupan6889 2015-09-21 06:32

    python爬虫脚本:pyspider

    评论
    解决 无用
    打赏 举报

相关推荐 更多相似问题