【求助】用Python写出一个遍历网站所有url的小工具

用Python 怎么写出一个遍历网站所有url的小工具，包括首页的url和所有子网页url
不能有重复的url，我自己写的只能遍历一个网页的首页，子网页的遍历不出来，新人没币，求好心人帮助！！！

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

4条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
threenewbee 2015-09-07 13:52
关注
http://download.csdn.net/detail/alalmn/6365561

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

python如何遍历一个文件夹下的所有文件，并将文件夹下的文件名和大小用json或者dic表示？ python
2020-12-15 17:59

回答 2 已采纳一、####编写一个程序，统计当前目录下每个文件类型的文件数 ####思路： - 打开当前的文件夹 - 获取到当前文件夹下面所有的文件 - 处理我们当前的文件夹下面可能有文件夹的情况（也打印出
python遍历所有部门 python
2022-03-13 00:40

回答 1 已采纳数据里存在一个字典里有两个同样的键如果字典是正常的。可以试试这种思路遍历所有的字典列表通过循环找出每一个部门的上级部门路径， while parent_id != ''把部门及上级部门路径
python找出一个整数的所有因子 python
2021-08-24 17:45

回答 1 已采纳 num = int(input("请输入数字")) a = 1 while a < num: //去掉等于号 if num % a == 0: print(a)
Python 接口并发测试详解
2022-10-23 15:35

wespten的博客性能测试是通过自动化测试工具模拟多种正常、峰值及异常负载条件对系统的各项性能指标进行的测试。负载测试和压力测试都属于性能测试，两者可以结合进行。通过负载测试，确定在各种工作负载下系统的性能，目标是测试...
python 如何按照word顺序遍历每一段落（包括段落的自动编号）和每一个表格 python 有问必答
2022-02-22 11:49

回答 3 已采纳使用docx读取段落自动编号比较麻烦，可以用另一个库docx2python，读取成列表,分级编号无论是数字还是字母都能读取出来 from docx2python import docx2python
python-docx遍历删除所有图片 python
2022-07-08 09:33

回答 3 已采纳 from docx import Document doc_save = '/home/john/Downloads/20220630.docx' doc = Document(doc_save)
如何用python写一个账号注册系统 django python 后端
2022-02-11 21:34

回答 2 已采纳当然可以，你最好添加个密码错误次数判断
C# ASP.NET CORE发送请求接收Python Django接口的Json数据并返回
2020-01-10 14:56

越来越胖的GuanRunwei的博客代码： #region 获取Python平台数据 [HttpGet] public IActionResult GetPython() { string url = "http://127.0.0.1:8000/blog/get_blogs"; HttpWebRequest request = (H...
Python 列表 for循环遍历判断 python
2022-04-07 10:00

回答 1 已采纳 a = ['1','1','1','2','2','2','3','3','3','4','4','4','5','5','5'] b = ['1','2', '3','4','5'] # 1 i1
python如何用时间遍历很多个月 python
2022-02-18 17:06

回答 2 已采纳 import datetime import dateutil.relativedelta t = datetime.datetime.now() while t.strftime("%Y-%m")
python 遍历dict的所有叶子节点，获取绝对路径和值 python
2022-07-14 00:31

回答 1 已采纳你题目的解答代码如下： dic={ "condition": { "relation": "and", "params": [ {
替代程序员？Devin宣传视频分析
2024-04-30 08:07

知之洲的博客人工智能正在席卷全球，在许多领域已经展现出强大的潜力，包括医疗、教育、交通、金融等等。在提高效率与生产力的同时，我们最担心的问题自然就是自己会不会被人工智能替代。
小白问一下，python怎么在url里面引入一个变量 python
2021-01-23 16:08

回答 2 已采纳字符串前加个f。在引入a变量的地方写{a} f'https://xxxxxxxxxxxxxx/bdbq/bdbq{a}.jpg'
使用 EasyPOI 优雅导出Excel模板数据（含图片）
2020-09-05 09:33

Java知音_的博客作者：星悬月blog.csdn.net/u012441819/article/details/96828044EasyPOI功能如同名字Easy，主打的功能就是容易，让一个没接触过POI...
Linux就这个范儿第12章一个网络一个世界
2016-03-15 00:11

weixin_30663471的博客 Linux就这个范儿第12章一个网络一个世界与Linux有缘相识还得从一项开发任务说起。十八年前，我在NucleusOS上开发无线网桥AP，需要加入STP生成树协议（SpanningTreeProtocol）。当时我对STP不太了解，只知道它...
没有解决我的问题, 去提问

悬赏问题

¥15 关于#matlab#的问题：期望的系统闭环传递函数为G(s)=wn^2/s^2+2¢wn+wn^2阻尼系数¢=0.707，使系统具有较小的超调量
¥15 FLUENT如何实现在堆积颗粒的上表面加载高斯热源
¥30 截图中的mathematics程序转换成matlab
¥15 动力学代码报错，维度不匹配
¥15 Power query添加列问题
¥50 Kubernetes&Fission&Eleasticsearch
¥15 報錯：Person is not mapped，如何解決？
¥15 c++头文件不能识别CDialog
¥15 Excel发现不可读取的内容
¥15 关于#stm32#的问题：CANOpen的PDO同步传输问题

【求助】用Python写出一个遍历网站所有url的小工具

4条回答 默认 最新

悬赏问题

4条回答默认最新