【求助】用Python写出一个遍历网站所有url的小工具

用Python 怎么写出一个遍历网站所有url的小工具，包括首页的url和所有子网页url
不能有重复的url，我自己写的只能遍历一个网页的首页，子网页的遍历不出来，新人没币，求好心人帮助！！！

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

4条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
threenewbee 2015-09-07 13:52
关注
http://download.csdn.net/detail/alalmn/6365561

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

python如何遍历一个文件夹下的所有文件，并将文件夹下的文件名和大小用json或者dic表示？ python
2020-12-15 17:59

回答 2 已采纳一、####编写一个程序，统计当前目录下每个文件类型的文件数 ####思路： - 打开当前的文件夹 - 获取到当前文件夹下面所有的文件 - 处理我们当前的文件夹下面可能有文件夹的情况（也打印出
python遍历所有部门 python
2022-03-13 00:40

回答 1 已采纳数据里存在一个字典里有两个同样的键如果字典是正常的。可以试试这种思路遍历所有的字典列表通过循环找出每一个部门的上级部门路径， while parent_id != ''把部门及上级部门路径
python找出一个整数的所有因子 python
2021-08-24 17:45

回答 1 已采纳 num = int(input("请输入数字")) a = 1 while a < num: //去掉等于号 if num % a == 0: print(a)
Python 接口并发测试详解
2022-10-23 15:35

wespten的博客性能测试是通过自动化测试工具模拟多种正常、峰值及异常负载条件对系统的各项性能指标进行的测试。负载测试和压力测试都属于性能测试，两者可以结合进行。通过负载测试，确定在各种工作负载下系统的性能，目标是测试...
python 如何按照word顺序遍历每一段落（包括段落的自动编号）和每一个表格 python 有问必答
2022-02-22 11:49

回答 3 已采纳使用docx读取段落自动编号比较麻烦，可以用另一个库docx2python，读取成列表,分级编号无论是数字还是字母都能读取出来 from docx2python import docx2python
python-docx遍历删除所有图片 python
2022-07-08 09:33

回答 3 已采纳 from docx import Document doc_save = '/home/john/Downloads/20220630.docx' doc = Document(doc_save)
如何用python写一个账号注册系统 django python 后端
2022-02-11 21:34

回答 2 已采纳当然可以，你最好添加个密码错误次数判断
C# ASP.NET CORE发送请求接收Python Django接口的Json数据并返回
2020-01-10 14:56

越来越胖的GuanRunwei的博客代码： #region 获取Python平台数据 [HttpGet] public IActionResult GetPython() { string url = "http://127.0.0.1:8000/blog/get_blogs"; HttpWebRequest request = (H...
Python 列表 for循环遍历判断 python
2022-04-07 10:00

回答 1 已采纳 a = ['1','1','1','2','2','2','3','3','3','4','4','4','5','5','5'] b = ['1','2', '3','4','5'] # 1 i1
python如何用时间遍历很多个月 python
2022-02-18 17:06

回答 2 已采纳 import datetime import dateutil.relativedelta t = datetime.datetime.now() while t.strftime("%Y-%m")
python 遍历dict的所有叶子节点，获取绝对路径和值 python
2022-07-14 00:31

回答 1 已采纳你题目的解答代码如下： dic={ "condition": { "relation": "and", "params": [ {
使用 EasyPOI 优雅导出Excel模板数据（含图片）
2020-09-05 09:33

Java知音_的博客作者：星悬月blog.csdn.net/u012441819/article/details/96828044EasyPOI功能如同名字Easy，主打的功能就是容易，让一个没接触过POI...
小白问一下，python怎么在url里面引入一个变量 python
2021-01-23 16:08

回答 2 已采纳字符串前加个f。在引入a变量的地方写{a} f'https://xxxxxxxxxxxxxx/bdbq/bdbq{a}.jpg'
Linux就这个范儿第12章一个网络一个世界
2016-03-15 00:11

weixin_30254435的博客 Linux就这个范儿第12章一个网络一个世界与Linux有缘相识还得从一项开发任务说起。十八年前，我在NucleusOS上开发无线网桥AP，需要加入STP生成树协议（SpanningTreeProtocol）。当时我对STP不太了解，只知道它...
绝密100个Spark面试题，熟背100遍，猛拿高薪
2023-07-09 22:42

40岁资深老架构师尼恩的博客所以，尼恩架构团队先给大家梳理一个《尼恩大数据面试宝典》，后面再给大家录制一个《大数据架构》专题视频、并指导大家写入简历，帮忙大家实现左手云原生、右手大数据，成为未来超级架构师。
没有解决我的问题, 去提问

悬赏问题

¥50 安卓adb backup备份子用户应用数据失败
¥20 有人能用聚类分析帮我分析一下文本内容嘛
¥15 请问Lammps做复合材料拉伸模拟，应力应变曲线问题
¥30 python代码，帮调试
¥15 #MATLAB仿真#车辆换道路径规划
¥15 java 操作 elasticsearch 8.1 实现索引的重建
¥15 数据可视化Python
¥15 要给毕业设计添加扫码登录的功能！！有偿
¥15 kafka 分区副本增加会导致消息丢失或者不可用吗？
¥15 微信公众号自制会员卡没有收款渠道啊