Jarrysoen 2022-07-28 16:07 采纳率: 66.7%
浏览 19
已结题

python语言对网站内容进行监控功能的实现思路

最近刚学习完爬虫的基础知识,和一点点js逆向,想自己着手做一个网页监控,但是不清楚实现监控功能的代码思路是怎样,目前我能想到的就是定时(比如10s进行一次)请求,看看返回结果有无更新内容,想寻求一下更好的实现思路,谢谢

  • 写回答

1条回答 默认 最新

  • 亖夕 Python领域新星创作者 2022-07-28 22:12
    关注

    寻找网站时常更新的内容节点,比如商品栏所在的produces节点对应的文本内容从“青菜”变成“茄子”。保存上一次请求获得更新的文本内容作为下次内容更新的依据,或者查看是否有关于更新时间的节点,定时请求检查这些节点的内容。对于动态加载的Ajax内容,在关闭请求后关闭浏览器没多大问题,但是对于请求后不关闭浏览器不刷新是不清楚网页是否更新的。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

问题事件

  • 系统已结题 8月8日
  • 已采纳回答 7月31日
  • 创建了问题 7月28日

悬赏问题

  • ¥15 基于卷积神经网络的声纹识别
  • ¥15 Python中的request,如何使用ssr节点,通过代理requests网页。本人在泰国,需要用大陆ip才能玩网页游戏,合法合规。
  • ¥100 为什么这个恒流源电路不能恒流?
  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson,入参实体类Person,出参布尔值
  • ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题,上传的坐标文件里是怎么对无序点进行编号的,以及xy坐标在处理的时候是进行整体模型分片处理的吗
  • ¥15 CSAPPattacklab
  • ¥15 一直显示正在等待HID—ISP
  • ¥15 Python turtle 画图
  • ¥15 stm32开发clion时遇到的编译问题