Jarrysoen 2022-07-28 16:07 采纳率: 66.7%
浏览 19
已结题

python语言对网站内容进行监控功能的实现思路

最近刚学习完爬虫的基础知识,和一点点js逆向,想自己着手做一个网页监控,但是不清楚实现监控功能的代码思路是怎样,目前我能想到的就是定时(比如10s进行一次)请求,看看返回结果有无更新内容,想寻求一下更好的实现思路,谢谢

  • 写回答

1条回答 默认 最新

  • 亖夕 Python领域新星创作者 2022-07-28 22:12
    关注

    寻找网站时常更新的内容节点,比如商品栏所在的produces节点对应的文本内容从“青菜”变成“茄子”。保存上一次请求获得更新的文本内容作为下次内容更新的依据,或者查看是否有关于更新时间的节点,定时请求检查这些节点的内容。对于动态加载的Ajax内容,在关闭请求后关闭浏览器没多大问题,但是对于请求后不关闭浏览器不刷新是不清楚网页是否更新的。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

问题事件

  • 系统已结题 8月8日
  • 已采纳回答 7月31日
  • 创建了问题 7月28日

悬赏问题

  • ¥20 机器学习能否像多层线性模型一样处理嵌套数据
  • ¥20 西门子S7-Graph,S7-300,梯形图
  • ¥50 用易语言http 访问不了网页
  • ¥50 safari浏览器fetch提交数据后数据丢失问题
  • ¥15 matlab不知道怎么改,求解答!!
  • ¥15 永磁直线电机的电流环pi调不出来
  • ¥15 用stata实现聚类的代码
  • ¥15 请问paddlehub能支持移动端开发吗?在Android studio上该如何部署?
  • ¥20 docker里部署springboot项目,访问不到扬声器
  • ¥15 netty整合springboot之后自动重连失效