apple_50728129 2021-06-07 16:05 采纳率: 50%
浏览 20
已采纳

如何根据项目数据采集

本模块主要负责使用requests或selenium对目标服务器热播榜 - 好听轻音乐网(htqyy.com)发送请求来获取响应,项目中可任选一个熟悉的工具来完成此项功能。模块要求使用面向对象的方式进行封装,并实现无限分页爬取数据。

  • 写回答

3条回答 默认 最新

  • CSDN专家-HGJ 2021-06-07 16:24
    关注

    首先要针对拟请求的页面数据加载方式进行分析,requests一般用于静态页面,selenium用于动态页面,根据情况选择不同的库;

    其次也是重点,就是实现数据采集的功能模块,实现数据收集,解析,整理,并能实现多页采集;

    再次,使用ui界面库比如tkinter,kivy等实现界面化操作,根据用户输入需获取的页数,分类等分别获取数据,并在界面显示。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题?

悬赏问题

  • ¥15 R语言Rstudio突然无法启动
  • ¥15 关于#matlab#的问题:提取2个图像的变量作为另外一个图像像元的移动量,计算新的位置创建新的图像并提取第二个图像的变量到新的图像
  • ¥15 改算法,照着压缩包里边,参考其他代码封装的格式 写到main函数里
  • ¥15 用windows做服务的同志有吗
  • ¥60 求一个简单的网页(标签-安全|关键词-上传)
  • ¥35 lstm时间序列共享单车预测,loss值优化,参数优化算法
  • ¥15 Python中的request,如何使用ssr节点,通过代理requests网页。本人在泰国,需要用大陆ip才能玩网页游戏,合法合规。
  • ¥100 为什么这个恒流源电路不能恒流?
  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson,入参实体类Person,出参布尔值