~墨- 2021-06-23 15:19 采纳率: 100%
浏览 70
已采纳

对于股市主板A股使用python爬取前100条数据

  1. 对于股市主板A股网页http://quote.cfi.cn/quoteList.aspx?sortcol=stockcode?sortway=asc&pageindex=1&sectypeid=1   使用python爬取前100条数据；
  2. 将爬取到的数据存入mysql数据库stock的表格stockprice中，然后再使用命令select语句查看数据是否导入成功。
  • 写回答

1条回答 默认 最新

  • CSDN专家-黄老师 2021-06-23 15:42
    关注

    每次翻页的时候，url都有变化规律，如第二页http://quote.cfi.cn/quoteList.aspx?sortcol=stockcodesortwayasc&sortway=asc&pageindex=2&sectypeid=1。。。参数pageindex=2，，，以此类推，你用循环100次，每次改变这个参数就能获取100页的数据，每次得到响应内容再执行数据清洗和入库处理即可。

    如果对你有帮助，可以点击我这个回答右上方的【采纳】按钮，给我个采纳吗，谢谢
     

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？

悬赏问题

  • ¥20 气象站点数据求取中~
  • ¥15 如何获取APP内弹出的网址链接
  • ¥15 wifi 图标不见了 不知道怎么办 上不了网 变成小地球了
  • ¥50 STM32单片机传感器读取错误
  • ¥50 power BI 从Mysql服务器导入数据，但连接进去后显示表无数据
  • ¥15 (关键词-阻抗匹配，HFSS，RFID标签)
  • ¥50 sft下载大文阻塞卡死
  • ¥15 机器人轨迹规划相关问题
  • ¥15 word样式右侧翻页键消失
  • ¥15 springboot+vue 集成keycloak sso到阿里云