~墨- 2021-06-23 15:19 采纳率: 100%
浏览 71
已采纳

对于股市主板A股使用python爬取前100条数据

  1. 对于股市主板A股网页http://quote.cfi.cn/quoteList.aspx?sortcol=stockcode?sortway=asc&pageindex=1&sectypeid=1   使用python爬取前100条数据；
  2. 将爬取到的数据存入mysql数据库stock的表格stockprice中，然后再使用命令select语句查看数据是否导入成功。
  • 写回答

1条回答 默认 最新

  • CSDN专家-黄老师 2021-06-23 15:42
    关注

    每次翻页的时候，url都有变化规律，如第二页http://quote.cfi.cn/quoteList.aspx?sortcol=stockcodesortwayasc&sortway=asc&pageindex=2&sectypeid=1。。。参数pageindex=2，，，以此类推，你用循环100次，每次改变这个参数就能获取100页的数据，每次得到响应内容再执行数据清洗和入库处理即可。

    如果对你有帮助，可以点击我这个回答右上方的【采纳】按钮，给我个采纳吗，谢谢
     

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？