敬相逢
2021-06-23 15:19
采纳率: 100%
浏览 44

对于股市主板A股使用python爬取前100条数据

  1. 对于股市主板A股网页http://quote.cfi.cn/quoteList.aspx?sortcol=stockcode?sortway=asc&pageindex=1&sectypeid=1   使用python爬取前100条数据;
  2. 将爬取到的数据存入mysql数据库stock的表格stockprice中,然后再使用命令select语句查看数据是否导入成功。
  • 点赞
  • 写回答
  • 关注问题
  • 收藏
  • 邀请回答

1条回答 默认 最新

  • CSDN专家-黄老师 2021-06-23 15:42
    已采纳

    每次翻页的时候,url都有变化规律,如第二页http://quote.cfi.cn/quoteList.aspx?sortcol=stockcodesortwayasc&sortway=asc&pageindex=2&sectypeid=1。。。参数pageindex=2,,,以此类推,你用循环100次,每次改变这个参数就能获取100页的数据,每次得到响应内容再执行数据清洗和入库处理即可。

    如果对你有帮助,可以点击我这个回答右上方的【采纳】按钮,给我个采纳吗,谢谢
     

    点赞 评论

相关推荐 更多相似问题