~墨- 2021-06-23 15:19 采纳率: 100%
浏览 70
已采纳

对于股市主板A股使用python爬取前100条数据

  1. 对于股市主板A股网页http://quote.cfi.cn/quoteList.aspx?sortcol=stockcode?sortway=asc&pageindex=1&sectypeid=1   使用python爬取前100条数据；
  2. 将爬取到的数据存入mysql数据库stock的表格stockprice中，然后再使用命令select语句查看数据是否导入成功。
  • 写回答

1条回答 默认 最新

  • CSDN专家-黄老师 2021-06-23 15:42
    关注

    每次翻页的时候，url都有变化规律，如第二页http://quote.cfi.cn/quoteList.aspx?sortcol=stockcodesortwayasc&sortway=asc&pageindex=2&sectypeid=1。。。参数pageindex=2，，，以此类推，你用循环100次，每次改变这个参数就能获取100页的数据，每次得到响应内容再执行数据清洗和入库处理即可。

    如果对你有帮助，可以点击我这个回答右上方的【采纳】按钮，给我个采纳吗，谢谢
     

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？

悬赏问题

  • ¥15 metadata提取的PDF元数据，如何转换为一个Excel
  • ¥15 关于arduino编程toCharArray()函数的使用
  • ¥100 vc++混合CEF采用CLR方式编译报错
  • ¥15 coze 的插件输入飞书多维表格 app_token 后一直显示错误，如何解决？
  • ¥15 vite+vue3+plyr播放本地public文件夹下视频无法加载
  • ¥15 c#逐行读取txt文本，但是每一行里面数据之间空格数量不同
  • ¥50 如何openEuler 22.03上安装配置drbd
  • ¥20 ING91680C BLE5.3 芯片怎么实现串口收发数据
  • ¥15 无线连接树莓派，无法执行update，如何解决？（相关搜索：软件下载）
  • ¥15 Windows11, backspace, enter, space键失灵