如何实现 网络数据抓取，那个需求分析如何去设计啊，要这么样才能达到在抓取数据时并进行筛选，并保存到本地的数据库中去
3条回答 默认 最新
宝龙哥 2015-04-07 08:21关注这个要看你使用的什么语言，不同的语言有不同的做法
而Excel本身有标准的xls文件和Excel可以加载的xml和csv文件等，生成方法也不一样，难易程度却相差很大
解决 无用评论 打赏举报
分享
- 2021-08-02 09:31回答 2 已采纳 先抓下来，然后按需要写入你的excel表就可以了啊，难得不是写入，是抓取吧
- 2022-04-25 14:26回答 1 已采纳 你写入的应该是一个列表吧，比如说writer.wirterow(data)你可以改成writer.wirterow([data])有帮助采纳一下哈，谢谢~
- 2023-03-04 16:43回答 3 已采纳 完全可以做
- 2020-09-21 05:22主要介绍了Python实现抓取网页生成Excel文件的方法,涉及PyQuery模块的使用及Excel文件相关操作技巧,需要的朋友可以参考下
- 2022-08-10 16:45回答 2 已采纳 你确定你的那一大串数据都是params的吗？应该是data的，或者json的吧，post方法里面有params，但是一般不是这个格式的，你的这些里面是内嵌的，params不是这样的，如果改了以后还不行
- 2013-03-22 02:07回答 4 已采纳 jsoup 神器..百度一下就可以..不用正则了
- 2020-04-10 12:09回答 1 已采纳 使用selenium吧 字数补丁
- 2020-11-24 01:27weixin_39593354的博客 本文实例讲述了Python实现抓取网页生成Excel文件的方法。分享给大家供大家参考，具体如下：Python抓网页，主要用到了PyQuery，这个跟jQuery用法一样，超级给力示例代码如下：#-*- encoding:utf-8 -*-import sys...
- 2023-02-17 11:56回答 3 已采纳 以下答案引用自GPT-3大模型,请合理使用： ```// 以下是完整代码：const fetch = require('node-fetch');const archiver = require('a
- 2022-05-02 21:14回答 2 已采纳 大众点评可以当作一个参考，数据算是相对多的。还有百度地图，也是可以拿到一些数据。
- 2022-09-03 16:31回答 5 已采纳 1，-buffer_size 102400，你这设置的缓冲区才100K，对音视频数据来说，太小了。你看下海康摄像机视频参数码流，设置的是多少，如下图设置的是2M 2，将缓冲区设置成8M试试，即8x1
- 2024-01-19 16:35爬虫通常由搜索引擎、数据挖掘工具、监测系统等应用于网络数据抓取的场景。 爬虫的工作流程包括以下几个关键步骤： URL收集： 爬虫从一个或多个初始URL开始，递归或迭代地发现新的URL，构建一个URL队列。这些URL...
- 2022-06-12 17:23回答 1 已采纳 抓取网页数据的几种方法_LiZhen798的博客-CSDN博客_网页数据抓取 相信所有个人网站的站长都有抓取别人数据的经历吧，目前抓取别人
- 2020-12-08 02:46weixin_39692847的博客 本文实例讲述了Python实现抓取网页生成Excel文件的方法。分享给大家供大家参考，具体如下：Python抓网页，主要用到了PyQuery，这个跟jQuery用法一样，超级给力示例代码如下：#-*- encoding:utf-8 -*-import sys...
- 2023-07-28 16:28盆盆的博客 在工作中遇到了一个问题，需要把PDF中的地方债数据...于是我开始尝试用Python来读取PDF表格，然后找到每个表格对应位置的数据，对应到新生成的序列中，最后导出为Excel。如图一，这是PDF中每一页记录的地方债项目数据。
- 没有解决我的问题, 去提问
悬赏问题
- ¥50 永磁型步进电机PID算法
- ¥15 sqlite 附加（attach database）加密数据库时，返回26是什么原因呢？
- ¥88 找成都本地经验丰富懂小程序开发的技术大咖
- ¥15 如何处理复杂数据表格的除法运算
- ¥15 如何用stc8h1k08的片子做485数据透传的功能？(关键词-串口)
- ¥15 有兄弟姐妹会用word插图功能制作类似citespace的图片吗？
- ¥200 uniapp长期运行卡死问题解决
- ¥15 latex怎么处理论文引理引用参考文献
- ¥15 请教：如何用postman调用本地虚拟机区块链接上的合约？
- ¥15 为什么使用javacv转封装rtsp为rtmp时出现如下问题：[h264 @ 000000004faf7500]no frame？