哪位大神可以推荐一下免费版本功能还比较多的数据采集软件呢?我试过很多采集软件,想要获取更多功能就需要付费了~
3条回答 默认 最新
- 一颗去去 2018-11-23 02:59关注
针对您这个问题,我个人比较倾向于推荐前嗅的ForeSpider数据采集软件。
首先,这款软件完全是可视化操作,如果有通过可视化采集不到的内容,都可以通过简单几行代码,就可以实现。除了采集数据,还有这个软件内部集成了数据挖掘功能,通过一个采集模板,就可以挖掘全网的内容。在数据采集入库的同时,它和前嗅的ForeAna数据分析系统相连,对数据进行深度的大数据分析。
其次,如果网站过于复杂,反爬虫措施比较多,一般的爬虫软件就用不了了,但是可以用ForeSpider内部自带的爬虫脚本语言系统,简单几行代码就可以采集到高难度的网站。比如国家自然基金会网站、全国企业信息公示系统等,最高难度的网站都没有问题。
最后,最主要的是他采集速度非常快,我之前用笔记本采集的,一天就几百万条,用别的采集软件,用服务器采,一天才100多万条。
所以建议你可以先下载个免费版试试,免费版不限制功能,没有到期时间。用的好了他还有很多高级版本。
我使用过很多的采集软件,从中总结的经验,希望对你的问题有用处解决 无用评论 打赏 举报
悬赏问题
- ¥15 完成下列问题完成下列问题
- ¥15 C#算法问题, 不知道怎么处理这个数据的转换
- ¥15 YoloV5 第三方库的版本对照问题
- ¥15 请完成下列相关问题!
- ¥15 drone 推送镜像时候 purge: true 推送完毕后没有删除对应的镜像,手动拷贝到服务器执行结果正确在样才能让指令自动执行成功删除对应镜像,如何解决?
- ¥15 求daily translation(DT)偏差订正方法的代码
- ¥15 js调用html页面需要隐藏某个按钮
- ¥15 ads仿真结果在圆图上是怎么读数的
- ¥20 Cotex M3的调试和程序执行方式是什么样的?
- ¥20 java项目连接sqlserver时报ssl相关错误