哪位大神可以推荐一下免费版本功能还比较多的数据采集软件呢?我试过很多采集软件,想要获取更多功能就需要付费了~
3条回答
- 一颗去去 2018-11-23 02:59关注
针对您这个问题,我个人比较倾向于推荐前嗅的ForeSpider数据采集软件。
首先,这款软件完全是可视化操作,如果有通过可视化采集不到的内容,都可以通过简单几行代码,就可以实现。除了采集数据,还有这个软件内部集成了数据挖掘功能,通过一个采集模板,就可以挖掘全网的内容。在数据采集入库的同时,它和前嗅的ForeAna数据分析系统相连,对数据进行深度的大数据分析。
其次,如果网站过于复杂,反爬虫措施比较多,一般的爬虫软件就用不了了,但是可以用ForeSpider内部自带的爬虫脚本语言系统,简单几行代码就可以采集到高难度的网站。比如国家自然基金会网站、全国企业信息公示系统等,最高难度的网站都没有问题。
最后,最主要的是他采集速度非常快,我之前用笔记本采集的,一天就几百万条,用别的采集软件,用服务器采,一天才100多万条。
所以建议你可以先下载个免费版试试,免费版不限制功能,没有到期时间。用的好了他还有很多高级版本。
我使用过很多的采集软件,从中总结的经验,希望对你的问题有用处解决 无用评论 打赏 举报
悬赏问题
- ¥15 安装svn网络有问题怎么办
- ¥15 Python爬取指定微博话题下的内容,保存为txt
- ¥15 vue2登录调用后端接口如何实现
- ¥65 永磁型步进电机PID算法
- ¥15 sqlite 附加(attach database)加密数据库时,返回26是什么原因呢?
- ¥88 找成都本地经验丰富懂小程序开发的技术大咖
- ¥15 如何处理复杂数据表格的除法运算
- ¥15 如何用stc8h1k08的片子做485数据透传的功能?(关键词-串口)
- ¥15 有兄弟姐妹会用word插图功能制作类似citespace的图片吗?
- ¥15 latex怎么处理论文引理引用参考文献