529656407 2015-01-11 16:46 采纳率: 80%
浏览 1564
已采纳

求一份配置完整简单优化过的nutch

求一份配置完整简单优化过的nutch。自己弄了一个多月了,但是还是爬取不到太多数据,
爬了10多个小时,却只有5万多条数据,所以想找各位大神要一份配置好的可行的nutch(我暂时还没有配hadoop集群,想单机跑),
我试试,看看是不是我配置的问题。。。。。。实在搞不定了。。也使用过自动更改ip的软件来防止ip被封,但是还是没效果。。。。。。。。

  • 写回答

2条回答 默认 最新

  • WorldMobile 2015-01-12 00:29
    关注

    建议多进程,多台计算机跑,加快速度,也可能和你的单IP有关

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥30 这是哪个作者做的宝宝起名网站
  • ¥60 版本过低apk如何修改可以兼容新的安卓系统
  • ¥25 由IPR导致的DRIVER_POWER_STATE_FAILURE蓝屏
  • ¥50 有数据,怎么建立模型求影响全要素生产率的因素
  • ¥50 有数据,怎么用matlab求全要素生产率
  • ¥15 TI的insta-spin例程
  • ¥15 完成下列问题完成下列问题
  • ¥15 C#算法问题, 不知道怎么处理这个数据的转换
  • ¥15 YoloV5 第三方库的版本对照问题
  • ¥15 请完成下列相关问题!