liuye11 2017-05-11 11:52 采纳率: 50%
浏览 1239
已结题

是否任何爬虫都能在Hadoop平台上运行

如题，我想问要在Hadoop平台上运行的爬虫是否有特殊要求，不管Hadoop是单机的，伪分布式，还是真正的集群，所写的爬虫是否都能在上面运行?

  • 写回答

1条回答 默认 最新

  • devmiao 2017-05-11 16:27
    关注

    https://wenku.baidu.com/view/63d713fc48d7c1c709a14548.html

    评论

报告相同问题？

悬赏问题

  • ¥15 安装svn网络有问题怎么办
  • ¥15 Python爬取指定微博话题下的内容，保存为txt
  • ¥15 vue2登录调用后端接口如何实现
  • ¥65 永磁型步进电机PID算法
  • ¥15 sqlite 附加（attach database）加密数据库时，返回26是什么原因呢？
  • ¥88 找成都本地经验丰富懂小程序开发的技术大咖
  • ¥15 如何处理复杂数据表格的除法运算
  • ¥15 如何用stc8h1k08的片子做485数据透传的功能？(关键词-串口)
  • ¥15 有兄弟姐妹会用word插图功能制作类似citespace的图片吗？
  • ¥15 latex怎么处理论文引理引用参考文献