Sidney_VonWunderland 2015-03-19 11:30 采纳率: 0%
浏览 7871

如何用python关键词搜索新浪微博并海量抓取评论?

各位大牛好,我想用python做一件事:在新浪微博上用关键词搜索微博,并尽可能多地抓取相关微博,然后抓取其评论,并进行文本分析。
现在得知可:
1、用API接口。但是我不知道个人可不可以申请使用,是不是要创建应用,审核通过才行?那么创建哪种应用好?万一审核不过怎么办?用SDK的话,怎么使用?
是不是只有自己的微博的评论才能抓取啊?、
2、用爬虫,模拟浏览器行为。据说抓得多了会被封号。
要怎么办?
另外,新浪微博有原创、评论、转发、评论后转发……我要怎么才能通过这个做网民对搜索的关键词的情感分析呢?
第一次做这个,所以连微博的机制都没有太搞懂,用的是javascript生成搜索结果吗?
谢谢!

  • 写回答

2条回答 默认 最新

  • devmiao 2015-03-19 16:18
    关注

    用ip代理,同一个主机不要频繁请求,尽量使用sdk

    评论

报告相同问题?

悬赏问题

  • ¥15 基于卷积神经网络的声纹识别
  • ¥15 Python中的request,如何使用ssr节点,通过代理requests网页。本人在泰国,需要用大陆ip才能玩网页游戏,合法合规。
  • ¥100 为什么这个恒流源电路不能恒流?
  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson,入参实体类Person,出参布尔值
  • ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题,上传的坐标文件里是怎么对无序点进行编号的,以及xy坐标在处理的时候是进行整体模型分片处理的吗
  • ¥15 CSAPPattacklab
  • ¥15 一直显示正在等待HID—ISP
  • ¥15 Python turtle 画图
  • ¥15 stm32开发clion时遇到的编译问题