zzg22936 2015-12-14 12:09 采纳率: 0%
浏览 1938

Spark Streaming 交互式查询问题

假设我的通过Spark Streaming 来分析用户实时提交过来的数据,数据包含,
假设.对应 spark代码为 ssc.socketTextStream("...",port)
然后,我想实现基于用户ID的查询
var qid = “u_123“//从控制台中读入待查询的uid
ssc.filter(uid==qid)
ssc.start()
ssc.awaitTermination()
好问题来了,该如何实现交互式的根据用户输入的查询uid,返回流上的查询结果(如何在不需修改太多代码的情况下实现呢?)

  • 写回答

1条回答

  • ai2018 2016-03-14 10:23
    关注

    如果不考虑多线程的话,可以使用全局静态变量的做法,使用另外一个类动态的update sparkstreaming 运行类的静态变量值。这样可以动态的获取用户
    输入的查询uid

    评论

报告相同问题?

悬赏问题

  • ¥15 java 操作 elasticsearch 8.1 实现 索引的重建
  • ¥15 数据可视化Python
  • ¥15 要给毕业设计添加扫码登录的功能!!有偿
  • ¥15 kafka 分区副本增加会导致消息丢失或者不可用吗?
  • ¥15 微信公众号自制会员卡没有收款渠道啊
  • ¥15 stable diffusion
  • ¥100 Jenkins自动化部署—悬赏100元
  • ¥15 关于#python#的问题:求帮写python代码
  • ¥20 MATLAB画图图形出现上下震荡的线条
  • ¥15 关于#windows#的问题:怎么用WIN 11系统的电脑 克隆WIN NT3.51-4.0系统的硬盘