假设我的通过Spark Streaming 来分析用户实时提交过来的数据,数据包含,
假设.对应 spark代码为 ssc.socketTextStream("...",port)
然后,我想实现基于用户ID的查询
var qid = “u_123“//从控制台中读入待查询的uid
ssc.filter(uid==qid)
ssc.start()
ssc.awaitTermination()
好问题来了,该如何实现交互式的根据用户输入的查询uid,返回流上的查询结果(如何在不需修改太多代码的情况下实现呢?)
Spark Streaming 交互式查询问题
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
- 邀请回答
-
1条回答
- ai2018 2016-03-14 10:23关注
如果不考虑多线程的话,可以使用全局静态变量的做法,使用另外一个类动态的update sparkstreaming 运行类的静态变量值。这样可以动态的获取用户
输入的查询uid解决 无用评论 打赏 举报
悬赏问题
- ¥15 java 操作 elasticsearch 8.1 实现 索引的重建
- ¥15 数据可视化Python
- ¥15 要给毕业设计添加扫码登录的功能!!有偿
- ¥15 kafka 分区副本增加会导致消息丢失或者不可用吗?
- ¥15 微信公众号自制会员卡没有收款渠道啊
- ¥15 stable diffusion
- ¥100 Jenkins自动化部署—悬赏100元
- ¥15 关于#python#的问题:求帮写python代码
- ¥20 MATLAB画图图形出现上下震荡的线条
- ¥15 关于#windows#的问题:怎么用WIN 11系统的电脑 克隆WIN NT3.51-4.0系统的硬盘