szx2544163762
似水云烟
2017-05-31 10:03

spark streaming直连kafka,手动更新offset,offset前面出现一段乱码

  • spark streaming
  • 手动更新offset
  • spark
  • kafka
  • 乱码

如题,我是通过
offsetsRanges.foreach(offsetRange => {
val path = s"${zkPath}/${offsetRange.partition}"
val offset = offsetRange.fromOffset.toString
// 将该 partition 的 offset 保存到 zookeeper
logger.warn(s"向zookeeper中topic:${offsetRange.topic}的${offsetRange.partition}分区写入offset:${offset}")
ZkUtils.updatePersistentPath(zkClient, path, offset)
}
)

手动更新offset的,但是我用zkClient查看的时候发现,在offset前面多了一段乱码,导致用kafka监控程序的时候,无法监控

  • 点赞
  • 回答
  • 收藏
  • 复制链接分享

1条回答