cyrusmaster 2023-03-23 15:31 采纳率: 0%
浏览 15

flink聚合清零问题?

关于 聚合统计一天数据, 请问大家是怎么做隔天清零的?
有方法可以定时写入空数据么? 比如每天零点写入 初始化的对象到kafka
还是说聚合后把结果写入olap 系统?

  • 写回答

1条回答 默认 最新

  • H3T 2023-03-23 20:43
    关注

    对于聚合统计每天的数据,可以在每天零点时清零数据。一种简单的方法是使用定时任务,比如使用Linux中的crontab或者Windows中的任务计划程序,将清零的操作定时执行。定时任务中可以执行脚本或命令,清空数据或者将初始化的对象写入Kafka等消息队列中。
    另一种方法是将聚合后的结果写入OLAP系统中。OLAP系统是用于分析多维数据的一种数据库技术,可以对数据进行快速的分析和查询。在OLAP系统中,可以使用时间维度对数据进行分析和查询,不需要每天清零数据。同时,OLAP系统也可以实现数据的持久化存储和备份,可以更好地保护数据安全。因此,将聚合后的数据写入OLAP系统中也是一个不错的选择。

    评论

报告相同问题?

问题事件

  • 创建了问题 3月23日

悬赏问题

  • ¥15 c#关于WPS中网格线隐藏的属性
  • ¥100 请教一道在hcl模拟器上配置ospf的题
  • ¥15 在Sqlserver 使用OPENQUERY查询链接数据库MySQL
  • ¥50 如何给网页加一个必须阅读几秒后才可以点击确定的公告弹窗
  • ¥15 人脐静脉内皮细胞(HEUVC)重悬后自动聚团,怎么解决?
  • ¥30 faiss 的 IndexFlatL2 相似性搜索
  • ¥15 pycharm中cv2安装后可以用但是无法补全或跳转函数,搜索后使用以下方法无效1.重新安装包(更换版本也不行,如何解决?
  • ¥15 如何关闭Win11文件资源管理器的搜索栏的预选词
  • ¥15 odoo17非生产订单产品出库整个业务流程处理
  • ¥15 悬赏 关于#c++#的问题