flink sql读取太多的数据会oom 那要怎么办呢
1条回答 默认 最新
关注放到kafka缓存 或者切成一个个小文件
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报
分享
- 2022-09-15 10:25Flink SQL 是 Flink 提供的一种用于数据处理的高级接口，它允许开发者用 SQL 语法来操作数据流，极大地降低了实时计算的门槛。本教程基于 2022 年的最新版本 Flink 1.14.3，将帮助你深入理解和应用 Flink SQL。 一...
- 2025-09-03 16:12会敲代码的树的博客 而 Flink SQL 作为 Flink 提供的一种高层次查询语言接口，基于 SQL 标准，让开发者能够使用熟悉的 SQL 语法对数据流和批数据进行处理，进一步降低了大数据处理的门槛，提高了开发效率，成为众多企业进行大数据实时...
- 2024-09-12 22:10Lansonli的博客 在流处理应用中，数据是连续不断的，因此...Flink 认为 Batch 是 Streaming 的一个特例，所以 Flink 底层引擎是一个流式引擎，在上面实现了流处理和批处理。而窗口（window）就是从 Streaming 到 Batch 的一个桥梁。
- 2024-06-25 08:30james二次元的博客 Flink SQL 是 Apache Flink 中的一部分，用于处理实时流数据和批数据的 SQL 查询。Flink SQL 结合了 Flink 的流处理和批处理功能，使用户能够通过 SQL 查询实时和历史数据。
- 2022-03-13 13:19总之，Flink SQL作为大数据处理领域的重要组成部分，提供了高效、统一的流批处理解决方案，使得开发者能够在同一个平台上处理各种复杂的数据任务，极大地提高了开发效率和数据处理能力。未来，随着大数据技术的不断...
- 2024-08-26 22:40wending-Y的博客 展示CBO规则是如何在flink SQL里运行的
- 2024-07-21 18:22一切如来心秘密的博客 本文总结了如何使用使用 Clickhouse ...本文设计到的技能知识点比较多，需要熟悉 Clickhouse， Kafka, FlinkSQL, Superset 等，我之前的文章中总结了一些关于 Clickhouse 和 Kafka 相关的内容，感兴趣的读者可以看看.
- 2024-11-05 19:26GawynKing的博客 本文将通过一段基于 Flink SQL 的去重实现代码，详细介绍如何设计并实现一个适用于长周期数据的分层去重方案。Flink SQL 提供了灵活的流数据处理能力，特别适用于大规模实时数据的去重。通过设计分层去重方案，不仅...
- 2021-10-04 02:53这份文档可能是由尚硅谷——一个知名的IT教育机构提供的，旨在帮助学习者掌握SQL在大数据场景下的应用，并能成功应对企业的面试挑战。 SQL在大数据中的应用主要体现在以下几个方面： 1. 数据查询与分析：SQL是数据...
- 2024-02-17 20:35_laolao_的博客 这里的Catalog是"目录"，和标准SQL中的概念是一致的，主要用来管理所有数据库...事实上，Table API和Flink SQL的使用非常简单，我们首先得到一个"表"（Table），然后对他调用Table API，或者直接写SQL就可以了。
- 没有解决我的问题, 去提问
问题事件
系统已结题
10月21日
已采纳回答
10月13日-
创建了问题
7月20日