hwd18300026110 2022-05-26 21:38
浏览 5
已结题

flume source能做到故障转移吗？

#flume
flume sink 挂了有故障转移，如果source挂了怎么办？能做到故障转移吗？

  • 写回答

0条回答 默认 最新

    报告相同问题？

    • Flume系列：案例-Flume负载均衡和故障转移
      2023-05-28 22:25
      iwester的博客 系统环境：centos7Java环境：Java8案例只演示通道流程，其中Source，channel，Sink的种类按需调整故障转移配置与负载均衡两个选一个，不能同时配置。
    • 大数据Ambari之flume集成编译好的源码包
      2022-05-02 20:50
      **大数据Ambari之flume集成编译好的源码包** Apache Ambari 是一个用于管理和监控Hadoop集群的开源工具，它提供了直观的Web界面和RESTful API，使得安装、配置、管理Hadoop生态系统变得更加简单。Flume是Apache的一...
    • 大数据组件-Flume高可用集群搭建
      2024-03-28 16:38
      ### 大数据组件-Flume高可用集群搭建 #### Flume概述 Flume是一个高度可靠的分布式数据收集系统，主要用于从多种数据源收集并传输数据至Hadoop生态系统内进行后续处理。由于其强大的可扩展性和可靠性，Flume在大型...
    • 大数据技术之Flume教程
      2022-04-18 10:39
      Flume是一款专为大数据环境下日志数据收集而设计的工具，能够以高度可靠的机制处理数据，确保即使在网络不稳定或系统故障的情况下也能保持数据完整性。 **1.2 Flume基础架构** Flume的核心组件主要包括Agent、...
    • flume负载均衡策略和故障转移策略
      2023-03-30 02:23
      逐步起跳的博客 简单实现flume 的负载均衡策略和故障转移策略
    • 大数据flume组件使用指导手册中文版
      2022-08-03 15:15
      **大数据Flume组件使用指导手册中文版** Apache Flume 是一个分布式、可靠且可用于有效收集、聚合和移动大量日志数据的系统。它设计简洁，易于扩展，是大数据环境中常用的数据采集工具，尤其在离线数据处理场景下，...
    • Flume-负载均衡和故障转移案例
      2021-07-15 16:11
      魔笛Love的博客 使用Flume监控一个端口，其sink组中的sink分别对接Flume2和Flume3，采用FailoverSinkProcessor，实现故障转移的功能。其中Flume2和Flume3的Sink直接采用Logger方便查看和测试。 FailoverSinkProcessor：故障转移...
    • 面试之FLUME经典问题：Flume的Source阶段会丢数据吗？
      2020-09-28 09:54
      Ocean.k的博客 当source使用的Execsource异步source，当channel 容量设置满了，是无法通知客户端暂停数据生成，会造成数据丢失。 如何解决？ 可以考虑使用SpoolingDirSource或TailDirSource 或者自己写source ...
    • 大数据集成方案对比：Kafka vs Flume vs Sqoop
      2025-04-29 18:35
      程序员光剑的博客 实时数据流传输（如用户行为日志、IoT设备数据）日志集中式收集（如服务器集群日志汇总）关系型数据库与大数据平台的批量迁移（如MySQL到Hive）通过对比Kafka、Flume、Sqoop的技术特性，为开发者提供明确的选型依据...
    • flume 进阶 负载均衡和故障转移（七）
      2023-05-16 15:25
      Long long ago.的博客 flume 进阶 负载均衡和故障转移（七） 需求 使用 Flume1 监控一个端口，其 sink 组中的 sink 分别对接 Flume2 和 Flume3，采用 FailoverSinkProcessor，实现故障转移的功能。
    • 没有解决我的问题, 去提问

    问题事件

    • 系统已结题 6月3日
    • 创建了问题 5月26日