现在需要监控hdfs上的一个目录 把新增文件传到另一个hdfs上 目前想到的就是flume 大佬们求帮助，或者其他组建有能完成的吗。
1条回答 默认 最新
- 2022-03-22 22:51回答 2 已采纳 应该是没有导入相关依赖
- 2022-03-29 21:23回答 1 已采纳 可以尝试修改 flume下的conf/flume-env.sh文件：export JAVA_OPTS="-Xms512m -Xmx1024m -Dcom.sun.management.jmxremot
- 2019-03-21 21:06回答 1 已采纳  一直忘了解决了....... 在官网看到这句话 ,
- 2018-11-06 10:24王树民的博客 Flume HDFS Sink使用及源码分析 HDFS Sink介绍 Flume导入数据HDFS，目前只支持创建序列化（sequence）文件和文本（text）文件。...HDFS目录路径可以包含格式化的转义字符，生成目录路径可以通过...
- 2022-12-07 19:45回答 1 已采纳 1、关闭flume修改conf目录下的flume-env.sh.template：mv flume-env.sh.template flume-env.sh编辑flume-env.sh：vim flu
- 2021-12-17 14:35回答 1 已采纳 启动命令的问题，试试这个：nohup /opt/module/flume/bin/flume-ng agent --conf /opt/module/flume/conf -f /opt/modul
- 2018-09-20 07:03回答 1 已采纳 将其中flume-env.ps1的关于gethadoop,gethbase,以及gethive等相关代码注释掉
- 2020-12-22 03:36weixin_39593340的博客 Flume学习指南前言好好的学习，才是正道！一、Flume简介flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume 初始的发行版本目前被统称为 Flume OG(original generation)，属于 ...
- 2022-05-12 09:10回答 1 已采纳 进入目录bin/flume-ng赋权chmod +x flume-ng
- 2023-03-03 20:36回答 1 已采纳 “Devil组”引证GPT后的撰写：可能有多种原因导致消费者没有消费到所有追加的内容。以下是一些可能的原因： 日志追加速度太快，消费者无法跟上。如果日志追加速度非常快，而消费者无法及时消费所有消息，那
- 2021-08-21 18:13回答 1 已采纳 检查一下sources配置文件
- 2019-01-21 12:42这个脑子不好使的的博客 模拟使用Flume监听日志变化，并且把增量的日志文件写入到hdfs中
- 2023-03-24 23:50回答 1 已采纳 根据您提供的信息，我们可以初步分析出可能出现错误的步骤：1. AvroSource的配置是否正确，包括IP地址、端口号等信息是否正确设置；2. Flume的配置是否正确，包括source、channe
- 2019-03-28 14:19あずにゃん的博客 大数据组件使用 总文章 ===========Apache Flume============ 1.... 1.Flume 是 Cloudera ... 2.Flume 的核心是把数据从数据源(source)收集过来，再将收集到的数据送到指定的目的地(sink)。 为了保证输送的过程一定...
- 2021-10-19 21:13北慕辰的博客 数据采集工具Flume 的详细介绍与使用 ...
- 没有解决我的问题, 去提问
