【新手求教】如何将hdfs中txt形式的原始数据放到cache层表中

hadoop中，将数据文档以TXT形式上传到hdfs中，然后要将数据根据接口放到cache表中，这个将数据放入表中的过程应该如何完成？

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

1条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
孩子爱学习是让家长最头疼的问题 2016-10-07 17:44
关注
如何将hdfs中txt形式的原始数据放到cache层表中
hadoop中，将数据文档以TXT形式上传到hdfs中，然后要将数据根据接口放到cache表中，这个将数据放入表中的过程应该如何完成？

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

hive分区表数据备份到HDFS hive 有问必答
2021-08-02 14:12

回答 1 已采纳有了有了，谢谢大家，是我自己疏忽了。导入HDFS本地文件系统也是需要加local的，我以为本地文件系统是计算机文件系统正确代码:insert overwrite local directory。一定要
HDFS排除AddblockRequestProto中的数据节点 hadoop hdfs
2016-11-08 06:12

回答 1 已采纳 I found the solution that, first abandon the block and then request the new block. In the previous
hdfs dfs -put ~/input/data.txt /input 出错 hdfs
2022-04-20 17:28

回答 2 已采纳找不到可以存放数据的DN，看看你的DN是否健康
使用flume将数据导入到hdfs中
2018-04-26 19:46

G_scsd的博客 source是获取数据，channel是通道，传输数据的，sink是把数据给谁的，这里显而易见的是把数据给hdfs的，所以我们只需要在前面的基础上改sink就可以了在之前的基础上修改a.conf文件中的sink修改完后启动hadoop 查看...
hdfs sink基于时间、数据大小、数据量将临时文件滚动成目标文件的参数分别是什么 flume
2022-12-30 16:32

回答 1 已采纳如果参数为n，就是按照n条生成一个文件 a1.sinks.k1.hdfs.rollCount = 10000 #这个参数是hdfs下文件sink的数据size。每sink 32MB的数据，自动生成一
hadoop下的存储在hdfs中的视频文件怎么播放？ hadoop hdfs
2015-08-19 16:14

回答 2 已采纳你需要用HDFS API来获取 ``` package org.myorg.hdfsdemo; import java.io.BufferedReader; import j
Python 处理HDFS log 数据 hdfs python
2023-01-18 04:55

回答 2 已采纳您好，我看了这个LOG数据，如果使用切分字符串的方法，2000行里最长的共有111个字段。最关键的是会有数字类型和文本类型组合成文本类型，而这部分是字符串切割无法区分的。所以正则还是香呀，一步到位 i
hive读取直接放到hdfs的数据,将目录加载到分区表中 *
2020-09-23 19:09

张俊杰1994的博客在生产上，一般对数据清洗之后直接放到HDFS上，然后再将目录加载到分区表中；准备数据 order_created.txt 用 tab分割 10703007267488 2014-05-01 06:01:12.334+01 10101043505096 2014-05-01 07:28:12.342+01 ...
hadoop安装过程中格式hdfs出错 big data hadoop 数据库有问必答
2023-03-10 16:25

回答 5 已采纳命令没找到，没有配置hadoop环境变量。命令如下： sudo vi /etc/profile 1、环境变量配置为如下所示： export HADOOP_HOME=/home/lemaker/ope
HDFS集群数据迁移怎么做？ hdfs 大数据
2022-11-03 17:15

回答 2 已采纳 hadoop distcp webhdfs://源集群:50070/源目录 webhdfs://目标集群:50070/目标目录
Flink将数据写入到hdfs中
2021-12-27 01:02

wudl5566的博客随机产生数据然后将产生的数据写入到hdfs 中。 2. 随机数据源代码： package com.wudl.flink.hdfs.source; import org.apache.flink.api.java.tuple.Tuple; import org.apache.flink.api.java.tuple.Tuple4; ...
直接将hbase数据存磁盘和存hdfs的区别是什么？ hbase
2021-07-08 10:38

回答 2 已采纳 hdfs和磁盘的区别在于 hdfs从设计上存在分布式高可用可控副本数，Block块等特别，磁盘目前还无法满足，且生态上目前都是兼容hdfs而不是磁盘。存储的设计底层还是数据结构不一样，可以从这方向思
将mysql中的数据导入到hdfs中
2021-09-26 19:22

牧码文的博客将mysql中的数据导入到hdfs中 mysql中的数据导入到hdfs中，需要借助一个工具sqoop完成，sqoop的安装和简介请点大数据必学框架-sqoop。一、配置sqoop环境为了能够让sqoop识别到hdfs，需要在配置文件中指定位置，...
如何查看HDFS中表存储的数据
2021-12-01 09:54

吃辣椒的喵的博客 1.先通过showtable找到存储路径，得到路径信息/apps/hive/warehouse/dm_gcyth.db/...3.最后执行sudo -su hdfs hadoop fs -ls /apps/hive/warehouse/dm_gcyth.db/dm_gcyth_cw_t_budget_after_share_cost查看库下的表 ...
没有解决我的问题, 去提问

悬赏问题

¥15 微信公众号自制会员卡没有收款渠道啊
¥15 stable diffusion
¥100 Jenkins自动化部署—悬赏100元
¥15 关于#python#的问题：求帮写python代码
¥20 MATLAB画图图形出现上下震荡的线条
¥15 关于#windows#的问题：怎么用WIN 11系统的电脑克隆WIN NT3.51-4.0系统的硬盘
¥15 perl MISA分析p3_in脚本出错
¥15 k8s部署jupyterlab，jupyterlab保存不了文件
¥15 ubuntu虚拟机打包apk错误
¥199 rust编程架构设计的方案有偿