请问大家开发大数据项目，HDFS用来存储文件，javaweb负责展示，一般是把文件的关联信息存在哪里呀，是hive还是mysql

写回答
好问题 0 提建议
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

3条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
蔡能教授，网站特聘专家 2019-11-29 09:42
关注
https://blog.csdn.net/zyl651334919/article/details/88895040

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

[HDFS]hive表文件下的.metadata文件夹是什么？ hdfs hive java sqoop 大数据
2018-06-13 06:26

回答 1 已采纳 metadata就是元数据，用来存放表结构、字段信息之类的，用来描述数据的数据。另外eclipse也有自己的metadata，你要看看是哪个metadata缺失了。
hive每次重启，启动hiveserver2时报错The dir: /tmp/hive on HDFS should be writable，是怎么回事？ hadoop hdfs hive 有问必答
2022-03-07 09:42

回答 2 已采纳报错要求在hdfs上用户应该具备写权限，而从报错可以看出只有所有者具有写权限，所有组合其他用户不具备。使用hadoop fs hadoop fs -chmod -R dir修改目录权限，使其他用户也具
大数据实训项目(小麦种子)-03、大数据环境Hadoop、Mapreduce、Hive、Hbase、HDFS搭建服务及调试
2024-06-15 17:59

长路 ㅤ 的博客 大数据实训项目大作业，包含Virtualbox、finalshell使用，以及使用虚拟机搭建Centos7、JDK、Hadoop、Mysql、Hive、Zookeeper、Hbase虚拟机环境服务搭建以及项目功能演示讲解
spark-shell命令读取HDFS文件时文件不存在 spark 有问必答
2021-08-03 17:06

回答 2 已采纳先看看hadoop集群有没有正常开启，检查hdfs路径有没有问题
hdfs sink基于时间、数据大小、数据量将临时文件滚动成目标文件的参数分别是什么 flume
2022-12-30 16:32

回答 1 已采纳如果参数为n，就是按照n条生成一个文件 a1.sinks.k1.hdfs.rollCount = 10000 #这个参数是hdfs下文件sink的数据size。每sink 32MB的数据，自动生成一
有200M的文件 ?写入HDFS是先写128M ?复制完之后再写72M ?还是全部写完再复制？大数据
2022-10-24 11:26

回答 1 已采纳 HDFS上在写入数据的时候，首先会对数据切块，然后从客户端到datanode形成一个管道，在至少将一个文件写入hdfs上后，表示文件写入成功，然后进行复制备份操作，所以是全部写完再复制。学习可关注：人
大数据实训项目(小麦种子)-04、大数据实训项目JavaWeb环境搭建
2024-06-15 18:00

长路 ㅤ 的博客 大数据实训项目大作业，包含Virtualbox、finalshell使用，以及使用虚拟机搭建Centos7、JDK、Hadoop、Mysql、Hive、Zookeeper、Hbase虚拟机环境服务搭建以及项目功能演示讲解
hadoop格式化hdfs提示文件不存在怎么办 hadoop
2021-11-16 21:09

回答 1 已采纳你的core-site.xml 配置文件错了你没有生成log和hadooptmp，删了重配我前几天写了一个脚本，你可以借鉴一下
hdfs为什么不适合存储小文件 hdfs 有问必答
2021-12-15 20:24

回答 1 已采纳为啥集群小文件治理那么重要，你真的懂吗？_涤生手记大数据-CSDN博客小文件是 Hadoop 的常见挑战，如果不小心处理，它们可能会导致
MySQL在hive使用的过程中的作用是什么？ mysql
2019-03-07 10:29

回答 3 已采纳资源库的角色。hive不也是属于数据仓库嘛，他的数据文件是放在HDFS上，但是他的配置信息是放在资源库上，也就是mysql。比如说表结构等等。相当于'后宫'，我是这么理解的。
大数据实战项目-招聘网站职位分析
2024-06-11 13:33

吴小恺的博客本项目是以国内某互联网招聘网站全国范围内的大数据相关招聘信息作为基础信息，其招聘信息能较大程度地反映出市场对大数据相关职位的需求情况及能力要求，利用这些招聘信息数据通过大数据分析平台重点分析一下几点：...
怎么在hdfs上下载文件传给前端 hdfs java spring
2023-01-05 14:13

回答 9 已采纳 String fileName = "xxx"; response.reset(); response.setContentType("application/x-msdownload
大数据项目实战-招聘网站职位分析
2023-02-06 17:22

L卡夫卡的博客本项目是通过hadoop生态系统基于大数据离线处理技术完成的。利用HDFS存储数据、MapReduce做批量计算，将计算完成的数据存储在Hive数据仓库中。
Hive实战 —— 利用Hive进行数据分析并将分析好的数据导出到mysql数据库中
2022-05-11 21:02

it春和的博客 Hive实战利用Hive统计分析出热门视频TOP10,并将分析好的数据导出到mysql数据库中，步步相扣，记录一次试验完整过程，体验操作
没有解决我的问题, 去提问