kettle 7.1版本,连接hadoop2.7.3版本,无法读取hadoop文件目录
            **1.**shim使用的是跟版本匹配的HDP2.5,

            **2.**连接到hadoop2.7.3也显示连接成功(用户目录访问和根目录访问没有配置)。
            **3.**在hadoop文件输入的时候,无法读取文件列表,(you dont seem to be getting a connection to the hadoop cluster)

            但是,在连接hadoop2.2版本,就可以读取文件目录


            麻烦有空的大家帮忙看一下

1个回答

今天重新尝试连接hadoop2.7.3,使用的shim是CDH510,。同时通过一个博客发现了修改kettle的shim配置文件的操作,在config.properties文件末尾加上authentication.superuser.provider=NO_AUTH 后,hadoop文件__输入正常了。

博客为kettle连接hadoop的教程:https://blog.csdn.net/maenlai0086/article/details/81170761

Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
其他相关推荐
kettle版本对应hadoop平台等问题
1.kettle版本支持状况 http://wiki.pentaho.com/display/BAD/4.4+Configuring+Pentaho+for+your+Hadoop+Distro+and+Version c:\Users\Desktop\data-integration\plugins\pentaho-big-data-plugins\plugin.properties里面的
hadoop版本与glibc版本
15/09/06 01:26:13 DEBUG util.NativeCodeLoader: Trying to load the custom-built native-hadoop library... 15/09/06 01:26:13 DEBUG util.NativeCodeLoader: Failed to load native-hadoop with error: java.l...
hadoop2.7.3版本eclipse插件.rar
这是hadoop大数据开发2.7.3版本的eclipse插件,下载解压后放入eclipse目录下的插件文件夹
kettle 7.1
kettle 7.1 win 版安装包 s
挖掘鸡 7.1版本
挖掘鸡7.1,能有效配合GOOGLE HACKER对目标站进行探测,也适用于在互联网上进行大规模撒网探测
kettle版本的区别
最近搜了搜kettle,发现其版本有很大的区别,无论是从哪方面来说,我现在正在用的是4.x版本,发现其中就有很多 没有涉及到的东西,而5.x中就有很多4中没有的东西,比如,5.x中就有链接hadoop的控件,可以和hadoop实现对接, 在csdn中看到的一片文章中有很详细的介绍(http://blog.csdn.net/xiaohai798/article/details/39558939)
hadoop版本
Apache版本下载 (1) 各版本说明:http://hadoop.apache.org/releases.html。   (2) 下载稳定版:找到一个镜像,下载stable文件夹下的版本。   (3) Hadoop最全版本:http://svn.apache.org/repos/asf/hadoop/common/branches/,可直接导到eclipse中。   CDH版本...
kettle版本比较、PDI版本比较
kettle版本比较 PDI的版本比较 kettle7.0新增功能 kettle6.0新增功能 kettle5.0新增功能 kettle版本如何选择
Network Connect 7.1 for mac版本 windows版本 linux版本
Network Connect 7.1 for mac版本 windows版本 linux版本 VPN连接利器
Kettle 7.1 SDK
Kettle 7.1开发需要类库,开源ETL工具,适合开发人员使用。
jess逻辑推理器(版本7.1)
jess逻辑推理器,可直接作为插件加入到Eclipse中。最新版7.1
ATA命令描述7.1版本
硬盘等的操作指令及其描述和使用方法。同时包含错误情况下的返回值得情况等。
Hadoop 第二课 Hadoop2.7.3集群搭建
说明:搭建平台为ubuntu16.04 (为什么在Ubuntu 上,请看hadoop第一课) 一:环境准备(必备) 1:jdk oracle 我使用的是java version “1.8.0_101” 没有的话,$ wget http://download.oracle.com/otn-pub/java/jdk/8u111-b14/jdk-8u111
kettle 7.1 的源码
kettle 7.1 源码。
hadoop2.7.3版本 windows下安装步骤和配置文件(不用cywin)
hadoop 2.7.3 win 10 安装的配置文件和安装步骤,不使用虚拟机 不适用cywin 本人安装总结
hadoop2.7.3版本FileSystem调用过程(1)
hadoop2_7_3版本FileSystem调用过程(1)之前接触过一段时间的HDFS,但是没有深入了解原理,今天有时间了整理一下。hadoop2_7_3版本FileSystem调用过程1 FileSystem简介 FileSystem使用 使用FileSystemget方法获取FileSystem对象 使用FileSystemnewInstance获取FileSystem对象 Cache类简介
hadoop2.7.3 自定义实现机架感知(Java版本)
博客Hadoop机架感知配置自主实现的jar包 http://blog.csdn.net/lemonZhaoTao/article/details/70991813
hadoop版本与支持的hbase版本对照表
S = 支持且已测试, X = 不支持, NT = 可以运行,但未充分测试。
hadoop最新稳定版本dkhadoop版本介绍
Hadoop对于从事互联网工作的朋友来说已经非常熟悉了,相信在我们身边有很多人正在转行从事hadoop开发的工作,理所当然也会有很多hadoop入门新手。Hadoop开发太过底层,技术难度远比我们想象的要大,对新手而言选择一个合适的hadoop版本就意味着上手更快! Hadoop是由Apache基金会所开发的分布式系统基础架构,它最核心的设计就是HDFS和MapReduce。HDFS为海量的数据...
hadoop版本和java版本不一致的问题
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable   hadoop是32位的,而java是32位的。hadoop是64位编译的版本,导致上面的问题出现。...
hadoop apache版本和cdh版本的区别和联系
1、cdh比原生的Apache发行版本包含了更多的补丁,用于增强稳定性,改善功能,有时候还增加功能特性 2、cdh版本是由cloudera公司开源的,可以使用cm平台进行管理,比原生的Apache版本安装、维护更加省力 3、但是对技术人员的要求更高,必须对原生apache版本的各个组件理解清晰 4、在cm管理平台中,cdh的parcel包不包含某些组件,需要自己下载对应的parcel包,比如
Hbase版本对Hadoop版本支持
从官方文档看的最新情况。 Hadoop version support matrix “S” = supported “X” = not supported “NT” = Not tested
hbase与hadoop的版本关系
一个最简单的办法就是打开解压缩后的hbase的lib目录,看看hadoop的版本号,例如 这样就可以理解为hadoop用2.5.1的就可以了吧
hadoop的版本变迁
hadoop的起源是lucen之父为了处理lucen的问题,基于谷歌发表的几篇文章衍生出来的,刚开始hadoop的核心只有hdfs ,mapreduce.这边是hadoop的最初版本。 随着hdfs的流行,出现了新的问题,hdfs不支持append,从这个问题开始,hadoop变衍生除了分之,解决这个问题,一步步形成一个成熟的方案。同样的,另一些问题也解决掉了,如安全性的问题。后面随着处理had
Hadoop族 版本变化
1. Hbase 变化:       0.94.6时public class Put extends Mutation implements HeapSize, Writable, Comparable    0.95.2时public class Put extends Mutation implements HeapSize, Comparable 影响:    public s
CDH版本hadoop的源码编译
在安装CDH版本的hadoop的时候, 我们下载下来的CDH的hadoop安装包中, 并没有native包, 所以我们在使用本地库 (本地库可以用来做压缩, 以及支持C程序等等) 的时候就会出问题, 好了废话不多说, 接下来看如何编译. 首先我们打开src目录下的BUILDING.txt文件 能够看到, 在官方说明中已经写明了编译所需要的准备工作 准备工作: linux系统 (准备一台干净的...
hadoop 0.20.2版本
一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。
Hadoop的CDH版本是什么?
Hadoop的CDH版本是什么? 1.Apache社区版 优点: 完全开源免费 社区活跃 文档、资料详实 缺点: 版本管理比较混乱,各种版本层出不穷,很难选择,选择生态组件时需要大量考虑兼容性问题、版本匹配问题、组件冲突问题、编译问题等。 集群的部署安装配置复杂,需要编写大量配置文件,分发到每台节点,容易出错,效率低。 集群运维复杂,需要安装第三方软件辅助。 2.第三方发行版(CD...
hadoop所有版本的下载地址
Apache的hadoop下载地址 地址:https://archive.apache.org/dist/hadoop/common/ CDH的hadoop下载地址 地址:http://archive.cloudera.com/cdh5/cdh/5/   下载案例 首先找到下载的地址,然后再后面加上.tar.gz就可以下载了 CDH的下载工具都在http://archive.cloud...
Hadoop版本1安装
Hadoop安装前准备:(所以节点都要做)1.系统:CentOS 6.4 64位2.关闭防火墙和SELinux service iptables status service iptables stop chkconfig iptables off vi /etc/sysconfig/selinux 设置 SELEINUX=disabled      SELINUXTYPE=disabled 检查...
Hadoop生态系统及版本
一 Hadoop的生态系统     二关于HIVE     三 关于HBASE     四 关于zookeeper     五 关于Hadoop的版本   我们选择ver1.2,因为     大小: 344.3 KB
hadoop早期版本
早期的hadoop版本,方便初学者或者大数据研究者使用。
Hadoop各个版本的下载地址
http://mirror.bit.edu.cn/apache/hadoop/common/
Hadoop 的发展史和版本
1、hadoop发展历程 1)、. 这一切是如何开始的—Web上庞大的数据! 2)、使用Nutch抓取Web数据 3)、 要保存Web上庞大的数据——HDFS应运而生 4)、如何使用这些庞大的数据? 5)、采用Java或任何的流/管道语言构建MapReduce框架用于编码并进行分析 6)、 如何获取Web日志,点击流,Apache日志,服务器日志等非结构化数据——fuse,webda
Hadoop学习笔记—3.Hadoop RPC机制、原理及使用
一、RPC基础概念 1.1 RPC的基础概念   RPC,即Remote Procdure Call,中文名:远程过程调用;   (1)它允许一台计算机程序远程调用另外一台计算机的子程序,而不用去关心底层的网络通信细节,对我们来说是透明的。因此,它经常用于分布式网络通信中。 RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在OSI网络通信模型
hbase和hadoop版本搭配
搭建hbase的时候,网上有好多教程说hbase用到的lib下的hadoop核心包,要和你集群用到的hadoop版本一致,我觉得这个没有必要,我试了一下,反而hbase无法启动。关于这个问题,最好的解决方案在hbase官方文档上,上面有hbase和hadoop嗯嗯版本搭配信息,只要上面说是版本支持的,就可放心使用:顺便附上一张图。...
hadoop完全分布式 Mini版本
环境:虚拟机3个 主节点 n1 192.168.0.128子节点n2 192.168.0.129子节点n3 192.168.0.130linux:centos 7 64 mini版本一、vm  虚拟机配置 和centos配置   1、vm虚拟机配置1、安装VM(安装步骤忽略) 1.1打开vm 点击创建新的虚拟机 1.2 自定义高级下一步 1.3选择 虚拟机硬件兼容性 默认 下一步 1.4...
Hadoop版本说明补充
该课程是4个月就业培训的核心部分,是在有40多学生上课的情况下录制而成,受到学生好评,课程共计118学时。
hadoop权威指南最新版本
hadoop权威指南最新版本 彩色影印版本,清晰可看 第三版
hadoop权威指南 最新版本
Hadoop权威指南 最新版本 中文版 分布式存储和计算技术
相关热词 c# stream 复制 android c# c#监测窗口句柄 c# md5 引用 c# 判断tabtip 自己写个浏览器程序c# c# 字符串变成整数数组 c#语言编程写出一个方法 c# 转盘抽奖 c#选中treeview