Kerberos认证后访问HDFS提示Not attempting to re-login错误
场景
CDH6.3.4集群，开通了Kerberos认证，在客户端得机器上已经通过了Kerberos得认证并且缓存了票据。
由于是新装的系统，安装了最新的jdk-8u371。
报错
执行hdfs dfs -ls / 命令频繁的打印如下错误：
1 | org.apache.hadoop.security.UserGroupInformation Not attempting to re-login since the last re-login was attempted less than 600 seconds before |
错误原因
找了很久，忽然想到了曾经遇到过这种问题，是JDK版本太低导致的，但我安装了最新的JDK1.8，那就有可能是JDK版本太高导致的。
解决办法
下载了一个jdk-8u221版本，完美解决问题。CDH虽然写了支持JDK1.8，但小版本也会影响到它的正常运行，所以以后遇到类似得情况先调整下JDK版本，别太高也别太低。最好是看下官方有没有推荐的版本。
本博客所有文章除特别声明外，均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来源 码农笔记！
wechat
alipay
相关推荐
2020-09-01
Kerberos、Impala、Druid的配合使用
本篇介绍了如何在开启Kerberos认证的情况下，数据库连接池Druid和Impala的配合使用。 背景由于生产环境开启了Kerberos的认证限制，原来可直接使用Druid连接池的方式便不可用了，需要重写Druid获取连接的逻辑，在其创建Impala连接时加入Kerberos认证的功能。 实现方式ImpalaDruidDataSource.class123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120import com.alibaba.druid.pool.DruidDataSource;import com.alibaba.d...
2026-01-03
Java25新特性
2025年9月，Java开发者将迎来一个重要的里程碑——JDK25的发布。作为长期支持版本（LTS），JDK25不仅带来了多项语言增强，还在性能、安全和用户体验方面进行了显著优化。本文将为您详细介绍JDK25的主要功能预览，让您提前领略这一版本的强大功能。 语言特性增强基本类型模式匹配（JEP 507）JDK25在Java的模式匹配框架instanceof和switch中直接支持原始类型（如int、boolean），打破基本类型（Primitive Types）与引用类型（Reference Types）在模式匹配中的隔阂，让基本类型在 instanceof 和 switch 中也能像对象一样灵活使用。例如： 123456789101112// 使用 instanceof 检查安全转换if (obj instanceof int i) { System.out.println("这是一个可以安全存入 int 的数值: " + i);}// 在 switch 中直接匹配基本类型return switch (val) { ...
2023-04-03
在Windows中使用odbc访问kerberos认证的impala
一直使用mac或者wsl来解决访问带有kerberos的impala服务，但WSL毕竟也稍微麻烦了一点，就想着试下能不能再windows解决这个问题。一直使用的是jdbc的impala，看到官网有odbc的，于是就想着试一下，看看能不能解决。 下载odbc impala驱动打开cloudera官网->下载，产品下载 | Cloudera (clouderacn.cn),找到数据库驱动程序,点击Impala ODBC 驱动程序下载打开ODBC Connector下载页面，Download Impala ODBC Connector 2.6.17 (cloudera.com)。选择对应的操作系统版本,下载即可。 安装Cloudera Impala ODBC驱动双击ClouderaImpalaODBC64.msi,除了选择路径，其他无脑下一步。 配置Microsoft ODBC数据源管理程序在powertoys中搜索ODBC 数据源(64 位) 打开ODBC 数据源(64 位),在系统DSN中找到了默认添加的一条数据源 配置点击配置，根据自己实际情况进行配置 1234567...
2021-08-13
无网络环境使用Jenkins自动部署
背景环境要求 MySQL5.7 CentOS7 服务器主机已安装git 已经配置好JDK环境变量 申请开放两个端口的网络策略（本篇申请开发了92和93端口） 安装Gitea下载gitea12# 由于没有网络，所以根据这个地址手动下载即可wget https://dl.gitea.io/gitea/1.15.0/gitea-1.15.0-linux-amd64 安装gitea 将gitea-1.15.0-linux-amd64上传到/opt/gitea 目录下 1234567cd /opt/gitea# 做软链ln -s /opt/gitea/gitea-1.15.0-linux-amd64 gitea# 添加执行权限chmod +x gitea# 启动gitea，-p可修改端口nohup ./gitea web -p 92 & 配置gitea访问http://10.10.10.10:92即可配置gitea，主要配置mysql和http地址，以及管理员。 配置完成后即可完成gitea的部署，代码仓库这一块的问题就解决了。 安装Jenki...
2017-09-12
JVM参数Xms Xmx PermSize MaxPermSize 区别
常见的JVM参数配置机器含义123456-vmargs -Xms128M -Xmx512M -XX:PermSize=64M -XX:MaxPermSize=128M-vmargs 说明后面是VM的参数，所以后面的其实都是JVM的参数了-Xms128m JVM初始分配的堆内存-Xmx512m JVM最大允许分配的堆内存，按需分配-XX:PermSize=64M JVM初始分配的非堆内存-XX:MaxPermSize=128M JVM最大允许分配的非堆内存，按需分配 我们首先了解一下JVM内存管理的机制，然后再解释每个参数代表的含义。 堆(Heap)和非堆(Non-heap)内存按照官方的说法：“Java 虚拟机具有一个堆，堆是运行时数据区域，所有类实例和数组的内存均从此处分配。堆是在 Java 虚拟机启动时创建的。”“在JVM中堆之外的内存称为非堆内存(Non-heap memory)”。可以看出JVM主要管理两种类型的内存：堆和非堆。简单来说堆就是Java代码可及的内存，是留给开发人员使用的；非堆就是JVM留给自己用的，所以方法区、JVM内部处理或优化所需的内存(如JIT编译...
2020-07-25
Maven提示dependencies.dependency.systemPath的警告信息
最近对项目进行重构，期间解决了依赖冲突，将不必要的模块剔除，升级依赖版本等，做完这一切后整个项目目前运行还算正常，不过注意到使用Maven打包的时候经常会出现如下告警： 123456[WARNING] Some problems were encountered while building the effective model for com.raysdata:traffic-search-server:war:1.3.0-SNAPSHOT[WARNING] 'dependencies.dependency.systemPath' for com.cloudera.impala.jdbc:hive_metastore:jar should not point at files within the project directory, ${project.basedir}/libs/hive_metastore.jar will be unresolvable by dependent projects @ line 26, colum...
评论
WalineDisqus
