码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • docker安装hadoop集群遇到的一些问题


    1.进入hadoop镜像对应的容器内,执行Hdfs命令,显示没找到hdfs: command not found

    解决方案:在/etc/profile文件内

    原来是export PATH= P A T H : PATH: PATH:HADOOP_HOME/bin:$HADOOP_HOME/sbin

    改成export PATH= P A T H : PATH: PATH:HADOOP_HOME/bin: H A D O O P _ H O M E / s b i n : HADOOP\_HOME/sbin: HADOOP_HOME/sbin:PATH

    2./usr/local/hadoop/sbin目录调用start-all.sh,启动过程提示Slave1: nodemanager is running as process 226. Stop it first.

    解决方案:

    1.先在slave或masterKill掉对应进程 Kill 226

    2.调用stop-all.sh

    这二步都做了,再调用start-all.sh启动就正常了

    3.Hive初始化元数据报Illegal character entity会提示在哪一行

    ./schematool -initSchema -dbType mysql

    原因就是在conf/hive-stite.xml对应行那里有个 把他删掉即可

    用vim +行数 hive-sitem.xml跳到所在行

    4.Hive初始化元数据报

    Cannot find hadoop installation: $HADOOP_HOME or $HADOOP_PREFIX must be set

    解决方案:在/etc/profile里加了一行

    export PATH= P A T H : PATH: PATH:HADOOP_HOME/bin:$HIVE_HOME/bin

    然后source profile重新运行该文件

    然后再重新初始化元数据就可以了。

    5.用hive命令准备进入Hive时,报了两个错

    1.连接不了hadoopMaster,这个在启动hadoop(haddop目录/sbin ./start-all.sh)就好了

    2.无法创建Cannot create directory /tmp/hive. Name node is in safe mode

    这个是因为我hadoop之前设置进入了安全模式,所以用hdfs dfsadmin -safemode leave 退出安全模式就可以了

  • 相关阅读:
    springboot大学生网络教学平台的设计与实现毕业设计源码281819
    HashMap中的put()和get()的实现原理
    算法学习笔记(7.4)-贪心算法(区间调度问题)
    ps -xu | grep这个命令的用途
    C#调用WebService的方法介绍
    数环通入选中国信通院《高质量数字化转型技术方案集(2023)》,积极推动企业数字化转型
    汽车云算力“竞速”,个性化进阶成新风向
    设计模式之工厂模式(C++)
    Virtualbox Manjaro kde虚拟机系统闪烁
    创建InfluxDB数据库自定义函数
  • 原文地址:https://blog.csdn.net/m0_67402096/article/details/126327485
  • 最新文章
  • 沪漂五周年了:我越来越迷茫了
    Agentic Skill Routing 实战:别再把所有 Skill 塞进 AI Agent 上下文
    MySQL-Seconds_behind_master的精度误差
    [MAF预定义ChatClient中间件-03]CachingChatClient——利用缓存省钱省时间
    AI的至暗历史:从万众期待到被政府撤资,AI的两次死亡徘徊
    Agent OS :五种驯服不确定性的范式
    PortSwigger SQL注入LAB11
    数据库即时编译JIT
    [Begin]AI Learn Data Day 0
    深度学习进阶(二十七)现代 LLM 的核心架构设计其二:SwiGLU
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号