码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • docker安装hadoop集群遇到的一些问题


    1.进入hadoop镜像对应的容器内,执行Hdfs命令,显示没找到hdfs: command not found

    解决方案:在/etc/profile文件内

    原来是export PATH= P A T H : PATH: PATH:HADOOP_HOME/bin:$HADOOP_HOME/sbin

    改成export PATH= P A T H : PATH: PATH:HADOOP_HOME/bin: H A D O O P _ H O M E / s b i n : HADOOP\_HOME/sbin: HADOOP_HOME/sbin:PATH

    2./usr/local/hadoop/sbin目录调用start-all.sh,启动过程提示Slave1: nodemanager is running as process 226. Stop it first.

    解决方案:

    1.先在slave或masterKill掉对应进程 Kill 226

    2.调用stop-all.sh

    这二步都做了,再调用start-all.sh启动就正常了

    3.Hive初始化元数据报Illegal character entity会提示在哪一行

    ./schematool -initSchema -dbType mysql

    原因就是在conf/hive-stite.xml对应行那里有个 把他删掉即可

    用vim +行数 hive-sitem.xml跳到所在行

    4.Hive初始化元数据报

    Cannot find hadoop installation: $HADOOP_HOME or $HADOOP_PREFIX must be set

    解决方案:在/etc/profile里加了一行

    export PATH= P A T H : PATH: PATH:HADOOP_HOME/bin:$HIVE_HOME/bin

    然后source profile重新运行该文件

    然后再重新初始化元数据就可以了。

    5.用hive命令准备进入Hive时,报了两个错

    1.连接不了hadoopMaster,这个在启动hadoop(haddop目录/sbin ./start-all.sh)就好了

    2.无法创建Cannot create directory /tmp/hive. Name node is in safe mode

    这个是因为我hadoop之前设置进入了安全模式,所以用hdfs dfsadmin -safemode leave 退出安全模式就可以了

  • 相关阅读:
    jupyter notebook 导入已经在pycharm里pip install过的包报错
    震感来袭,豆瓣评分9.9,万人血书的多线程与高并发v2.0版本
    力扣 21. 合并两个有序链表 C语言实现
    ES6 从入门到精通 # 06:箭头函数 this 指向和注意事项
    RabbitMQ快速入门笔记
    最后写入胜利(丢弃并发写入)
    艾美捷胆固醇肉豆蔻酸酯说明书和相关研究
    【Python】解决CNN中训练权重参数不匹配size mismatch for fc.weight,size mismatch for fc.bias
    365天搞定八股文——Day 002 内核态和用户态的区别
    【Vue3.0移动端项目--旅游网】-- 首页分类和热门精选展示
  • 原文地址:https://blog.csdn.net/m0_67402096/article/details/126327485
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号