• hadoop伪分布式搭建前期工作


    hadoop伪分布式搭建

    前期工作

    使用 yum 安装需要虚拟机可以正常上网,yum 安装前可以先测试下虚拟机联网情况。
    1.安装 epel-release
    什么是epel-release
    “EPEL的全称叫 Extra Packages for Enterprise Linux。EPEL是由 Fedora 社区打造,为 RHEL 及衍生发行版如 CentOS、Scientific Linux 等提供高质量软件包的项目。装上了 EPEL之后,就相当于添加了一个第三方源。

    [root@hadoop105 ~]# yum install -y epel-release
    
    • 1

    2.安装工具及编辑器

    注意:如果 Linux 安装的是最小系统版,还需要安装如下工具;如果安装的是 Linux桌面标准版,不需要执行如下操作

    net-tool:工具包集合,包含 ifconfig 等命令

    [root@hadoop105 ~]# yum install -y net-tools
    
    • 1

    vim:编辑器

    [root@hadoop105 ~]# yum install -y vim
    
    • 1

    **关闭防火墙 **
    关闭防火墙及开机自关闭

    [root@hadoop105 ~]# systemctl stop firewalld
    [root@hadoop105 ~]# systemctl disable firewalld.service
    
    • 1
    • 2

    注意:在企业开发时,通常单个服务器的防火墙时关闭的。公司整体对外会设置非常安全的防火墙

    创建新用户

    创建 tedu 用户,并修改 tedu用户的密码

    [root@hadoop105 ~]# useradd tedu
    [root@hadoop105 ~]# passwd tedu
    
    • 1
    • 2

    在这里插入图片描述

    配置权限

    配置 tedu用户具有 root 权限,方便后期加 sudo 执行 root 权限的命令

    在这里插入图片描述

    [root@hadoop105 home]# vim /etc/sudoers
    
    
    ## Allow root to run any commands anywhere
    root ALL=(ALL) ALL
    ## Allows people in group wheel to run all commands
    %wheel ALL=(ALL) ALL
    tedu ALL=(ALL) NOPASSWD:ALL
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8

    注意:tedu这一行不要直接放到 root 行下面,因为所有用户都属于 wheel 组,你先配置了tedu具有NOPASSWD免密功能,但是程序执行到%wheel 行时,该功能又被覆盖回需要密码。所以 tedu要放到%wheel 这行下面。

    测试权限

    [tedu@hadoop105 opt]$ rm -rf rh/
    rm: 无法删除"rh/": 权限不够
    [tedu@hadoop105 opt]$ sudo rm -rf rh/
    [tedu@hadoop105 opt]$ ls
    [tedu@hadoop105 opt]$ mkdir rh
    mkdir: 无法创建目录"rh": 权限不够
    [tedu@hadoop105 opt]$ sudo mkdir rh
    [tedu@hadoop105 opt]$ ll
    总用量 0
    drwxr-xr-x. 2 root root 6 9月  18 15:08 rh
    [tedu@hadoop105 opt]$ 
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11

    创建module,software

    [tedu@hadoop105 opt]$ sudo mkdir module
    [tedu@hadoop105 opt]$ sudo mkdir software
    [tedu@hadoop105 opt]$ ls
    module  rh  software
    [tedu@hadoop105 opt]$ 
    
    • 1
    • 2
    • 3
    • 4
    • 5

    修改文件权限的所属组

    [root@hadoop105 opt]# chown tedu:tedu /opt/module
    [root@hadoop105 opt]# chown tedu:tedu /opt/software
    [root@hadoop105 opt]# ll
    总用量 0
    drwxr-xr-x. 2 tedu tedu 6 9月  18 15:09 module
    drwxr-xr-x. 2 root root 6 9月  18 15:08 rh
    drwxr-xr-x. 2 tedu tedu 6 9月  18 15:10 software
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7

    卸载虚拟机自带的 JDK

    [root@hadoop105 ~]# rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps
    
    • 1
    • rpm -qa:查询所安装的所有 rpm 软件包
    • grep -i:忽略大小写
    • xargs -n1:表示每次只传递一个参数
    • rpm -e –nodeps:强制卸载软件

    注意:如果你的虚拟机是最小化安装不需要执行这一步。另外此操作切换到root用户下执行。

    重启虚拟机

    reboot
    
    • 1

    克隆虚拟机

    hadoop106,hadoop107
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    克隆完成后需要对克隆完成的虚拟机进行网络配置
    步骤在上面

  • 相关阅读:
    解决AndroidStudio 提交代码到github失败的问题
    面试题 17.09. 第 k 个数(技巧)
    Java如何实现统计在线人数的功能?
    2023数维杯国际数学建模A题B题C题D题思路+模型+代码+完整论文
    【无标题】
    Android JetPack~LiveData(二) 数据倒灌问题
    《零基础入门学Python》 matplotlib数据可视化入门
    PyTorch笔记 - LSTM(Long Short-Term Memory) 和 LSTMP(Projection)
    基于springboot冷链物流信息调度系统毕业设计源码210951
    百度Java面试题前200页都在这里了
  • 原文地址:https://blog.csdn.net/m0_67402774/article/details/126367458