大数据之Hadoop（一）

文章目录

前言
一、HDFS介绍
二、架构介绍
三、HDFS切片机制
四、HDFS的副本机制
五、HDFS的Shell命令
总结

前言

#博学谷IT学习技术支持#
Hadoop是一些软件的统称，其底层是Java；Hadoop主要包含HDFS分布式文件存储框架、MapReduce分布式计算框架和Yarn分布式资源调度框架。本篇文章主要介绍Hadoop中的HDFS框架。

一、HDFS介绍

HDFS的全称是Hadoop Distributed File System，Hadoop分布式文件系统。该系统是一个由多台计算机组成的集群，主要看重整体集群的工作效率，不注重单台计算机的性能，所以无论多低配置的计算机都可以加入该集群中。
HDFS系统具有文件切片的机制，可以将一个较大的文件进行切片，切分成多个较小的文件存储在该集群中不同的计算机上，取数据时再将所有的小文件进行合并，返回给客户端。

二、架构介绍

在这里插入图片描述

从上图可以看出，HDFS系统中的角色有Name

相关阅读:
MyBatis的自定义插件
基于RabbitMQ构建延迟队列
RabbitMQ学习笔记
【微信小程序开发】IDE安装使用- Hello Cocos
【云原生二】 Docker架构演进过程
[Unity]打包Android后xxx方法丢失。
Flume笔记
springMvc55-自定义异常
算法竞赛入门【码蹄集新手村600题】(MT1501-1550）
【PyTorch】深度学习实践 01 Overview

原文地址：https://blog.csdn.net/weixin_43339889/article/details/126923464