HDFS分布式文件系统

1. 简介

HDFS（全称：HadoopDistributeFileSystem，Hadoop分布式文件系统）是Hadoop核心组成，是分布式存储服务。

Hadoop分布式集群搭建

依赖: java环境, jdk8

Hadoop搭建方式

• 单机模式：单节点模式，非集群，生产不会使用这种方式
• 单机伪分布式模式：单节点，多线程模拟集群的效果，生产不会使用这种方式
• 完全分布式模式：多台节点，真正的分布式Hadoop集群的搭建（生产环境建议使用这种方式）

1. 环境准备

• 准备三台虚拟机

Hadoop重要组成

Hadoop=HDFS(分布式文件系统)+MapReduce(分布式计算框架)+Yarn(资源协调框架)+Common模块

1. HDFS

Hadoo pDistribute File System一个高可靠、高吞吐量的分布式文件系统

Hadoop简介

1. 简介

Hadoop 是一个适合大数据的分布式存储和计算平台。

如前所述，狭义上说Hadoop就是一个框架平台，广义上讲Hadoop代表大数据的一个技术生态圈，包括很多其他软件框架

大数据简介

大数据技术解决的主要是海量数据的存储和计算。

Hadoop的广义和狭义之分

• 狭义的Hadoop:指的是一个框架，Hadoop是由三部分组成

  • HDFS：分布式文件系统–》存储；