Hadoop安装部署-DataNode集群版

Hahoop分布式文件系统支持DataNode节点的大规模扩展,本文主要描述DataNode集群版的安装部署。

图片

如上所示,Hadoop分布式文件系统中每个文件是以数据块的方式存储在不同的DataNode中,每个数据块都支持高可用性,当其中一个数据块对应的DataNode节点发生故障变得不可用时,Hadoop分布式文件系统则根据备份复制规则在其他可用的DataNode节点中重新同步复制一份新的数据块,以保证每个数据块的副本数符合高可用性的规则

NameNode1

192.168.0.136

DataNode 1

192.168.0.137

DataNode 2

192.168.0.138

如上所示,Hadoop分布式文件系统的NameNode以及DataNode对应的IP地址

图片

如上所示,在Hadoop分布式文件系统集群的所有节点中,设置主机名称与IP地址之间的对应关系

图片

图片

图片

图片

如上所示,设置NameNode索引节点可免密登录DataNode数据存储节点,NameNode索引节点可以远程免密登录DataNode节点执行操作命令

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,设置集群包括的DataNode数据存储节点

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,设置集群核心侧的属性

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,设置分布式文件系统侧的属性

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,同步属性配置文件到其他的DataNode数据存储节点

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,格式化文件系统

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,启动集群

图片

如上所示,在Hadoop分布式文件系统的DataNode数据存储节点中,显示集群启动信息

http://192.168.0.136:9870/

图片

如上所示,在浏览器中访问Hadoop分布式文件系统的web统计信息页面,显示DataNode数据存储节点的使用情况

相关推荐

  1. Hadoop安装

    2024-04-03 12:42:01       31 阅读
  2. Hadoop分布式安装

    2024-04-03 12:42:01       57 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-04-03 12:42:01       171 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-04-03 12:42:01       189 阅读
  3. 在Django里面运行非项目文件

    2024-04-03 12:42:01       157 阅读
  4. Python语言-面向对象

    2024-04-03 12:42:01       170 阅读

热门阅读

  1. 卷积神经网络

    2024-04-03 12:42:01       51 阅读
  2. python项目练习——12.在线购物商城应用程序

    2024-04-03 12:42:01       55 阅读
  3. 微知识-git rebase常用的3个场景和2个本质

    2024-04-03 12:42:01       46 阅读
  4. linux tasklet

    2024-04-03 12:42:01       35 阅读
  5. BabyAGI源码解读(2)-核心agents部分

    2024-04-03 12:42:01       43 阅读
  6. C# 各种数据结构定义以及初始化

    2024-04-03 12:42:01       41 阅读
  7. 计算机视觉无人驾驶技术:入门指南

    2024-04-03 12:42:01       45 阅读
  8. 中介者模式:优雅解耦的利器

    2024-04-03 12:42:01       45 阅读