Hadoop安装部署-DataNode集群版

Hahoop分布式文件系统支持DataNode节点的大规模扩展,本文主要描述DataNode集群版的安装部署。

图片

如上所示,Hadoop分布式文件系统中每个文件是以数据块的方式存储在不同的DataNode中,每个数据块都支持高可用性,当其中一个数据块对应的DataNode节点发生故障变得不可用时,Hadoop分布式文件系统则根据备份复制规则在其他可用的DataNode节点中重新同步复制一份新的数据块,以保证每个数据块的副本数符合高可用性的规则

NameNode1

192.168.0.136

DataNode 1

192.168.0.137

DataNode 2

192.168.0.138

如上所示,Hadoop分布式文件系统的NameNode以及DataNode对应的IP地址

图片

如上所示,在Hadoop分布式文件系统集群的所有节点中,设置主机名称与IP地址之间的对应关系

图片

图片

图片

图片

如上所示,设置NameNode索引节点可免密登录DataNode数据存储节点,NameNode索引节点可以远程免密登录DataNode节点执行操作命令

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,设置集群包括的DataNode数据存储节点

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,设置集群核心侧的属性

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,设置分布式文件系统侧的属性

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,同步属性配置文件到其他的DataNode数据存储节点

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,格式化文件系统

图片

如上所示,在Hadoop分布式文件系统的NameNode索引节点中,启动集群

图片

如上所示,在Hadoop分布式文件系统的DataNode数据存储节点中,显示集群启动信息

http://192.168.0.136:9870/

图片

如上所示,在浏览器中访问Hadoop分布式文件系统的web统计信息页面,显示DataNode数据存储节点的使用情况

相关推荐

  1. Hadoop分布式安装

    2024-04-03 12:42:01       26 阅读
  2. Hadoop伪分布式安装

    2024-04-03 12:42:01       23 阅读

最近更新

  1. 一文了解什么是RESTful风格

    2024-04-03 12:42:01       0 阅读
  2. SQL Server详细使用教程

    2024-04-03 12:42:01       0 阅读
  3. js实现快速拖拽(定时器版本)

    2024-04-03 12:42:01       0 阅读
  4. Flink CDC 整库 / 多表同步至 Kafka 方案(附源码)

    2024-04-03 12:42:01       0 阅读
  5. 从事数据分析相关工作技术总结

    2024-04-03 12:42:01       0 阅读
  6. FFT快速傅里叶变换音频分析

    2024-04-03 12:42:01       0 阅读
  7. 基于单片机雨天自动关窗器的设计

    2024-04-03 12:42:01       0 阅读
  8. 基础矩阵和本质矩阵

    2024-04-03 12:42:01       0 阅读
  9. 水气表CJ/T188协议学习及实例

    2024-04-03 12:42:01       0 阅读
  10. 基于springboot的教学资源库源码数据库

    2024-04-03 12:42:01       0 阅读

热门阅读

  1. 卷积神经网络

    2024-04-03 12:42:01       5 阅读
  2. python项目练习——12.在线购物商城应用程序

    2024-04-03 12:42:01       5 阅读
  3. 微知识-git rebase常用的3个场景和2个本质

    2024-04-03 12:42:01       5 阅读
  4. linux tasklet

    2024-04-03 12:42:01       5 阅读
  5. BabyAGI源码解读(2)-核心agents部分

    2024-04-03 12:42:01       5 阅读
  6. C# 各种数据结构定义以及初始化

    2024-04-03 12:42:01       6 阅读
  7. 计算机视觉无人驾驶技术:入门指南

    2024-04-03 12:42:01       6 阅读
  8. 中介者模式:优雅解耦的利器

    2024-04-03 12:42:01       5 阅读