Hadoop-HA集群部署

news/2025/2/22 5:58:04

集群的服务器规划:

配置免密登陆:(这里示范的是第一台服务器,其余的操作一样),免密登陆是为了执行脚本统一操作,启动,如(hdfs集群:1上启动2.5.6.7)(yarn,3上启动4567)

免密登陆测试:从01服务器登陆05服务器:

ZOOKEEPER的配置自己去看前面的文章,装到(5.6.7)三台服务器上去

在6.7两台服务器上修改myid为2和3.这样你的 3台zk就都配置好了

启动zk,并且查看状态是否正常:

安装配置hadoop集群

1.如上图:两台hdfs的nameservice我将他们和在一起命名——ns1

2.指定hadoop的目录

3.指定zookeeper的集群地址

以上就已经将namenode的配置配好了

以下是日志的配置JournalNode,和zkfc的自动切换

配置mapreduce的框架为yarn

配置yarn的高可用

将1上的hadoop包拷贝到2.3.4.5.6.7

启动

测试yarn地址是 


http://www.niftyadmin.cn/n/5861710.html

相关文章

【Gin-Web】Bluebell社区项目梳理3:社区相关接口开发

本文目录 一、接口详情1. 获取分类社区列表接口2. 根据id查询社区 二、值类型与引用类型 一、接口详情 跟社区有关的接口详情如下。 1. 获取分类社区列表接口 首先是Controller层,然后跳转到Logic层业务逻辑的开发。 这是Logic层,再做一次跳转&#…

LeetCode 热题 100 283. 移动零

LeetCode 热题 100 | 283. 移动零 大家好,今天我们来解决一道经典的算法题——移动零。这道题在LeetCode上被标记为简单难度,要求我们将数组中的所有 0 移动到数组的末尾,同时保持非零元素的相对顺序。下面我将详细讲解解题思路,…

RabbitMQ 消息队列 优化发送邮件

express 发送邮件 最简单的异步发送邮件方法为何要使用 RabbitMQ?如何在 Node 项目中集成 RabbitMQ? 一、 不用 await 发送邮件 在实际开发之前,不妨先思考下,我们最终的目的是为了让邮件异步发送。那发送邮件这里有个await&am…

【量化科普】Volatility,波动率

【量化科普】Volatility,波动率 🚀量化软件开通 🚀量化实战教程 在量化投资领域,波动率(Volatility)是衡量资产价格变动幅度的一个重要指标。它反映了资产价格的稳定程度,通常以标准差的形式…

2025最新高维多目标优化:基于城市场景下无人机三维路径规划的导航变量的多目标粒子群优化算法(NMOPSO),MATLAB代码

一、基于导航变量的多目标粒子群优化算法(NMOPSO)介绍 基于导航变量的多目标粒子群优化算法(Navigation variable-based multi-objective particle swarm optimization,NMOPSO)是2025年提出的一种用于无人机路径规划的…

QSplashScreen --软件启动前的交互

目录 QSplashScreen 类介绍 使用方式 项目中使用 THPrinterSplashScreen头文件 THPrinterSplashScreen实现代码 使用代码 使用效果 QSplashScreen 类介绍 QSplashScreen 是 Qt 中的一个类,用于显示启动画面。它通常在应用程序启动时显示,以向用户显…

wps中zotero插件消失,解决每次都需要重新开问题

参考 查看zotero目录 D:\zotero\integration\word-for-windows 加载项点击 dotm即可 长期解决 把dom 复制到 C:\Users\89735\AppData\Roaming\kingsoft\office6\templates\wps\zh_CN还是每次都需要重新开的话 重新加载一下

【后端】gitHub访问速度太慢解决办法

问题描述 浏览器无法打开GitHub,加载非常慢 解决方法 1、修改本地hosts文件,增加到 http://github.global.ssl.fastly.net 和 http://github.com 的映射 本机hosts 文件位置: C:\Windows\System32\drivers\etc配置如下: # g…