You've already forked www.colben.cn
update
This commit is contained in:
@@ -173,6 +173,16 @@ Rocky9 | hdp-slave11 | 192.168.8.11/24 | /data/hdp-dn | Datanode, NodeManager
|
||||
<name>yarn.resourcemanager.webapp.address</name>
|
||||
<value>hdp-rm:8088</value>
|
||||
</property>
|
||||
<!-- <property>
|
||||
<!-- 设置 nodemanager 可用 6 核处理器 -->
|
||||
<name>yarn.nodemanager.resource.cpu-vcores</name>
|
||||
<value>6</value>
|
||||
</property>
|
||||
<property>
|
||||
<!-- 设置 nodemanager 可用 12GB 内存 -->
|
||||
<name>yarn.nodemanager.resource.memory-mb</name>
|
||||
<value>12288</value>
|
||||
</property> -->
|
||||
<property>
|
||||
<!-- (可选) 开启日志聚集功能,方便在Web UI上查看已完成任务的日志 -->
|
||||
<name>yarn.log-aggregation-enable</name>
|
||||
@@ -226,27 +236,25 @@ Rocky9 | hdp-slave11 | 192.168.8.11/24 | /data/hdp-dn | Datanode, NodeManager
|
||||
```
|
||||
|
||||
### 创建临时目录和数据目录
|
||||
- 在 **hdp-nn** 上创建临时目录和数据目录
|
||||
- 在 **hdp-nn** 上创建数据目录
|
||||
```bash
|
||||
mkdir /tmp/hdp
|
||||
mkdir /data/hdp_nn
|
||||
```
|
||||
|
||||
- 在 **hdp-snn** 上创建临时目录和数据目录
|
||||
- 在 **hdp-snn** 上创建数据目录
|
||||
```bash
|
||||
mkdir /tmp/hdp
|
||||
mkdir /data/hdp_snn
|
||||
```
|
||||
|
||||
- 在 **hdp-rm** 上创建临时目录
|
||||
```bash
|
||||
mkdir /tmp/hdp
|
||||
```
|
||||
|
||||
- 在 **hdp-slaveXX** 上创建临时目录和数据目录
|
||||
```bash
|
||||
mkdir /tmp/hdp #建议挂载独立盘
|
||||
mkdir /data/hdp_dn #建议挂载独立盘
|
||||
mkdir /tmp/hdp /data/hdp_dn #建议都挂载独立盘
|
||||
```
|
||||
|
||||
### 格式化 namenode
|
||||
- 在 **hdp-nn** 上执行如下操作
|
||||
```bash
|
||||
hdfs namenode -format
|
||||
```
|
||||
|
||||
## 启动 hadoop 集群
|
||||
@@ -260,3 +268,6 @@ Rocky9 | hdp-slave11 | 192.168.8.11/24 | /data/hdp-dn | Datanode, NodeManager
|
||||
/opt/hdp/sbin/start-yarn.sh
|
||||
```
|
||||
|
||||
## 参考
|
||||
- [https://www.cnblogs.com/jpSpaceX/articles/15032931.html](https://www.cnblogs.com/jpSpaceX/articles/15032931.html)
|
||||
|
||||
|
||||
Reference in New Issue
Block a user