标签:Hadoop

Hadoop

Hadoop HA(集群高可用)笔记

杨不知 发布于 21小时前

背景 在 Hadoop 之前的版本中存在单点故障的问题,就是说每个集群中只有一个 NameNode 提供服务,如果发生意外宕机或者对机器进行维护(如更换硬盘)的时候,整个集群就不能正常工作,基于以上原因,提出了 HA(Hadoop 高可用)的概念。 Hadoop 官方网站上提供了 […]...

阅读(8)评论(0)赞 (0)

Hadoop

Hadoop 启动关闭命令总结

杨不知 发布于 1个月前 (02-26)

HDFS: 格式化 NameNode:bin/hdfs namenode -format 启动单个 NameNode:sbin/hadoop-daemon.sh start namenode 启动单个 DataNode:sbin/hadoop-daemon.sh start na […]...

阅读(66)评论(0)赞 (0)

Hadoop

HDFS常用命令总结

杨不知 发布于 4个月前 (12-01)

执行以下命令需要在hadoop安装目录下的bin目录中执行,比如我的安装路径是/opt/module/hadoop-2.7.2,那么就在/opt/module/hadoop-2.7.2/bin目录下执行。 -help:显示帮助信息 hdfs dfs -help rm -ls:显示 […]...

阅读(169)评论(1)赞 (0)

Hadoop

Hadoop集群搭建

1

杨不知 发布于 1年前 (2019-02-16)

Hadoop集群部署 一、准备工作 假设现在有4台机器 192.168.1.101 192.168.1.102 192.168.1.103 192.168.1.104 这里以centos7系统为例 (不同版本的Linux系统在做某些操作时命令不一样,可自行百度) 四个节点都有登录 […]...

阅读(237)评论(0)赞 (2)