2020年01月的文章

Spark

Spark中的相关术语介绍

1

杨不知 发布于 8个月前 (01-19)

1、Master 和 Worker 在大数据框架中,一般都会有主节点和从节点的概念。主节点负责资源管理和任务调度,从节点负责执行计算并向主节点汇报工作状态。这里的Master代表的就是主节点,Worker代表的就是从节点。Master和Worker是基于物理机器的概念,一般说ma […]

阅读(496)评论(0)赞 (0)

杂七杂八

SSH免密登录配置

1

杨不知 发布于 8个月前 (01-18)

使用SSH免密登录的前提是各机器已经安装了SSH。 SSH免密登录原理: 配置步骤: 1、在服务器A使用cd ~命令进入到家目录。 2、生成ssh免登陆秘钥。执行ssh-keygen -t rsa,然后一路回车,会生 ~/.ssh 文件夹下面生成两个文件id_rsa(私钥)和id […]

阅读(528)评论(0)赞 (0)

Hive

Hive安装以及MySQL相关配置

杨不知 发布于 9个月前 (01-06)

一、安装Hive 1、下载Hive安装包 官网下载地址:http://hive.apache.org/downloads.html 网速慢可以使用这个链接:https://mirrors.tuna.tsinghua.edu.cn/apache/hive/ 2、安装步骤 (1)将下 […]

阅读(657)评论(0)赞 (0)