编程人 cdmana.com

docker部署ambari-2.7.3(大数据集群快速搭建)

1.docker部署ambari

① centos7自身没有yum工具

apt-get install yum -y

② 安装git

yum -y install git

③ 拉取远程仓库

git clone https://gitee.com/which-ly/docker-ambari-2.7.3.git

④ 开始安装

cd docker-ambari-2.7.3

cd ambari-base-local

wget -O local.repo http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.7.3.0/ambari.repo

cd ..

cd ambari-server-local

wget -O local.repo http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.7.3.0/ambari.repo

cd ..

#制作镜像
./scripts/build-image.sh

#本地启动
./scripts/create-local.sh

⑤ 查看容器

#查看正在运行的容器
docker ps

在这里插入图片描述

# 获得web ip
docker inspect -f '{
   
   {range .NetworkSettings.Networks}}{
   
   {.IPAddress}}{
   
   {end}}' amb-server

#访问ambari界面
http://ambari-server(IP):8080

# 查看其它节点的ip
docker inspect 容器id | grep -i ip

2.配置ssh免密登录

我这里的三个容器的ip分别是

  • 172.17.0.2(amb-server)
  • 172.17.0.3(amb1)
  • 172.17.0.4(amb2)

① 修改主机名

# 分别进入每个容器修改hostname
sudo hostnamectl set-hostname node1
  • 172.17.0.2(amb-server) -> node3
  • 172.17.0.3(amb1) -> node1
  • 172.17.0.4(amb2) -> node2

② 修改hosts文件,可以直接ping名字

#分别进入每个容器
docker exec -it amb-server /bin/bash

vi /etc/hosts

172.17.0.2 node3
172.17.0.3 node1
172.17.0.4 node2

#同时要注释掉:
#172.17.0.3 amb1.service.consul amb1
#172.17.0.4 amb2.service.consul amb2

③ 生成密钥

首先分别在这3个节点执行指令:ssh-keygen ,然后一直按回车键直到结束。此时你可以发现在 /root/.ssh/ 文件夹下生成了id_rsa(私钥) 、 id_rsa.pub (公钥),这是生成的秘钥对

④公钥分享

同步公钥到所有节点需要输入root的密码,3个节点都设置root密码为 ambari123

sudo passwd

把自己的公钥发送给其它节点,包括自己。指令如下:

ssh-copy-id node1

ssh-copy-id node2

ssh-copy-id node3

⑤ 配置ambari基础repo(已经配置好,直接进入3)

从如下地址找到hdp3.1.4的yum repo地址

http://public-repo-1.hortonworks.com/HDP/hdp_urlinfo.json

hdp-3.1.4的yum repo地址:

http://public-repo-1.hortonworks.com/HDP/centos7/3.x/updates/3.1.4.0/HDP-3.1.4.0-315.xml

打开可以看到hdp, hdp-gpl, hdp-utils的repo

3.辅助repo配置

#进入每个容器,执行如下操作
cd /etc/yum.repos.d/
cp backup_repo/CentOS-Base.repo .

4.创建集群

  • 点击:LAUNCH INSTALL WIZARD
  • 取名:idc
  • 选择HDP3.1
  • 下一步需要输入ambari-server所在机器的私钥,这样ambari-server才能把组件部署到其他节点
docker exec -it amb-server /bin/bash

cd /root/.ssh

id_rsa
  • 只能添加node1, node2
  • 接下来按照项目需求进行安装服务
    在这里插入图片描述
Scroll to Top