资讯

精准传达 • 有效沟通

从品牌网站建设到网络营销策划,从策略到执行的一站式服务

使用docker部署hadoop集群的详细教程-创新互联

最近要在公司里搭建一个hadoop测试集群,于是采用docker来快速部署hadoop集群。

目前创新互联已为数千家的企业提供了网站建设、域名、虚拟空间、网站托管、服务器租用、企业网站设计、田林网站维护等服务,公司将坚持客户导向、应用为本的策略,正道将秉承"和谐、参与、激情"的文化,与客户和合作伙伴齐心协力一起成长,共同发展。

0. 写在前面

网上也已经有很多教程了,但是其中都有不少坑,在此记录一下自己安装的过程。

目标:使用docker搭建一个一主两从三台机器的hadoop2.7.7版本的集群

准备:

首先要有一台内存8G以上的centos7机器,我用的是阿里云主机。

其次将jdk和hadoop包上传到服务器中。

我安装的是hadoop2.7.7。包给大家准备好了,链接:/tupian/20230522/init 提取码:vmzw。

1. 步骤

大致分以下几步:

  • 安装docker
  • 基础环境准备
  • 配置网络,并启动docker容器
  • 配置host及ssh免密登录
  • 安装配置hadoop

1.1 安装docker

依次执行如下步骤安装docker。如果有docker环境的可以跳过。

yum update

yum install -y yum-utils device-mapper-persistent-data lvm2

yum-config-manager --add-repo /tupian/20230522/docker-ce.repo

yum install -y docker-ce
 
systemctl start docker

docker -v

网站名称:使用docker部署hadoop集群的详细教程-创新互联
本文链接:http://cdkjz.cn/article/csdcph.html
多年建站经验

多一份参考,总有益处

联系快上网,免费获得专属《策划方案》及报价

咨询相关问题或预约面谈,可以通过以下方式与我们联系

大客户专线   成都:13518219792   座机:028-86922220