使用docker安装hadoop的实现过程
更新时间：2023年01月30日 11:56:51 作者：老酒的酒瓶不见了
这篇文章主要介绍了使用docker安装hadoop的详细过程，本文给大家讲解的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
1.拉镜像
这里推荐第一个
docker pull registry.cn-hangzhou.aliyuncs.com/hadoop_test/hadoop_base
或者
docker pull qianiqan/hadoop_only
2.创建容器
三个容器的名称分别是Master、Slave1、Slave2
1.创建hadoop内部网络
目的是实现容器与容器之间的相互通信
docker network create --driver=bridge hadoop
hadoop:是创建的网络名
2.创建master容器，开放端口
docker run -it --network hadoop -h Master --name Master -p 9870:9870 -p 8088:8088 registry.cn-hangzhou.aliyuncs.com/hadoop_test/hadoop_base bash
--network hadoop ：指定该容器使用创建的hadoop网络
--name Master ：把该容器名称命名为Master
-p 9870:9870 ：将宿主机的9870端口号，映射到容器的9870端口
-p 8088:8088 ： 将宿主机的8088端口号，映射到容器的8088端口
这两个开放端口
3.创建slave1容器，不开放端口
docker run -it --network hadoop -h Slave1 --name Slave1 registry.cn-hangzhou.aliyuncs.com/hadoop_test/hadoop_base bash
不开端口，只有master容器开
4.创建slave2容器，不开放端口
docker run -it --network hadoop -h Slave2 --name Slave2 registry.cn-hangzhou.aliyuncs.com/hadoop_test/hadoop_base bash
不开端口，只有master容器开
3.三台主机都修改/etc/hosts文件
分别进入三台主机，然后修改他们的hosts文件
vim /etc/hosts **************添加下面内容************* 172.20.0.2 Master #（容器ip 容器主机名） 172.20.0.3 Slave1 172.20.0.4 Slave2
查看容器ip的方法
docker inspect -f '{{range .NetworkSettings.Networks}}{{.IPAddress}}{{end}}' 容器ID4.格式化hdfs
在master容器内操作
进入hadoop的bin目录格式化
可以看出hadoop的存放目录为/usr/local/hadoop/
cd /usr/local/hadoop/bin - ./hadoop namenode -format
5.启动hadoop
三台主机容器内部都可以
cd /usr/local/hadoop/sbin - ./start-all.sh
6.web访问测试
宿主机ip:9870
到此这篇关于使用docker安装hadoop（已实现） 的文章就介绍到这了,更多相关docker安装hadoop内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！
相关文章
这篇文章主要介绍了如何快速清理 docker 资源,具体点说就是删除那些无用的 镜像、容器、网络和数据卷,小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2018-07-07
这篇文章主要给大家介绍了关于Docker默认网段修改的相关资料，文中通过示例代码以及图文介绍的非常详细，对大家的学习或者使用Docker具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧2019-03-03
本篇文章主要介绍了Docker创建MySQL容器的方法，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2017-01-01
这篇文章主要介绍了docker打包golang应用的过程分析,本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2023-03-03
这篇文章主要介绍了docker容器如何精简镜像减小体积，一般我们打造镜像会有几百MB，学完本文后我们将学会缩小镜像体积，从而达到做出来的镜像只有几十MB，一起来看看吧2021-08-08
在使用Docker的过程中,系统会逐渐积累一些无用的垃圾文件,占据宝贵的磁盘空间并影响系统性,本文主要介绍了Docker磁盘空间清理的方法实现,具有一定的参考价值,感兴趣的可以了解一下2023-09-09
这篇文章主要介绍了使用Docker搭建Redis主从复制的集群,本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下2020-07-07
docker-compose部署nacos 2.2.3的详细过程
这篇文章主要介绍了docker-compose部署nacos 2.2.3的详细过程,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下2023-11-11
这篇文章主要介绍了Docker的理解和基本命令详解,需要的朋友可以参考下2017-05-05
这篇文章主要介绍了Docker Compose在不同环境的多种安装方式，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2020-10-10
最新评论