使用远程Docker进行集成测试的环境搭建过程

 更新时间:2021年07月04日 14:45:53   作者:西北偏北UP  
使用docker可以帮助我们快速的搭建项目依赖环境,但是本地化的docker依赖,依然让我们的代码在测试时,不够纯粹,对其各个运行环境,都有本地docker安装的要求

需求背景

团队有集成测试的需求,集成测试需要依赖一些中间件,比如mysql,rabbitmq。每个研发人员有对自己开发的那部分代码进行测试编写和运行检测的需求。

为了不互相影响,可以选择在研发本地搭建自己的依赖环境,我们希望这些环境搭建要容易、快速,且方便清理。

使用docker进行环境搭建

而docker,则能很好实现上述诉求。
但仅仅这样还不够,我们还面临着以下一些问题

  • 本地环境搭建的繁琐。每个研发,都要在本地安装docker环境,这会导致在使用上的一些门槛和不便,以我司为例,由于有严格的网络管控,我们都是内网进行开发,无法联网。特别windows 在安装docker时,需要联网。虽然可以想办法解决,但每个新来小伙伴都要经历一些本地环境安装调试过程,实属繁琐
  • 测试运行速度无法保证。当一个项目依赖中间件较多时,基于本地的docker也会占用大量的资源影响测试速度
  • 多环境集成测试麻烦。由于集成测试依赖本地docker,那么这份代码在不同的环境,比如在Jenkins上打包运行时,需要在对应的环境也安装docker

总结来看,使用docker可以帮助我们快速的搭建项目依赖环境,但是本地化的docker依赖,依然让我们的代码在测试时,不够纯粹,对其各个运行环境,都有有本地docker安装的要求。

以中心化的docker server改进集成测试

而实际上,docker本身提供了远程链接模式,则使得我们可以中心化的部署docker,然后集成测试代码以tcp链接的方式,使用docker server,进行依赖中间件搭建,测试。

Docker Server远程链接配置

以centos 为例7.6为例,讲解如何将一个docker配置成可以远程链接。

/etc/docker/daemon.json中开启远程链接端口

{"hosts": ["tcp://0.0.0.0:2375", "unix:///var/run/docker.sock"]}

添加文件/etc/systemd/system/docker.service.d/override.conf,注意上述路径不存在则手动创建

 [Service]
 ExecStart=
 ExecStart=/usr/bin/dockerd
  • 重载守护进程 systemctl daemon-reload
  • 重启docker容器systemctl restart docker.service

Testcontainers 框架

在部署好远程docker后,随之而来的问题是

  • 如何在代码中连接和使用远程docker环境
  • 两个研发同时跑测试用例时,怎么保证他们各自启动的container 在端口上不冲突
  • 使用完后的container,怎么清理

幸运的是,Testcontainers框架,帮我们很好的解决了上述问题。

  • 它能于junit 4 ,junit 5集成,帮助我们启停容器
  • 每一次运行测试,都会启动全新的容器,暴露不一样的端口,使得两个研发同时跑测试用例时,环境互不干扰
  • 它使用testcontainers/ryuk在指定延迟后,清理不再使用的container
  • 上述这一切对使用者都是透明的

Testcontainers 同spring boot集成

更进一步的,游戏公司Playtika提供了Testcontainers 同spring boot整合的测试框架https://github.com/Playtika/testcontainers-spring-boot,使得Spring Boot或Spring cloud生态的应用在编写集成测试时,更方便

环境变量依赖

使用Testcontainers 或 playtika的testcontainers-spring-boot进行远程docker链接时,都不需要在本地安装docker客户端。但需要进行相关环境变量配置,使得代码可以知道远程docker的地址。该地址的配置有如下几种方式

  • 方式1,系统环境变量配置,在当前系统配置环境变量DOCKER_HOST=tcp://remote_docker_server_ip:2375
  • 方式2,直接在java测试代码中,容器构造前,通过代码System.setProperty("DOCKER_HOST","tcp://remote_docker_server_ip:2375")指定环境变量
  • 方式3,如果集成测试使用maven failsafe插件,则在插件上配置环境变量

以command line远程使用和管理docker

上述测试代码不需要安装docker 客户端。但倘若我们需要以命令行的方式,管理docker,则可以安装一些docker客户端,来跟远程docker通信。当然上述的Testcontainers 相当于客户端的一种。

不同操作系统的客户端程序安装方式见: https://gist.github.com/kekru/4e6d49b4290a4eebc7b597c07eaf61f2

参考资料

https://www.testcontainers.org/
https://gist.github.com/styblope/dc55e0ad2a9848f2cc3307d4819d819f
https://github.com/Playtika/testcontainers-spring-boot
https://gist.github.com/kekru/4e6d49b4290a4eebc7b597c07eaf61f2

到此这篇关于使用远程Docker进行集成测试的文章就介绍到这了,更多相关Docker集成测试内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • MySQL docker容器数据更新统计shell脚本代码方式

    MySQL docker容器数据更新统计shell脚本代码方式

    本文介绍了如何创建和配置一个脚本文件,使其能够每隔一小时执行一次,用于更新MySQL统计信息,脚本使用Docker来执行MySQL命令,并将结果保存到文件中,文章还强调了权限设置和配置定时任务的步骤
    2025-01-01
  • linux中无make命令的问题(make: *** 没有指明目标并且找不到 makefile及make命令安装方法)

    linux中无make命令的问题(make: *** 没有指明目标并且找不到 makefile及make命令安装方法)

    这篇文章主要介绍了linux中无make命令的问题(make: *** 没有指明目标并且找不到 makefile及make命令安装方法),本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2020-08-08
  • docker的卷映射手动指定位置的操作方法

    docker的卷映射手动指定位置的操作方法

    Docker中手动指定卷映射位置通过绑定挂载实现,使用-v或--mount参数,语法清晰,支持更多选项,注意宿主机目录存在性、权限和SELinux限制,本文介绍docker的卷映射手动指定位置的操作方法,感兴趣的朋友一起看看吧
    2025-02-02
  • Docker如何同时启动多个服务

    Docker如何同时启动多个服务

    这篇文章主要为大家详细介绍了Docker如何同时启动多个服务,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2016-10-10
  • 详解mac下通过docker搭建LEMP环境

    详解mac下通过docker搭建LEMP环境

    本篇文章主要介绍了详解mac下通过docker搭建LEMP环境,详细介绍了nginx,mysql,php的安装配置,有兴趣的可以来了解一下。
    2017-03-03
  • 解决docker安装jenkins容器内无法访问外网

    解决docker安装jenkins容器内无法访问外网

    这篇文章为大家主要介绍了docker安装jenkins容器内无法访问外网的问题解决,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪
    2023-11-11
  • Docker的安装以及更换仓库源详细图文教程

    Docker的安装以及更换仓库源详细图文教程

    Docker是一个开源的应用容器引擎,它允许开发者打包他们的应用以及依赖包到一个可移植的容器中,下面这篇文章主要给大家介绍了关于Docker的安装以及更换仓库源的相关资料,需要的朋友可以参考下
    2024-07-07
  • Docker安装配置MySQL的实现步骤

    Docker安装配置MySQL的实现步骤

    MySQL 是最流行的关系型数据库管理系统,在 WEB 应用方面 MySQL 是最好的 RDBMS(Relational Database Management System:关系数据库管理系统)应用软件之一。在本教程中,会带大家正确安装配置MySQL在Docker
    2021-11-11
  • docker形式简易部署kibana的过程

    docker形式简易部署kibana的过程

    这篇文章给大家介绍使用docker部署kibana服务的过程,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧
    2023-11-11
  • docker-compose up -d遇到的问题及解决

    docker-compose up -d遇到的问题及解决

    这篇文章主要介绍了docker-compose up -d遇到的问题及解决方案,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教
    2023-03-03

最新评论