在CI中运行时docker-compose竞争条件

时间:2019-04-11 16:51:48

标签: docker docker-compose

我有一个在CI中运行的docker-commoke烟雾测试。...当同一项目的两个构建同时执行时,构建通常会失败。我确定构建将在具有共享docker套接字的同一台计算机上同时执行。似乎docker-compose尝试重用/访问其他实例中的容器,并最终陷入某种竞争状态。

我尝试了各种标志来解决此问题,但仍然会失败。当前标志是:--exit-code-from smoke --remove-orphans --force-recreate using --exit-code-from implies --abort-on-container-exit

如何使构建容器的这两个实例相互隔离?

这是一个失败的例子:

+ make smoke
ls: /var/lib/docker/volumes/0_3542251907521744511_default/_data: No such file or directory
ls: '/var/lib/docker/volumes/0_3542251907521744511_default/_data'/src/github.myco.com/viper-ace/psn-router/'}: No such file or directory
docker-compose version 1.23.2, build 1110ad0 docker-py version: 3.6.0 CPython version: 2.7.15 OpenSSL version: LibreSSL 2.7.4
docker-compose -f smoke-test/docker-compose.yaml up --exit-code-from smoke --remove-orphans --force-recreate
using --exit-code-from implies --abort-on-container-exit
Recreating mock-maker ... 
Recreating mock-maker ... done
Recreating psn-router ... 
Recreating psn-router-500 ... 
Recreating psn-router-500 ... done
Recreating psn-router     ... done
Recreating smoke          ... 
Attaching to mock-maker, psn-router-500, psn-router, smoke
mock-maker                 | > mock-maker@0.1.0 start /usr/src/app
psn-router-500             | 2019-04-11T16:36:21.411Z level=INFO, code=0000, src=psn-router/server.go:87, s=psn-router, hostname=psn-router-instance, c=UNKNOWN, site=UNKNOWN, m="Listen and Serve: http://127.0.0.1:8080"
mock-maker                 | > node mock-maker.js
psn-router                 | 2019-04-11T16:36:21.441Z level=INFO, code=0000, src=psn-router/server.go:87, hostname=psn-router-instance, c=UNKNOWN, site=UNKNOWN, s=psn-router, m="Listen and Serve: http://127.0.0.1:8080"
mock-maker                 | MockMaker app listening at http://:::80
Unexpected API error for psn-router (HTTP code 404)
Response body:
{"message":"No such container: 89460559a3e81a230f5647d52997c5b05bf94f3bdc8e268ca9654d3945ca675d"}
Recreating smoke          ... done
Stopping psn-router-500   ... 
Stopping mock-maker       ... 
Stopping psn-router-500   ... done
Stopping mock-maker       ... done
No such container: 8dec60de6fb3657c0a70e9d53aa27e385b9bd50c24e6cb332d1a7cc373bb7afa
Aborting on container exit...
make: *** [Makefile:22: smoke] Error 

这是docker-compose文件:

services:
  mock-maker:
    container_name: "mock-maker"
    image: registry.myco/viper-ace/mock-maker:0.11.0
  psn-router-500-endpoint:
    container_name: "psn-router-500"
    image: "${DOCKER_IMAGE}"
    depends_on:
      - mock-maker
    environment:
      - ENDPOINT= http://mock-maker/endpoint500 
  psn-router:
    container_name: "psn-router"
    image: "${DOCKER_IMAGE}"
    depends_on:
      - mock-maker
    environment:
      - ENDPOINT= http://mock-maker/endpoint200 
  smoke:
    container_name: "smoke"
    image: registry.myco/http-blackbox-test-tool:2.0.2
    depends_on:
      - psn-router
    volumes:
       - ${SMOKE_TEST_DIR}:/smoke-test
    environment:
      - TEST_DIR=/smoke-test

设定目标:

smoke:
    @echo $(shell docker-compose version)
    SMOKE_TEST_DIR=$(CODE_DIR)/smoke-test DOCKER_IMAGE=${DOCKER_IMAGE} docker-compose -f smoke-test/docker-compose.yaml up --exit-code-from smoke --remove-orphans --force-recreate

1 个答案:

答案 0 :(得分:1)

您面临的问题是由于docker-compose使用所谓的项目名称来将容器“链接”到特定的docker-compose调用。

docker-compose文档中有关项目名称的内容如下:

  

COMPOSE_PROJECT_NAME

     

设置项目名称。启动时,此值与服务名称一起添加到容器中。例如,如果您的项目名称为myapp,并且其中包括两个服务db和web,则Compose分别启动名为myapp_db_1和myapp_web_1的容器。

     

设置为可选。如果未设置此项,则COMPOSE_PROJECT_NAME默认为项目目录的基本名称。另请参见-p命令行选项。

因此,在您的情况下,如果您有两个docker-compose命令试图在同一台计算机上使用同一目录同时运行,则它们的项目名称均为smoke_test

这意味着如果同时发生两次make smoke的调用,它们都将看到带有smoke_test前缀的容器,并试图管理/重新创建它们,因为它们认为它们属于它们,而实际上可能不是

解决方案:

最简单的解决方案是使用make smoke的{​​{1}}标志为每次--project-name的调用指定一个唯一的项目名称。

一种方法是:

docker-compose

这样,每次docker-compose --project-name $(data +'%s') -f smoke-test/docker-compose.yaml up --exit-code-from smoke --remove-orphans --force-recreate的调用都将其容器与docker-compose的其他同时调用隔离开。

顺便说一句,我认为生成唯一项目名称的一种首选方法是使用内部版本号,而不是unix时间戳。

希望这会有所帮助。