基于docker的持续集成(二)

上一篇(一)已经构建好了docker环境及持续集成所涉及的工具jenkins、maven,这篇博文会介绍接下来的搭建过程

一. 构建自己项目的镜像的Dockerfile

我的项目是个java项目(名叫ydb),Servlet容器是tomcat,外层套个nginx做动静分离,用supervisor做进程管理。

项目镜像是基于Debian8,官方apt源比较慢,所以我换了阿里和网易的源

sources.list

deb http://mirrors.aliyun.com/debian/ jessie main non-free contrib
deb http://mirrors.aliyun.com/debian/ jessie-proposed-updates main non-free contrib
deb-src http://mirrors.aliyun.com/debian/ jessie main non-free contrib
deb-src http://mirrors.aliyun.com/debian/ jessie-proposed-updates main non-free contrib
deb http://mirrors.163.com/debian/ jessie main non-free contrib
deb http://mirrors.163.com/debian/ jessie-updates main non-free contrib
deb http://mirrors.163.com/debian/ jessie-backports main non-free contrib
deb-src http://mirrors.163.com/debian/ jessie main non-free contrib
deb-src http://mirrors.163.com/debian/ jessie-updates main non-free contrib
deb-src http://mirrors.163.com/debian/ jessie-backports main non-free contrib
deb http://mirrors.163.com/debian-security/ jessie/updates main non-free contrib
deb-src http://mirrors.163.com/debian-security/ jessie/updates main non-free contrib

项目基础镜像Dockerfile如下

# MAINTAINER        mhq <maohangqing@c8yun.com>
# DOCKER-VERSION    1.12.3
#
# Dockerizing ydb_app: Dockerfile for building ydb_app images
#
FROM tomcat:7.0.73-jre7
MAINTAINER mhq <maohangqing@c8yun.com>

ENV JAVA_OPTS "$JAVA_OPTS -Djava.security.egd=file:/dev/./urandom"
ENV NGINX_VERSION 1.11.6-1~jessie
ENV PYTHON_VERSION 2.7.9-1
ENV SUPERVISOR_VERSION 3.3.1

ADD sources.list /etc/apt/sources.list 
RUN rm -rf /etc/apt/sources.list.d/* 

# nignx
RUN apt-key adv --keyserver hkp://pgp.mit.edu:80 --recv-keys 573BFD6B3D8FBC641079A6ABABF5BD827BD9BF62 \
  && echo "deb http://nginx.org/packages/mainline/debian/ jessie nginx" >> /etc/apt/sources.list \
  && apt-get -o Acquire::Check-Valid-Until=false update \
    && apt-get install --no-install-recommends --no-install-suggests -y \
                        ca-certificates \
                        nginx=${NGINX_VERSION} \
                        nginx-module-xslt \
                        nginx-module-geoip \
                        nginx-module-image-filter \
                        nginx-module-perl \
                        nginx-module-njs \
                        gettext-base \
    && rm -rf /var/lib/apt/lists/*

# nginx log
# RUN ln -sf /dev/stdout /var/log/nginx/access.log \
#   && ln -sf /dev/stderr /var/log/nginx/error.log

# python and pip
RUN apt-get -o Acquire::Check-Valid-Until=false update \
  && apt-get install --force-yes -y python=${PYTHON_VERSION} \
  && wget https://bootstrap.pypa.io/get-pip.py \
  && python get-pip.py \
  && rm get-pip.py

# supervisor
RUN pip install supervisor==${SUPERVISOR_VERSION} \
  && mkdir -p /var/log/supervisor \
  && mkdir -p /home/shunova

#时区问题
ENV TZ=Asia/Shanghai
RUN ln -snf /usr/share/zoneinfo/$TZ /etc/localtime && echo $TZ > /etc/timezone

# do something to start the app
ONBUILD RUN rm -rf /usr/local/tomcat/webapps/*
ONBUILD ADD app.war /home/shunova/apps/
ONBUILD COPY tomcat_server.xml /usr/local/tomcat/conf/server.xml
ONBUILD COPY nginx.conf /etc/nginx/nginx.conf
ONBUILD COPY supervisord.conf /etc/supervisord.conf



EXPOSE 80 443

CMD ["supervisord", "-n"]

构建该镜像并上传到自己的私有仓库(假如你的镜像仓库地址是registry.xxx.com:5000)

docker build -t registry.xxx.com:5000/ydb/ydb_ori:1.0 .
docker push registry.xxx.com:5000/ydb/ydb_ori:1.0

用于持续集成自动构建项目镜像的Dockerfile,分成两个镜像是避免一些重复的构建过程,加快构建时间。其实这个Dockerfile就只是FROM刚才创建的基础镜像,不过ONBUILD的语句会在这个镜像构建时执行。

#
# MAINTAINER        mhq <maohangqing@c8yun.com>
# DOCKER-VERSION    1.12.3
#
# Dockerizing ydb_app: Dockerfile for building ydb_app images
#
# these ONBUILD cmds in ydb_ori:1.0
# ONBUILD ADD app.war /home/shunova/
# ONBUILD COPY tomcat_server.xml /usr/local/tomcat/conf/server.xml
# ONBUILD COPY nginx.conf /etc/nginx/nginx.conf
# ONBUILD COPY supervisord.conf /etc/supervisord.conf

FROM registry.xxx.com:5000/ydb/ydb_ori:1.0
MAINTAINER mhq <maohangqing@c8yun.com>
二. 在jenkins中创建项目,构建测试站点的自动化部署项目
  1. 输入项目名,选择<构建一个自由风格的软件项目>。

  2. 源码管理配置

    我们的项目是用git管理的,所以选择Git。所以这么填:

    源码管理配置
  3. 构建配置
    选择 添加构建步骤-Execute shel
    填入构建脚本 例如:


    构建

REGISTRY_URL=registry.xxxx.com:5000

用构建号来生成镜像的版本号

YDB_IMAGE_TAG=${REGISTRY_URL}/ydb/ydb_app:1.0.${BUILD_NUMBER}

通过maven镜像编译

docker run --rm -v /home/docker/maven/.m2:/root/.m2 -v /home/docker/jenkins_home/workspace/${JOB_NAME}:/usr/src/mymaven -w /usr/src/mymaven maven:3.3.9-jdk-7 mvn clean install

通过Dockerfile构建新项目镜像

cp -rf ${WORKSPACE}/target/ydb-web.war ${WORKSPACE}/docker_build/app.war
cd ${WORKSPACE}/docker_build
docker build -t ${YDB_IMAGE_TAG} .

启动新版本ydb_app容器

if docker ps -a | grep -i ydb_app; then
docker rm -f ydb_app
fi

这个容器的数据库是连接同个宿主机上另外两个容器(mysql,mongo),并且项目中可以通过环境变量来获取数据库连接参数,所以这里设置了这些环境变量

docker run -d -p 80:80 -p 443:443 --link mysql:mysql --link mongo:mongo
-e YDB_MYSQL_URL=jdbc:mysql://mysql:3306/ydb.new?characterEncoding=utf-8
-e YDB_MYSQL_USER=xxx
-e YDB_MYSQL_PASSWORD=xx
-e YDB_MONGO_HOST=xx
-e YDB_MONGO_USER=xxx
-e YDB_MONGO_PASSWORD=xxx
-e JAVA_OPTS="$JAVA_OPTS -server -Xms1024m -Xmx3072m -XX:PermSize=256m -XX:MaxPermSize=512m -XX:+UseParallelOldGC -XX:+ScavengeBeforeFullGC -XX:+TieredCompilation "
-v /home/docker/apps/test_ydb_certs:/certs
--name ydb_app ${YDB_IMAGE_TAG}
```

  1. 至此,测试环境自动部署已经完成。保存返回jenkins主菜单,点击刚才新建的项目立即构建,看看是否构建成功,是否可以成功访问到自己的项目。


    立即构建
  2. 当然我们的持续集成还不够自动化,我们喜欢提交完代码后立刻就发布到测试站上。所以我们还要配置一下git的webhooks,我们项目仓库用的是gogs,所以很方便,jenkins里装个Gogs plugin插件,然后在gogs中项目设置web钩子(就是webhooks),job=后面填jenkins里创建的项目名。


    web钩子

    之后每次提交就会自动触发构建。

    如果你们用的不是gogs也可以jenkins搜索你们git仓库插件,或者配合jenkins项目配置里的构建-触发远程构建


    构建触发器
  3. OK,现在已经完成了从代码提交-项目编译构建-发布测试镜像的自动化过程,接下来只要测试通过,将通过的镜像push到仓库,然后发布到生产环境即可。当然这一过程需要自己写脚本完成。脚本内容简单点么就用docker-compose -H 到生产环境应用集群中每台服务器启动对应版本的镜像容器。如果生产环境的集群比较大,也可以搭建swarm集群。这里的内容以后有机会再谈吧。

上一篇 基于docker的持续集成(一)


欢迎来我的个人博客逛逛: https://blog.52xtg.com

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,319评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,801评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,567评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,156评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,019评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,090评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,500评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,192评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,474评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,566评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,338评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,212评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,572评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,890评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,169评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,478评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,661评论 2 335

推荐阅读更多精彩内容