Docker+Jenkins+Gitlab+Django应用部署的方法

本篇内容介绍了“Docker+Jenkins+Gitlab+Django应用部署的方法”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

万州网站制作公司哪家好,找创新互联公司!从网页设计、网站建设、微信开发、APP开发、响应式网站建设等网站项目制作,到程序开发,运营维护。创新互联公司2013年开创至今到现在10年的时间,我们拥有了丰富的建站经验和运维经验,来保证我们的工作的顺利进行。专注于网站建设就选创新互联公司

一、背景介绍

在互联网应用快速更新迭代的大背景下,传统的人工手动或简单脚本已经不能适应此变化,此时devops为我们提供了良好的解决方案,应用好ci/cd可以大大的方便我们的日常工作,自动化快速的持续集成/持续交付为我们带来了应用开放的更快速度、更好的稳定性和更强的可靠性。

二、拓扑环境

2.1 架构拓扑

Docker+Jenkins+Gitlab+Django应用部署的方法

如上图实例,简单花了下流程拓扑:

  • 当研发push本地代码到gitlab-server后,webhook自动触发jenkins构建应用

  • 在docker host上部署应用git clone来自gitlabserver源码,并启动应用

  • 前端可以放置lb来做高可用

  • 数据库连接云数据库

  • 可将日志存储在log后期投递到elk实现日志可视化

  • 构建完成邮件通知相关人员(测试或开放)

 2.2 系统软件版本


名称版本
linux系统centos7.3 64位
docker1.13
django2.0

三、安装部署

3.1 jenkins安装部署

jenkins安装部署可参考:

安装完成后添加docker目标服务器

Docker+Jenkins+Gitlab+Django应用部署的方法

配置邮件发送服务器

Docker+Jenkins+Gitlab+Django应用部署的方法

3.2 docker安装部署

docker安装部署及dockerfile编写可参考:容器docker详解

3.3 gitlab安装部署

gitlab安装在公网linux服务器运行一些命令即可,如果没有公网需要手动修改 /etc/gitlab/gitlab.rb 文件的 external_url 'http://自己的内网ip'

yum install -y libsemanage-static libsemanage-devel policycoreutils openss
h-server openssh-clients postfix
systemctl enable postfix && systemctl start postfix

wget https://mirrors.tuna.tsinghua.edu.cn/gitlab-ce/yum/el7/gitlab-ce-8.0.
0-ce.0.el7.x86_64.rpm
rpm -i gitlab-ce-8.0.0-ce.0.el7.x86_64.rpm
# 获取公网ip
publicip=$(curl http://ipv4.icanhazip.com)
# 修改
sed -i "s/gitlab-server/${publicip}/g" /etc/gitlab/gitlab.rb

gitlab-ctl reconfigure
gitlab-ctl restart

echo "username:root"
echo "password:5ivel!fe"

3.4 配置发布流程

jenkins新建构建一个自由风格的软件项目

Docker+Jenkins+Gitlab+Django应用部署的方法

利用参数化构建方便后续部署docker传入映射的源端口和release

Docker+Jenkins+Gitlab+Django应用部署的方法

源代码来自gitlab的django项目

Docker+Jenkins+Gitlab+Django应用部署的方法

利用webhook关联gitlab和jenkins

jenkins安装插件:

Docker+Jenkins+Gitlab+Django应用部署的方法

生成随机token值

Docker+Jenkins+Gitlab+Django应用部署的方法

将jenkins生成的gitlab webhook url配置到gitlab

Docker+Jenkins+Gitlab+Django应用部署的方法

Docker+Jenkins+Gitlab+Django应用部署的方法

当开发者在本地push代码后自动触发jenkins构建项目,有dockerfile内写的git pull代码,再次不用将代码由jenkins分发到docker宿主机,jenkins作为触发docker构建使用

Docker+Jenkins+Gitlab+Django应用部署的方法

配置构建完成后的邮件

邮件模版,邮件类型选择:

内容类型选择:html

邮件主题填写: 构建通知:${build_status} - ${project_name} - build # ${build_number} !

构建通知模版:





${env, var="job_name"}-第${build_number}次构建日志



 
 
  (本邮件是程序自动下发的,请勿回复!)
 
 
  

   构建结果 - ${build_status}   

         构建信息             
       
  • 项目名称 : ${project_name}
  •    
  • 构建编号 : 第${build_number}次构建
  •    
  • svn 版本: ${svn_revision}
  •    
  • 触发原因: ${cause}
  •    
  • 构建日志: ${build_url}console
  •    
  • 构建 url : ${build_url}
  •    
  • 工作目录 : ${project_url}ws
  •    
  • 项目 url : ${project_url}
  •   
         changes since last    successful build:             
       
  • 历史变更记录 : ${project_url}changes
  •   
 ${changes_since_last_success,reverse=true, format="changes for build #%n:%c",showpaths=true,changesformat="
[%a]%m
",pathformat=" %p"}          failed test results          
$failed_tests
         构建日志 (最后 100行):            ${build_log, maxlines=100}       

触发类型可根据自身需要填写,这里填写always无论成功还是失败都发送邮件

Docker+Jenkins+Gitlab+Django应用部署的方法 

查看远程docker服务器内的文件

Docker+Jenkins+Gitlab+Django应用部署的方法

django部署已经利用conda打包好了项目的python3.6的环境包自制了docker镜像

Docker+Jenkins+Gitlab+Django应用部署的方法

之前利用的是纯净的python3.6系统,在每次构建的时候利用pip安装requirements.txt的模块,但是长此以往由于环境变化很少,每次需要pip安装耗时,所以利用conda将打包好的python环境自制成定制化环境,以此来减少环境部署时间,也可以通过docker镜像制作是-v参数将本地磁盘挂载在环境内,每次构建本地的conda即可,完成快速环境部署。

查看dockerfile

from 87a69025db6a
maintainer kaliarch

# 定义docker中工作目录
env work_dir /work/
# 创建docker内工作目录
run mkdir $work_dir
# 定义映射端口

expose 80

workdir $work_dir 
run git clone http://123.xxxx.xxxxx.245/devops/go2cloud.git

# 添加启动服务脚本
add *.sh ${work_dir}

cmd `which bash` /work/start_all.sh && tail -f /work/logs/server-$(date +%f).log

查看django启动脚本

#!/bin/bash

basepath=$(cd `dirname $0`;pwd)

py_cmd=/python3/bin/python

# 服务入口文件
#main_app=${basepath}/go2cloud/manage.py 
# 迁移脚本入口文件
scripts_app=${basepath}/go2cloud/scripts/migrate_task_schdule.py
# 删除脚本入口文件
delete_app=${basepath}/go2cloud/scripts/delete_transfer_server.py

# 日志目录

log_dir=${basepath}/logs/
[ ! -d ${log_dir} ] && mkdir ${log_dir}

# 启动服务
#nohup ${py_cmd} -u ${main_app} runserver 0.0.0.0:80 >> ${log_dir}server-$(date +%f).log 2>&1 &
# 启动脚本迁移调度脚本
echo "---------$0 $(date) excute----------" >> ${log_dir}task-script-$(date +%f).log
nohup ${py_cmd} -u ${scripts_app} >> ${log_dir}script-$(date +%f).log 2>&1 &

# 启动迁移删除脚本
echo "---------$0 $(date) excute----------" >> ${log_dir}delete-script-$(date +%f).log
nohup ${py_cmd} -u ${delete_app} >> ${log_dir}delete-script-$(date +%f).log 2>&1 &

查看jenkins部署脚本

#!/bin/bash

release=$1
port=$2

basepath=$(cd `dirname $0`;pwd)

# 构建go2cloud-platform 镜像
cd /dockerwork
docker build -t go2cloud-platform-mini:$release .

imgname=$(docker images|awk -v release=$release '{if($1=="go2cloud-platform-mini" && $2==release) print $3}')

echo $imgname
# 启动容器
docker run -d -p ${port}:80 -v /testlog/:/work/logs ${imgname}

利用-v参数将日志持续化存储到docker 宿主机之上

四、测试展示

4.1 测试构建

手动构建测试

Docker+Jenkins+Gitlab+Django应用部署的方法 

4.2 查看log

Docker+Jenkins+Gitlab+Django应用部署的方法 

Docker+Jenkins+Gitlab+Django应用部署的方法 

Docker+Jenkins+Gitlab+Django应用部署的方法

4.3 查看docker容器

Docker+Jenkins+Gitlab+Django应用部署的方法

4.4 测试app

Docker+Jenkins+Gitlab+Django应用部署的方法

“Docker+Jenkins+Gitlab+Django应用部署的方法”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注创新互联网站,小编将为大家输出更多高质量的实用文章!


网站名称:Docker+Jenkins+Gitlab+Django应用部署的方法
本文地址:http://csdahua.cn/article/pdesge.html
扫二维码与项目经理沟通

我们在微信上24小时期待你的声音

解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流