经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置：技术经验 » 数据库/运维 » Linux/Shell » 查看文章
基于 Jenkins+Docker+Git 的CI流程初探
来源：cnblogs　　作者：ThreeCode　　时间：2019/3/22 8:49:37　　对本文有异议

在如今的互联网时代，随着软件开发复杂度的不断提高，软件开发和发布管理也越来越重要。目前已经形成一套标准的流程，最重要的组成部分就是持续集成（Continuous Integration，CI）及持续部署、交付（CD）。在此，我们来以一个案例初步了解 CI 流程。那么什么是 CI 呢？简单来讲，CI 就是将传统的代码合并、构建、部署、测试都集成在一起，不断地执行这个过程，并对结果进行反馈。

CI 流程设计图：

工作流程：

1. 开发人员提交代码到Git版本仓库；
2. Jenkins人工/定时触发项目构建；
3. Jenkins拉取代码、代码编码、打包镜像、推送到镜像仓库；
4. Jenkins在Docker主机创建容器并发布

主机环境规划：

docker-jenkins：    10.0.0.98

docker-git-harbor：10.0.0.99

1. 部署Git代码版本仓库

 安装：

  1. [root@docker-git-harbor ~]# yum install git -y

配置git用户：

  1. [root@docker-git-harbor ~]# useradd git
  2. [root@docker-git-harbor ~]# passwd git

创建库：

  1. [git@docker-git-harbor ~]$ mkdir tomcat-java-demo.git
  2. [git@docker-git-harbor ~]$ cd tomcat-java-demo.git/
  3. [git@docker-git-harbor tomcat-java-demo.git]$ git --bare init
  4. Initialized empty Git repository in /home/git/tomcat-java-demo.git/
  5. [git@docker-git-harbor tomcat-java-demo.git]$ ls
  6. branches  config  description  HEAD  hooks  info  objects  refs
  7. [git@docker-git-harbor tomcat-java-demo.git]$

另一台docker-jenkins访问该仓库：

  1. [root@docker-jenkins ~]# git clone git@10.0.0.99:/home/git/tomcat-java-demo.git
  2. Cloning into 'solo'...
  3. The authenticity of host '10.0.0.99 (10.0.0.99)' can't be established.
  4. ECDSA key fingerprint is SHA256:XNWQhGsAsqd84k/6OYV3xl1+mPGjtASsxeV1YVLZVas.
  5. ECDSA key fingerprint is MD5:b4:bd:16:2b:de:e7:7c:fd:c5:dd:91:75:20:ff:3e:0a.
  6. Are you sure you want to continue connecting (yes/no)? yes
  7. Warning: Permanently added '10.0.0.99' (ECDSA) to the list of known hosts.
  8. git@10.0.0.99's password: 
  9. warning: You appear to have cloned an empty repository.
  10. [root@docker-jenkins ~]# ls
  11. anaconda-ks.cfg  tomcat-java-demo.git
  12. [root@docker-jenkins ~]# ls tomcat-java-demo.git
  13. [root@docker-jenkins ~]#

 模拟生产项目，拉取github上的一个demo，并上传至本地git库

  1. [root@docker-jenkins ~]# mv tomcat-java-demo tomcat-java-demo.bak
  2. [root@docker-jenkins ~]# git clone https://github.com/dingkai163/tomcat-java-demo.git
  3. [root@docker-jenkins tomcat-java-demo]# cat .git/config 
  4. [core]
  5. 	repositoryformatversion = 0
  6. 	filemode = true
  7. 	bare = false
  8. 	logallrefupdates = true
  9. [remote "origin"]
  10. 	url = git@10.0.0.99:/home/git/tomcat-java-demo.git  # 修改为本地的git库地址
  11. 	fetch = +refs/heads/*:refs/remotes/origin/*
  12. [branch "master"]
  13. 	remote = origin
  14. 	merge = refs/heads/master
  15. [root@docker-jenkins tomcat-java-demo]# git add .
  16. [root@docker-jenkins tomcat-java-demo]# git status
  17. # On branch master
  18. nothing to commit, working directory clean
  19. [root@docker-jenkins tomcat-java-demo]# git commit -m "all"
  20. # On branch master
  21. nothing to commit, working directory clean
  22. [root@docker-jenkins tomcat-java-demo]# git push origin master
  23. git@10.0.0.99's password: 
  24. Counting objects: 229, done.
  25. Compressing objects: 100% (185/185), done.
  26. Writing objects: 100% (229/229), 4.52 MiB | 0 bytes/s, done.
  27. Total 229 (delta 25), reused 229 (delta 25)
  28. To git@10.0.0.99:/home/git/tomcat-java-demo.git
  29.  * [new branch]      master -> master
  30. [root@docker-jenkins tomcat-java-demo]#

2. jenkins环境部署 

部署jdk环境及maven

  1. [root@docker-jenkins ~]# mkdir tools
  2. [root@docker-jenkins ~]# cd tools
  3. [root@docker-jenkins tools]# rz -y
  4. [root@docker-jenkins tools]# tar zxvf jdk-8u45-linux-x64.tar.gz
  5. [root@docker-jenkins tools]# mv jdk1.8.0_45 /usr/local/jdk
  6. [root@docker-jenkins tools]# vim /etc/profile
  7. JAVA_HOME=/usr/local/jdk  
  8. PATH=$PATH:$JAVA_HOME/bin  CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar  
  9. export JAVA_HOME PATH CLASSPATH
  10. [root@docker-jenkins tools]# source /etc/profile
  11. [root@docker-jenkins tools]# java -version
  12. java version "1.8.0_45"
  13. Java(TM) SE Runtime Environment (build 1.8.0_45-b14)
  14. Java HotSpot(TM) 64-Bit Server VM (build 25.45-b02, mixed mode)
  15.  
  16. [root@docker-jenkins tools]# tar zxf apache-maven-3.5.0-bin.tar.gz 
  17. [root@docker-jenkins tools]# mv apache-maven-3.5.0 /usr/local/maven

在10.0.0.98主机安装Jenkins，下载Tomcat二进制包将war包到webapps下即可：

  1. [root@docker-jenkins tools]# wget http://mirrors.jenkins.io/war-stable/latest/jenkins.war
  2. [root@docker-jenkins tools]# wget http://mirrors.shu.edu.cn/apache/tomcat/tomcat-8/v8.5.38/bin/apache-tomcat-8.5.38.tar.gz
  3. [root@docker-jenkins tools]# tar zxf apache-tomcat-8.5.38.tar.gz 
  4. [root@docker-jenkins tools]# ls
  5. apache-tomcat-8.5.38  apache-tomcat-8.5.38.tar.gz  jdk-8u45-linux-x64.tar.gz  jenkins.war
  6. [root@docker-jenkins tools]# mv apache-tomcat-8.5.38 /usr/local/tomcat-jenkins
  7. [root@docker-jenkins tools]# ls /usr/local/tomcat-jenkins/webapps/
  8. docs  examples  host-manager  manager  ROOT
  9. [root@docker-jenkins tools]# rm -rf /usr/local/tomcat-jenkins/webapps/*
  10. [root@docker-jenkins tools]# mv jenkins.war /usr/local/tomcat-jenkins/webapps/ROOT.war
  11. [root@docker-jenkins tools]# ll /usr/local/tomcat-jenkins/webapps/
  12. total 75520
  13. -rw-r--r--. 1 root root 77330344 Mar 15 00:55 ROOT.war
  14. [root@docker-jenkins tools]# cd /usr/local/tomcat-jenkins/bin/
  15. [root@docker-jenkins bin]# ./startup.sh 
  16. Using CATALINA_BASE:   /usr/local/tomcat-jenkins
  17. Using CATALINA_HOME:   /usr/local/tomcat-jenkins
  18. Using CATALINA_TMPDIR: /usr/local/tomcat-jenkins/temp
  19. Using JRE_HOME:        /usr/local/jdk1.8
  20. Using CLASSPATH:       /usr/local/tomcat-jenkins/bin/bootstrap.jar:/usr/local/tomcat-jenkins/bin/tomcat-juli.jar
  21. Tomcat started.
  22. [root@docker-jenkins bin]#

启动后，浏览器访问http://10.0.0.98:8080/，按提示输入密码，登录即可。

3. 部署私有镜像仓库

企业级harbor镜像仓库部署：

https://www.cnblogs.com/kaye/p/10524391.html

构建Tomcat基础镜像，并推送到harbor镜像库：

  1. [root@docker-git-harbor ~]# cd tomcat
  2. [root@docker-git-harbor tomcat]# cat Dockerfile-tomcat
  3. FROM centos:7
  4. MAINTAINER www.cnblogs.com/kaye/
  5.  
  6. ENV VERSION=8.5.38
  7.  
  8. RUN yum install java-1.8.0-openjdk wget curl unzip iproute net-tools -y &&     yum clean all && \ 
  9.     rm -rf /var/cache/yum/*
  10. RUN wget http://mirrors.shu.edu.cn/apache/tomcat/tomcat-8/v${VERSION}/bin/apachetomcat-${VERSION}.tar.gz &&     tar zxf apache-tomcat-${VERSION}.tar.gz &&     mv apache-tomcat-${VERSION} /usr/local/tomcat &&     rm -rf apache-tomcat-${VERSION}.tar.gz /usr/local/tomcat/webapps/* &&     mkdir /usr/local/tomcat/webapps/test &&     echo "ok" > /usr/local/tomcat/webapps/test/status.html &&     sed -i '1a JAVA_OPTS="-Djava.security.egd=file:/dev/./urandom"' /usr/local/tomcat/bin/catalina.sh &&     ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
  11.  
  12. ENV PATH $PATH:/usr/local/tomcat/bin
  13.  
  14. EXPOSE 8080
  15. CMD ["catalina.sh", "run"]
  16. [root@docker-git-harbor tomcat]# docker build -t tomcat:v1 -f Dockerfile-tomcat .
  17. [root@docker-git-harbor tomcat]# docker tag tomcat:v1 reg.dingkai.com/library/tomcat:v1
  18. [root@docker-git-harbor tomcat]# docker login reg.dingkai.com
  19. [root@docker-git-harbor tomcat]# docker push reg.dingkai.com/library/tomcat:v1

4. Jenkins安装必要插件

由于jenkins是离线安装，所有在此需要配置一下插件下载地址：系统管理-->插件管理-->Advanced

修改下方地址，将https修改为http 再点Submit

Submit后点击Available，Check now此时我们可以看到很多可获得插件

首先搜索并安装Pipeline插件
pipeline 是一套运行于jenkins上的工作流框架，将原本独立运行于单个或者多个节点的任务连接起来，实现单个任务难以完成的复杂流程编排与
可视化。

 

再安装SCM to job 插件，同上步骤（搜索，安装）。

 5. 项目创建

创建jobs

 

选择流水线类型

 

到这里我们就开始配置Pipeline script，点击Pipeline语法，来自动生成我们需要的配置。

如下图，我们Git方式，配置Git仓库地址，再添加认证相关。

这里我们使用的是秘钥认证方式，需要将jenkins上生成的公钥发送到git服务器上，然后将jenkins上的生成的私钥内容粘贴到下图Key中，这样jenkins就可以免交互的拉取git仓库中的代码了。

  1. [root@docker-jenkins bin]# ssh-keygen 
  2. Generating public/private rsa key pair.
  3. Enter file in which to save the key (/root/.ssh/id_rsa): 
  4. Enter passphrase (empty for no passphrase): 
  5. Enter same passphrase again: 
  6. Your identification has been saved in /root/.ssh/id_rsa.
  7. Your public key has been saved in /root/.ssh/id_rsa.pub.
  8. The key fingerprint is:
  9. SHA256:1vD8XM3lDYFmrxgAbwPTLwb0fl+oEx8cFgtykpg4ODI root@docker-jenkins
  10. The key's randomart image is:
  11. +---[RSA 2048]----+
  12. |   . o==o.o ...  |
  13. |E o o +=++ .+o . |
  14. | o . . .*o o+.. .|
  15. |       oo*oo o.=o|
  16. |       .S.*o+.o =|
  17. |       . ..B.+   |
  18. |          o =    |
  19. |           .     |
  20. |                 |
  21. +----[SHA256]-----+
  22. [root@docker-jenkins bin]# cd
  23. [root@docker-jenkins ~]# 
  24. [root@docker-jenkins ~]# 
  25. [root@docker-jenkins ~]# ls .ssh/
  26. id_rsa  id_rsa.pub  known_hosts
  27. [root@docker-jenkins ~]# ssh-copy-id git@10.0.0.99
  28. /usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/root/.ssh/id_rsa.pub"
  29. /usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
  30. /usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
  31. git@10.0.0.99's password: 
  32.  
  33. Number of key(s) added: 1
  34.  
  35. Now try logging into the machine, with:   "ssh 'git@10.0.0.99'"
  36. and check to make sure that only the key(s) you wanted were added.
  37.  
  38. [root@docker-jenkins ~]#

 

 

配置完成后，我们就可以生成Pipeline脚本了。点击下方Generate Pipeline Script，然后复制方框内的内容。

编写我们所需要的Pipeline脚本如下，将其粘贴到script的拉取代码模块中，并修改分支master为${branch}，其他模块内容自行编写。

  1. node { 
  2.    // 拉取代码
  3.    stage('Git Checkout') { 
  4.        checkout([$class: 'GitSCM', branches: [[name: '${branch}']], doGenerateSubmoduleConfigurations: false, extensions: [], submoduleCfg: [], userRemoteConfigs: [[credentialsId: 'c42214eb-db1e-49fb-83c9-f78d1f4310a2', url: 'git@10.0.0.99:/home/git/tomcat-java-demo.git']]])
  5.    }
  6.    // 代码编译
  7.    stage('Maven Build') {
  8.         sh '''
  9.         export JAVA_HOME=/usr/local/jdk
  10.         /usr/local/maven/bin/mvn clean package -Dmaven.test.skip=true
  11.         '''
  12.    }
  13.    // 项目打包到镜像并推送到镜像仓库
  14.    stage('Build and Push Image') {
  15. sh '''
  16. REPOSITORY=reg.dingkai.com/library/tomcat-java-demo:${branch}
  17. cat > Dockerfile << EOF
  18. FROM reg.dingkai.com/library/tomcat:v1 
  19. MAINTAINER kai
  20. RUN rm -rf /usr/local/tomcat/webapps/*
  21. ADD target/*.war /usr/local/tomcat/webapps/ROOT.war
  22. EOF
  23. docker build -t $REPOSITORY .
  24. docker login reg.dingkai.com -u admin -p 123456
  25. docker push $REPOSITORY
  26. '''
  27.    }
  28.    // 部署到Docker主机
  29.    stage('Deploy to Docker') {
  30.         sh '''
  31.         REPOSITORY=reg.dingkai.com/library/tomcat-java-demo:${branch}
  32.         docker rm -f tomcat-java-demo |true
  33.         docker pull $REPOSITORY
  34.         docker container run -d --name tomcat-java-demo -p 88:8080 $REPOSITORY
  35.         '''
  36.    }
  37. }

在Pipeline脚本里面我们指定了一个branch参数，所以我们需要传递一个参数变量，这里我们选择参数化构建，默认值为master分支。

然后保存配置。

6. 开始构建任务

回到主界面，我们开始构建任务

可以通过Console Output输出查看jenkins构建流程

成功构建会提示： SUCCESS

我们也可以查看构建成功后的图形构建过程

通过浏览器来访问tomcat-java-demo项目：http://10.0.0.98:88/

可以看到可以正常访问，至此基于 Jenkins+Docker+Git 的CI流程已经成功部署了。

 

原文链接：http://www.cnblogs.com/kaye/p/10567043.html

 友情链接：直通硅谷 　点职佳 　北美留学生论坛

Linux/Shell热门文章

  • vdbench 数据校验测试方法
  • CentOS7一键脚本安装WireGuard
  • VMware Ubuntu 20.04 LTS 使用Qemu虚拟机u-boot启动或者配合busybox模拟ARM开发板
  • Activation of org.freedesktop.systemd1 timed out
  • vmWare 虚机文件不能启动的事故处理
  • windows远程连接centos及闪退异常解决记录
  • CentOS7防火墙放行或限制指定IP和端口（firewall）
  • jvm：jmap无法dump文件的解决办法
  • C# 控制 GPIO
  • linux中文件权限的字母含义

    • Linux/Shell推荐文章

  • 旧物利用 - 将机顶盒改造为一台Linux开发机！
  • condition字符串匹配问题
  • proxmox ve 部署双节点HA集群及glusterfs分布式文件系统
  • 入门到精通rsync和inotify
  • 解决 CentOS 7 官方 yum 仓库无法使用的最佳实践
  • Linux 提权-NFS 共享
  • 将虚拟机跑在ceph之中
  • saltStack自动化工具
  • SeaweedFS + TiKV 部署保姆级教程
  • GlusterFs分布式文件系统

    • 本站QQ群：前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

    W3xue 的所有内容仅供测试，对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
    关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接（目前9元/月）请联系QQ：27243702 沸活量
    皖ICP备17017327号-2　皖公网安备34020702000426号