🔜什么是Jenkins?🔚
Jenkins 是一款基于 Java 开发的开源 CI&CD 软件,用于自动化各种任务,包括构建、测试和部署软件。Jenkins 提供多种安装方式,提供超过 1000 个插件来满足任何项目的需要。
Jenkins 的特征:
- 开源的 Java 语言开发持续集成工具,支持持续集成,持续部署。
- 易于安装部署配置:可通过 yum 安装,或下载 war 包以及通过 docker 容器等快速实现安装部署,可方便 web 界面配置管理。
- 消息通知及测试报告:集成 RSS/E-mail 通过 RSS 发布构建结果或当构建完成时通过 e-mail 通知,生成 JUnit/TestNG 测试报告。
- 分布式构建:支持制 Jenkins 能够让多台计算机一起构建 / 测试。
- 文件识别:Jenkins 能够跟踪哪次构建生成哪些 jar, 哪次构建使用哪个版本的 jar 等。
- 丰富的插件支持:支持扩展插件,你可以开发适合自己团队使用的工具,如 git,svn,maven,docker 等。
本文通过 GitLab+Jenkins+Tomcat,构建 CI/CD 流程。
主机规划#
主机名 | ip | 所需软件 | 用途 |
---|---|---|---|
121 | 192.168.1.121 | GitLab-12.4.2 | 代码托管 |
124 | 192.168.1.124 | Jenkins、JDK-21、Maven-3.9.9、 Git、SonarQube | Jenkins 持续集成 |
125 | 192.168.1.125 | JDK-1.8、Tomcat-8.5 | 发布测试 |
服务器操作系统为 centos7.9
部署步骤#
部署 GitLab#
安装 GitLab#
安装依赖
yum -y install policycoreutils-python policycoreutils postfix
下载并安装 gitlab
#下载gitlab安装包
curl -O http://mirrors.tuna.tsinghua.edu.cn/gitlab-ce/yum/el7/gitlab-ce-12.4.2-ce.0.el7.x86_64.rpm
#安装gitlab
rpm -i gitlab-ce-12.4.2-ce.0.el7.x86_64.rpm
修改 gitlab 默认访问端口
vi /etc/gitlab/gitlab.rb
#将默认端口80修改为82
external_url "http://192.168.1.121:82"
nginx['listen_port'] = 82
重载配置,启动 gitlab
gitlab-ctl reconfigure
gitlab-ctl restart
配置防火墙策略
firewall-cmd --add-port=82/tcp --permanent
firewall-cmd --reload
firewall-cmd --list-all
在浏览器中输入http://192.168.1.121:82/, 修改 root 用户密码,并用 root 用户登录 gitlab
管理 GitLab#
(1)创建组
使用管理员 root 创建组,一个组里面可以有多个项目分支,可以将开发添加到组里面进行设置权限,不同的组就是公司不同的开发项目或者服务模块,不同的组添加不同的开发即可实现对开发设置权限的管理。
(2)创建项目
(3)创建用户
在管理中心 - 概览 - 用户中,创建一个新用户test1
,并设置密码,将用户加入刚创建的项目中。
Gitlab 用户在组里面有 5 种不同权限:
- Guest:可以创建 issue、发表评论,不能读写版本库
- Reporter:可以克隆代码,不能提交,QA、PM 可以赋予这个权限
- Developer:可以克隆代码、开发、提交、push, 普通开发可以赋予这个权限
- Maintainer:可以创建项目、添加 tag、保护分支、添加项目成员、编辑项目,核心开发可以赋予这个权限
- Owner:可以设置项目访问权限 Visibility Level、删除项目、迁移项目、管理组成员,卉发组组长可以赋予这个权限
上传项目代码#
使用 idea 创建 java 项目,并上传至 gitlab 仓库
本文中使用的 java 项目代码,源自 b 站 up 主,'' 涣沷 a 靑惷 '',原文链接为: https://www.yuque.com/huanfqc/jenkins/jenkins。
java 代码地址为: https://share.feijipan.com/s/qdEO7czl
将项目导入 idea 中,并配置 gitlab 相关设置,推送代码,具体步骤参考上面提到的原文链接。
部署 Jenkins#
安装 jenkins-2.19 * 版本时,无法正常安装中文插件。本文使用的 jdk 为 jdk-21、jenkins 为 2.492.3,且均为 rpm 方式安装
(1)安装 jdk
yum install -y wget && wget https://download.oracle.com/java/21/latest/jdk-21_linux-x64_bin.rpm
rpm -ivh jdk-21_linux-x64_bin.rpm
#查看版本
java -version
(2)安装 Jenkins
#下载jenkins
curl -O https://mirrors.tuna.tsinghua.edu.cn/jenkins/redhat-stable/jenkins-2.492.3-1.1.noarch.rpm
#安装
rpm -ivh jenkins-2.492.3-1.1.noarch.rpm
(3)修改 jenkins 的配置文件
vi /etc/sysconfig/jenkins
#修改默认用户为root
JENKINS_USER="root"
#修改默认端口为8888
JENKINS_PORT=8888
(4)配置防火墙策略,并启动 jenkins
firewall-cmd --add-port=8888/tcp --permanent
firewall-cmd --reload
firewall-cmd --list-all
#启动jenkins
systemctl daemon-reload
systemctl start jenkins
systemctl enable jenkins
(5)查看 jenkins 的 admin 初始化密码
cat /var/lib/jenkins/secrets/initialAdminPassword
(6)在浏览器中输入http://192.168.1.124:8888 / 访问,输入 admin 初始化密码。
(7)点击选择插件来安装
,选择无
,跳过安装插件,为之后重新配置下载插件的国内源做准备。
(8)按引导完成 jenkins 的安装。
配置国内插件源#
(1)选择左侧边栏中的 Jenkins -Manage Jenkins-Manage Plugins,选择 Available,等待插件相关文件的加载。
(2)进入插件的目录,将地址修改为国内源
cd /var/lib/jenkins/updates && ll
sed -i 's|http://updates.jenkins-ci.org/download|https://mirrors.tuna.tsinghua.edu.cn/jenkins|g' default.json
sed -i 's|http://www.google.com|https://www.baidu.com|g' default.json
(3)访问 jenkins,选择左侧边栏中的 Jenkins -Manage Jenkins-Manage Plugins,选择 Advanced,把 Update Site 改为https://mirrors.tuna.tsinghua.edu.cn/jenkins/updates/update-center.json
(或者https://mirrors.huaweicloud.com/jenkins/updates/update-center.json
),保存,在浏览器中输入http://192.168.1.124:8888/restart
,点击并重启 jenkins。
设置中文#
安装中文插件,选择左侧边栏中的 Jenkins -Manage Jenkins-Manage Plugins,选择 Advanced,搜索chinese
,勾选插件,并点击下载并重启。
管理用户权限#
安装Role-based Authorization Strategy
插件,管理用户权限。安装完成后,(新版 jenkins)选择 Manage Jenkins-Security,授权策略选择 Role-Based Strategy。选择 Manage Jenkins-Manage and Assign Roles,进行角色的创建和分配管理。
凭证管理#
(1)安装Credentials Binding
插件,进行凭证管理。
凭证类型:
- Username with password:用户名和密码
- SSH Username with private key:使用 ssH 用户和密钥
- Secret file:需要保密的文本文件,使用时 Jenkins 会将文件复制到一个临时目录中,再将文件路径设置到一个变量中,等构建结束后,所复制的 Secret file 就会被删除。
- Secret text:需要保存的一个加密的文本串,如钉钉机器人或 Github 的 api token
- Certificate:通过上传证书文件的方式
常用的凭证类型有:Username with password (用户密码) 和 SSH Username with private key (SSH 密钥)
(2)安装git
插件,并在服务器上下载 git。
yum -y install git
密码凭证#
(1)创建 jenkins 项目和密码凭证。选择 Manage Jenkins-Credentials,点击全局
-Add Credentials
,添加 gitlab 用户 test1 的用户名和密码,创建凭证。
(2)创建一个新任务test01
,点击配置,设置源码管理为 Git,填写 gitlab 的项目仓库地址(http 开头),选择 test1 的凭证,保存即可。
(3)进入 test01,点击 Build Now,等待任务构建完成后,点击控制台输出查看详细信息。
SSH 密钥凭证#
(1)在 jenkins 服务器中创建 SSH 密钥。
ssh-keygen -t rsa
#查看公钥内容
cat ~/.ssh/id_rsa.pub
# 测试 SSH 连接
ssh -T [email protected]
# 查看是否有gitlab主机,确保有该主机,否则使用ssh凭证时会报错
cat ~/.ssh/known_hosts
(2)使用管理员账户登录 Gitlab,选择设置
-SSH密钥
,填入 SSH 公钥内容,并保存。
(3)在服务器中使用命令cat ~/.ssh/id_rsa
,查看私钥内容。在 jenkins 中创建 SSH 密钥凭证,输入用户名 root 和 SSH 私钥内容,保存即可。
(4)创建一个新任务test02
,点击配置,设置源码管理为 Git,填写 gitlab 的项目仓库地址(git 开头),选择 SSH 凭证,保存即可。
(5)进入 test02,点击 Build Now,等待任务构建完成后,点击控制台输出查看详细信息。
安装 Maven#
(1)下载安装 Maven
curl -O https://mirrors.tuna.tsinghua.edu.cn/apache/maven/maven-3/3.9.9/binaries/apache-maven-3.9.9-bin.tar.gz
#创建存储目录
mkdir -p /opt/maven
tar -vxzf apache-maven-3.9.9-bin.tar.gz -C /opt/maven/
#配置环境变量,使环境生效
echo "
export MAVEN_HOME=/opt/maven/apache-maven-3.9.9
export PATH=\$PATH:\$MAVEN_HOME/bin" >> /etc/profile
source /etc/profile
#查看maven版本
mvn -v
(2)配置 jenkins 与 maven 关联
在 Manage Jenkins-Tools 中配置JDK安装
和Maven安装
,配置其对应安装路径。
在 Manage Jenkins-System - 全局属性中,新增 3 个Environment variables
。
(3)修改 Maven 的本地仓库位置
#创建本地仓库
mkdir -p /data/jenkins/repo
#修改Maven的配置文件
vi /opt/maven/apache-maven-3.9.9/conf/settings.xml
#将<localRepository>/path/to/local/repo</localRepository>修改为
<localRepository>/data/jenkins/repo</localRepository>
#在<id>maven-default-http-blocker</id>所在的镜像后添加阿里云镜像源
# <mirror>
# <id>maven-default-http-blocker</id>
# <mirrorOf>external:http:*</mirrorOf>
# <name>Pseudo repository to mirror external repositories initially using HTTP.</name>
# <url>http://0.0.0.0/</url>
# <blocked>true</blocked>
# </mirror>
<mirror>
<id>alimaven</id>
<name>aliyun maven</name>
<url>http://maven.aliyun.com/nexus/content/groups/public</url>
<mirrorOf>central</mirrorOf>
</mirror>
(4)测试 Maven 配置
在 jenkins 中选择任务test02
,选择配置 - Environment-Build Steps,选择 Execute shell 中输入命令mvn clean package
, 保存后,点击 Build Now,等待任务构建完成后,点击控制台输出查看详细信息。
此时服务器上的 test02 任务目录中会新增一个target
目录。
[root@124 workspace]# ls
test01 test01@tmp test02 test02@tmp
[root@124 workspace]# cd test01
[root@124 test01]# ls
pom.xml src
[root@124 test01]# cd ..
[root@124 workspace]# ls
test01 test01@tmp test02 test02@tmp
[root@124 workspace]# cd test02
[root@124 test02]# ls
pom.xml src target
[root@124 test02]# pwd
/var/lib/jenkins/workspace/test02
[root@124 test02]#
安装 Tomcat#
下载 jdk-1.8 和 tomcat-9
yum install -y java-1.8.0-openjdk*
curl -O https://mirrors.huaweicloud.com/apache/tomcat/tomcat-9/v9.0.104/bin/apache-tomcat-9.0.104.tar.gz
#创建存储目录
mkdir -p /opt/tomcat/
#解压
tar -zxvf apache-tomcat-9.0.104.tar.gz -C /opt/tomcat/
#启动tomcat
/opt/tomcat/apache-tomcat-9.0.104/bin/startup.sh
配置防火墙策略
firewall-cmd --add-port=8080/tcp --permanent
firewall-cmd --reload
firewall-cmd --list-all
在浏览器中访问http://192.168.1.125:8080/
。
配置 tomcat 的用户角色
vi /opt/tomcat/apache-tomcat-9.0.104/conf/tomcat-users.xml
<!--在tomcat-users标签下添加以下内容 -->
<role rolename="tomcat"/>
<role rolename="role1"/>
<role rolename="manager-script"/>
<role rolename="manager-gui"/>
<role rolename="manager-status"/>
<role rolename="admin-gui"/>
<role rolename="admin-script"/>
<user username="tomcat" password="tomcat" roles="manager-gui,manager-script,tomcat,admin-gui,admin-script"/>
配置 tomcat 的远程访问地址范围
vi /opt/tomcat/apache-tomcat-9.0.104/webapps/manager/META-INF/context.xml
<!-- 将以下内容注释-->
<Valve className="org.apache.catalina.valves.RemoteAddrValve"
allow="127\.\d+\.\d+\.\d+|::1|0:0:0:0:0:0:0:1" />
重启 tomcat,输入用户名和密码进行访问。
#停止运行
/opt/tomcat/apache-tomcat-9.0.104/bin/shutdown.sh
#启动
/opt/tomcat/apache-tomcat-9.0.104/bin/startup.sh
Jenkins 构建项目#
Jenkins 中自动构建项目的类型有很多,常用的有以下三种:
- 自由风格软件项目 (FreeStyle Project)
- Maven 项目 (Maven Project)
- 流水线项目 (Pipeline Project)
本文构建项目时使用的 war 包,源自 b 站 up 主,'' 涣沷 a 靑惷 '',原文链接为: https://www.yuque.com/huanfqc/jenkins/jenkins。
war 包项目代码地址为:https://share.feijipan.com/s/BWEO9Jad,war 包构建具体过程见原文。
Jenkins 构建自由风格项目#
(1)安装 Deploy to container
插件
(2)新建项目 freestyle_demo,配置并拉取 gitlab 中 test_war 代码,该过程除包含步骤《部署 Jenkins》的过程外,还需进行构建后操作,具体如下图。
(3)配置保存后,,点击 Build Now,等待任务构建完成后,访问 tomcat,可以看到/websocketChat-1.0-SNAPSHOT
虚拟目录已出现。
Jenkins 构建 Maven 项目#
(1)安装Maven Integration
插件
(2)新建项目 maven-demo,配置并拉取 gitlab 中 test_war 代码,该过程除包含步骤《Jenkins 构建自由风格项目》的过程外,还需要在 Build 时进行修改,具体如下图。
构建时出现报错可将之前配置的阿里云镜像地址改为 https
(3)配置保存后,点击 Build Now,等待任务构建完成后,访问 tomcat,可以看到/websocketChat-1.0-SNAPSHOT
虚拟目录已出现。
Jenkins 构建 Pipeline 流水线项目#
Pipeline, 简单来说,就是一套运行在 Jenkins 上的工作流框架,将原来独立运行于单个或者多个节点的任务连接起来,实现单个任务难以完成的复杂流程编排和可视化的工作。
如何创建 Jenkins Pipeline 呢?
-
Pipeline 脚本是由 Groovy 语言实现的。
-
Pipeline 支持两种语法:Declarative (声明式) 和 Scripted Pipeline (脚本式) 语法。
-
Pipeline 也有两种创建方法:可以直接在 Jenkins 的 Web Ul 界面中输入脚本;也可以通过创建一个 Jenkinsfile 脚本文件放入项目源码库中(一般我们都推荐在 Jenkins 中直接从源代码控制 (SCM) 中直接载入 Jenkinsfile Pipeline 这种方法)。
在 Jenkins 的 Web Ul 中创建 Pipeline 脚本发布项目#
(1)安装 Pipeline 插件
(2)新建任务 Pipeline-demo,使用声明式语法,在 Jenkins 的 Web Ul 里创建 Pipeline 脚本;实现从代码拉取、编译构建、到发布项目。
在 Pipeline-demo 的配置界面,选择构建触发器 - 流水线,选择一个脚本模板 Hello Word。
点击流水线语法
,在片段生成器中选择checkout:Check out from version control
,按引导填写项目地址和凭证,生成流水线脚本,将拉取代码脚本粘贴到修改后的模板中。
在片段生成器中选择sh:Shell Script
,填写编译命令,生成流水线脚本,将脚本粘贴到修改后的模板中。
在片段生成器中选择deploy:Deploy war/ear to a container
,按引导填写,生成流水线脚本,将脚本粘贴到修改后的模板中。
pipeline {
agent any
stages {
stage('拉取代码') {
steps {
checkout scmGit(branches: [[name: '*/master']], extensions: [], userRemoteConfigs: [[credentialsId: 'fbf87557-40b6-468a-91c5-2cfa1b2e33e8', url: 'http://192.168.1.121:82/test/test_war_demo.git']])
}
}
stage('编译构建') {
steps {
sh 'mvn clean package'
}
}
stage('发布项目') {
steps {
deploy adapters: [tomcat9(credentialsId: '4d9b76aa-078c-462b-81f1-33fe1d9c971c', path: '', url: 'http://192.168.1.125:8080/')], contextPath: null, war: 'target/*.war'
}
}
}
}
(3)配置保存后,点击 Build Now,等待任务构建完成后,访问 tomcat,可以看到/websocketChat-1.0-SNAPSHOT
虚拟目录已出现。
使用 Jenkinsfile 脚本发布项目#
(1)在 idea 中的项目目录下,选择 New-File,创建 Jenkinsfile 文件,将 Pipeline 脚本内容粘贴进去,随代码一起发布到项目仓库中。
(2)在任务 Pipeline-demo 的配置界面,选择构建触发器 - 流水线,定义内容选择Pipeline script from SCM
-GIt
,填写项目地址和凭证,脚本路径填写Jenkinsfile
。
(3)配置保存后,点击 Build Now,等待任务构建完成后,访问 tomcat,可以看到/websocketChat-1.0-SNAPSHOT
虚拟目录已出现。
常用构建触发器#
Jenkins 内置 4 种构建触发器:
-
触发远程构建
-
其他工程构建后触发 (Build after other projects are build)
-
定时构建 (Build periodically)
定时字符串从左往右分别为:分 时 日 月 周
定时表达式的例子:
每 30 分钟构建一次:H 代表形参
H/30 * * * *
每 2 个小时构建一次:
H H/2 * * *
每天的 8 点,12 点,22 点,一天构建 3 次:(多个时间点中间用逗号隔开)
0 8,12,22 * * *
-
轮询 SCM (Poll SCM)
轮询 SCM, 是指定时扫描本地代码仓库的代码是否有变更,如果代码有变更就触发项目构建。
(1)触发远程构建
在任务 Pipeline-demo 的配置界面,选择构建触发器
-触发远程构建 (例如,使用脚本)
,自定义身份验证令牌为test
,保存配置。在浏览器中访问:
jenkins 地址 /job/Pipeline-demo/build?token=
TOKEN_NAME
http://192.168.1.124:8888/job/Pipeline-demo/build?token=test ,返回查看任务状态已经开始构建。
(2)其他工程构建后触发 (Build after other projects are build)
当需要多个任务先后执行时可用。比如若希望执行freestyle_demo
任务后,再执行Pipeline-demo
,在任务 Pipeline-demo 的配置界面,选择构建触发器
-Build after other projects are built
,中输入freestyle_demo
,选择只有构建稳定时触发
,保存配置。freestyle_demo 任务构建完成后,freestyle_demo 开始进行构建。
(3)定时构建 (Build periodically)
在任务 Pipeline-demo 的配置界面,选择构建触发器
-Build periodically
,设置*/1 * * * *
(一分钟一次),保存配置,freestyle_demo 任务会每分钟构建一次。
(4)轮询 SCM (Poll SCM)
轮询 SCM 也要设置时间周期,不过与定时构建不同的是,如果在时间周期内代码仓库未发生变化,任务构建就不会进行。比如:在任务 Pipeline-demo 的配置界面,选择构建触发器
-Poll SCM
,设置*/1 * * * *
(一分钟一次),保存配置。如果在之后的一分钟内代码变更,Pipeline-demo 任务会进行构建,反之,直到代码变更后的那一分钟周期内进行构建。
Git hook 构建触发器(常用)#
当 GitLab 出现代码变更时,会提交构建请求到 Jenkins,Jenkins 收到请求后,触发构建。
(1)安装 GitLab 插件和 GitLab Hook 插件(新版本自带 GitLab Hook 插件)
(2)在 Jenkins 的任务 Pipeline-demo 的配置界面,选择构建触发器
-Build when a change is pushed to GitLab. GitLab webhook URL: http://192.168.1.124:8888/project/Pipeline-demo
,会出现以下表格中的选项,默认选择即可。
事件类型 | 触发条件 |
---|---|
Push Events | 代码推送到分支或标签,包括新分支创建。 |
Push on Branch Delete | 分支被删除时。 |
Opened Merge Request | 创建新的合并请求时触发。 |
New Commits in MR | 向已存在的 MR 推送新提交时触发(更新 MR)。 |
Accepted (Merged) MR | 合并请求被合并到目标分支(如main )时触发。 |
Closed MR | 合并请求被关闭(未合并)时触发。 |
(3)在 Jenkins 中选择 Manage Jenkins-System-GitLab 中,取消勾选Enable authentication for '/project' end-point
,保存设置。
(4)在 GitLab 的管理员账户中选择管理中心 - 设置 - 网络 - 外发请求中勾选Allow requests to the local network from web hooks and services
,保存配置。
(5)在 GitLab 的项目仓库中选择设置 - 集成,输入 webhook URL,选择默认配置,保存。在生成的 Webhook 右侧,选择 Test-Push events,显示Hook executed successfully: HTTP 200
,即为成功。
参数化构建#
(1)在源码中创建分支 v1,并修改 Jenkinsfile 脚本中的分支名称,提交代码到 gitlab。
修改前: checkout scmGit (branches: [[name: '*/master']]
修改后:checkout scmGit (branches: [[name: '*/${branch}']]
(2)在 Jenkins 的任务 Pipeline-demo 的配置界面,选择This project is parameterized
-String Parameter
,具体设置如下图。
(3)保存设置,在任务 Pipeline-demo 界面选择Build with Parameters
,输入分支的名称,点击 Build,进行构建。
配置邮件服务器#
(1)安装 Email Extension TemplateVersion 插件
(2)选择 Manage Jenkins-Credentials,点击全局
-Add Credentials
,创建邮件服务器的密码凭证,账户为邮箱地址,密码为获取的邮箱授权码。
(3)选择System
,在Jenkins Location``-系统管理员邮件地址
出输入注册邮箱,在Extended E-mail Notification
处,输入注册邮箱和端口,点击高级
,选择密码凭证,勾选Use SSL
,在Default user e-mail suffix
中邮箱后缀,Default Content Type
选择HTML (text/html)
,Default Recipients
输入注册邮箱,在邮件通知部分输入 SMTP 服务器和用户默认邮件后缀,点击高级完善信息,勾选通过发送测试邮件测试配置
测试邮件服务器。
(4)构建邮件服务器模板
在项目根目录下创建 email.html 模板
<!DOCTYPE html>
<html>
<head>
<meta charset="UTF-8">
<title>${ENV, var="JOB_NAME"}-第${BUILD_NUMBER}次构建日志</title>
</head>
<body leftmargin="8" marginwidth="0" topmargin="8" marginheight="4"
offset="0">
<table width="95%" cellpadding="0" cellspacing="0"
style="font-size: 11pt; font-family: Tahoma, Arial, Helvetica, sans-serif">
<tr>
<td>(本邮件是程序自动下发的,请勿回复!)</td>
</tr>
<tr>
<td><h2>
<font color="#0000FF">构建结果 - ${BUILD_STATUS}</font>
</h2></td>
</tr>
<tr>
<td><br />
<b><font color="#0B610B">构建信息</font></b>
<hr size="2" width="100%" align="center" /></td>
</tr>
<tr>
<td>
<ul>
<li>项目名称 : ${PROJECT_NAME}</li>
<li>构建编号 : 第${BUILD_NUMBER}次构建</li>
<li>触发原因: ${CAUSE}</li>
<li>构建日志: <a href="${BUILD_URL}console">${BUILD_URL}console</a></li>
<li>构建 Url : <a href="${BUILD_URL}">${BUILD_URL}</a></li>
<li>工作目录 : <a href="${PROJECT_URL}ws">${PROJECT_URL}ws</a></li>
<li>项目 Url : <a href="${PROJECT_URL}">${PROJECT_URL}</a></li>
</ul>
</td>
</tr>
<tr>
<td><b><font color="#0B610B">Changes Since Last
Successful Build:</font></b>
<hr size="2" width="100%" align="center" /></td>
</tr>
<tr>
<td>
<ul>
<li>历史变更记录 : <a href="${PROJECT_URL}changes">${PROJECT_URL}changes</a></li>
</ul> ${CHANGES_SINCE_LAST_SUCCESS,reverse=true, format="Changes for Build #%n:<br />%c<br />",showPaths=true,changesFormat="<pre>[%a]<br />%m</pre>",pathFormat=" %p"}
</td>
</tr>
<tr>
<td><b>Failed Test Results</b>
<hr size="2" width="100%" align="center" /></td>
</tr>
<tr>
<td><pre
style="font-size: 11pt; font-family: Tahoma, Arial, Helvetica, sans-serif">$FAILED_TESTS</pre>
<br /></td>
</tr>
<tr>
<td><b><font color="#0B610B">构建日志 (最后 100行):</font></b>
<hr size="2" width="100%" align="center" /></td>
</tr>
<tr>
<td><textarea cols="80" rows="30" readonly="readonly"
style="font-family: Courier New">${BUILD_LOG, maxLines=100}</textarea>
</td>
</tr>
</table>
</body>
</html>
(5)修改 Jenkinsfile 文件,添加与 stages 同级的 post 部分,添加构建后发送邮件
pipeline {
agent any
stages {
stage('拉取代码') {
steps {
checkout scmGit(branches: [[name: '*/master']], extensions: [], userRemoteConfigs: [[credentialsId: 'fbf87557-40b6-468a-91c5-2cfa1b2e33e8', url: 'http://192.168.1.121:82/test/test_war_demo.git']])
}
}
stage('编译构建') {
steps {
sh 'mvn clean package'
}
}
stage('发布项目') {
steps {
deploy adapters: [tomcat9(credentialsId: '4d9b76aa-078c-462b-81f1-33fe1d9c971c', path: '', url: 'http://192.168.1.125:8080/')], contextPath: null, war: 'target/*.war'
}
}
}
post {
always {
emailext(
subject: '构建通知:${PROJECT_NAME} - Build # ${BUILD_NUMBER} - ${BUILD_STATUS}!',
body: '${FILE,path="email.html"}',
to: '邮箱地址1,邮箱地址2'
)
}
}
}
安装 SonarQube#
Jenkins 集成 SonarQube 进行代码审查。
SonarQube7.9 开始不再支持 mysql,SonarQube7.8 安装支持 mysql >=5.6 && <8.0
(1)安装 SonarQube 前需要安装 mysql 数据库
#配置mysql5.7的yum源
vi /etc/yum.repos.d/mysql-community.repo
[mysql-connectors-community]
name=MySQL Connectors Community
baseurl=https://mirrors.tuna.tsinghua.edu.cn/mysql/yum/mysql-connectors-community-el7-$basearch/
enabled=1
gpgcheck=1
gpgkey=https://repo.mysql.com/RPM-GPG-KEY-mysql-2022
[mysql-tools-community]
name=MySQL Tools Community
baseurl=https://mirrors.tuna.tsinghua.edu.cn/mysql/yum/mysql-tools-community-el7-$basearch/
enabled=1
gpgcheck=1
gpgkey=https://repo.mysql.com/RPM-GPG-KEY-mysql-2022
[mysql-5.7-community]
name=MySQL 5.7 Community Server
baseurl=https://mirrors.tuna.tsinghua.edu.cn/mysql/yum/mysql-5.7-community-el7-$basearch/
enabled=1
gpgcheck=1
gpgkey=https://repo.mysql.com/RPM-GPG-KEY-mysql-2022
#安装mysql
yum -y install mysql-server
# 查看版本
mysql -V
systemctl start mysqld
systemctl enable mysqld
# 查看MySQL的初始密码
grep "password" /var/log/mysqld.log
# MySQL的安全性配置
mysql_secure_installation
#按引导配置完后,登录并创建数据库
mysql -uroot -p
create database sonar;
#查看数据库
show databases;
(2)安装 SonarQube
#配置系统相关参数
echo "vm.max_map_count=524288
fs.file-max=131072" >> /etc/sysctl.conf
sysctl -p
#下载依赖工具
yum install -y unzip
wget https://binaries.sonarsource.com/Distribution/sonarqube/sonarqube-7.8.zip
mkdir -p /opt/sonar
unzip -q sonarqube-7.8.zip -d /opt/sonar
#创建用户
useradd sonar
passwd sonar
#修改sonarqube文件权限
chown -R sonar:sonar /opt/sonar/sonarqube-7.8
(3)修改conf
目录下的sonar.properties
配置文件
sonar.jdbc.username=root
sonar.jdbc.password=数据库密码
sonar.jdbc.url=jdbc:mysql://localhost:3306/sonar?useUnicode=true&characterEncoding=utf8&rewriteBatchedStatements=true&useConfigs=maxPerformance&useSSL=false
(4)修改conf
目录下wrapper.conf
的 jdk-1.8 的路径
wrapper.java.command=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.412.b08-1.el7_9.x86_64/bin/java
(5)进入bin/linux-x86-64/
目录,使用 sonar 用户启动 sonarqube
su sonar
./sonar.sh start
#查看启动日志
tail ../../logs/sonar.log
使用默认账户登录,账号密码都是 admin
(6)登录 sonarqube 后,选择 Administration
- Security
- Global Permissions
,为 admin 勾选 Administer System
、Administer
、Execute Analysis
、Create
权限。单击右上角头像下拉框,选择 My Account
- Security
,随意填写 token 名称,完成 Token 的创建。
配置 Jenkins 与 sonarqube 集成#
(1)在 Jenkins 上安装SonarQube Scanner
插件,安装完成后,选择Manage Jenkins
-Tools
-SonarQube Scanner 安装
,点击新增SonarQube Scanner
,输入名称,版本选择SonarQube Scanner 4.2.0.1873
,点击保存。
SonarQube 7.8 对应 Sonar-Scanner 4.2
SonarQube 8.9 LTS 对应 Sonar-Scanner 4.6
(2)在 Jenkins 中配置 SonarQube 的 token 凭证。选择类型为Secret text
,输入 token,点击创建。
(3)在 Jenkins 中选择 System-SonarQube installations,点击Add SonarQube
,输入 SonarQube 的地址、选择创建的 token 凭证,保存集成 SonarQube。
非流水线任务添加 SonarQube 代码审查#
在 freestyle_demo 任务中选择配置 - Build Steps,点击增加构建步骤,选择Execute SonarQube Scanner
,选择 JDK,输入分析内容,保存配置后,点击 Build Now,等待任务构建完成。在 SonarQube 里查看代码分析结果。
sonar.projectKey=websocketChat
sonar.projectName=websocketChat
sonar.projectVersion=1.0
sonar.sources=.
sonar.java.binaries=./target/classes
sonar.exclusions=**/test/**,**/target/**
sonar.java.source=1.8
sonar.java.target=1.8
sonar.sourceEncoding=UTF-8
流水线任务添加 SonarQube 代码审查#
(1)在项目根目录下,创建 sonar-project.properties,写入以下内容。
sonar.projectKey=Pipeline-demo
sonar.projectName=Pipeline-demo
sonar.projectVersion=1.0
sonar.sources=.
sonar.java.binaries=./target/classes
sonar.exclusions=**/test/**,**/target/**
sonar.java.source=1.8
sonar.java.target=1.8
sonar.sourceEncoding=UTF-8
(2)在 Jenkinsfile 的 stages 前,引入在 Jenkins 中安装的 SonarQube Scanner 作为预置环境变量,之后在拉取代码步骤后,添加审查代码的步骤。
pipeline {
agent any
environment {
//引入在Jenkins中安装的SonarQube Scanner
scannerHome = tool 'sonar-scanner-jenkins'
}
stages {
stage('拉取代码') {
steps {
checkout scmGit(branches: [[name: '*/master']], extensions: [], userRemoteConfigs: [[credentialsId: 'fbf87557-40b6-468a-91c5-2cfa1b2e33e8', url: 'http://192.168.1.121:82/test/test_war_demo.git']])
}
}
stage('审查代码') {
steps {
//引入在Jenkins中配置的SonarQube服务器设置
withSonarQubeEnv('SonarQube-jenkins') {
sh '${scannerHome}/bin/sonar-scanner'
}
}
}
stage('编译构建') {
steps {
sh 'mvn clean package'
}
}
stage('发布项目') {
steps {
deploy adapters: [tomcat9(credentialsId: '4d9b76aa-078c-462b-81f1-33fe1d9c971c', path: '', url: 'http://192.168.1.125:8080/')], contextPath: null, war: 'target/*.war'
}
}
}
post {
always {
emailext(
subject: '构建通知:${PROJECT_NAME} - Build # ${BUILD_NUMBER} - ${BUILD_STATUS}!',
body: '${FILE,path="email.html"}',
to: '邮箱地址'
)
}
}
}
(3)代码完成变更后,在流水线任务执行完成,在 SonarQube 里查看代码分析结果。
应用案例#
该应用案例参考来源于 b 站 up 主,'' 涣沷 a 靑惷 '',原文链接为: https://www.yuque.com/huanfqc/jenkins/jenkins。
使用 Jenkins+GitLab+Docker+SonarQube,在 192.168.1.125 上部署若依的 springboot 前后端分离项目。
环境准备#
设置 Jenkins 服务器免密登录 192.168.1.125
ssh-copy-id -i /root/.ssh/id_rsa.pub [email protected]
安装 docker#
bash <(curl -sSL https://linuxmirrors.cn/docker.sh)
#修改镜像源和默认配置文件路径
vi /etc/docker/daemon.json
{
"data-root": "/data/dockerData",
"registry-mirrors": [
"https://docker.1ms.run",
"https://docker.xuanyuan.me"
]
}
#启动docker
systemctl start docker
systemctl enable docker
获取并修改源码配置#
(1)拉取若依项目源码到本地,并将 ruoyi-ui 目录与 RuoYi-Vue 项目放置在同一级
git clone https://gitee.com/y_project/RuoYi-Vue.git
(2)修改ruoyi-ui
目录中的vue.config.js
文件,将localhost
修改为部署主机的 ip,即 192.168.1.125。
#修改前
const baseUrl = 'http://localhost:8080' // 后端接口
#修改后
const baseUrl = 'http://192.168.1.125:8080' // 后端接口
(3)修改RuoYi-Vue\ruoyi-admin\src\main\resources\application.yml
文件,将 redis 配置的 ip 改为 192.168.1.125。
# redis 配置
redis:
# 地址
host: 192.168.1.125
(4)修改RuoYi-Vue\ruoyi-admin\src\main\resources\application-druid.yml
文件,将 mysql 的链接地址改为 192.168.1.125。
# 主库数据源
master:
url: jdbc:mysql://192.168.1.125:3306/ry-vue?useUnicode=true&characterEncoding=utf8&zeroDateTimeBehavior=convertToNull&useSSL=true&serverTimezone=GMT%2B8
(5)在 ruoyi-ui 目录下,创建 sonar-project.properties,写入以下内容,添加 SonarQube 代码审查
sonar.projectKey=ruoyi-ui
sonar.projectName=ruoyi-ui
sonar.projectVersion=1.0
sonar.sources=.
sonar.sourceEncoding=UTF-8
(6)在 ruoyi-ui 目录下创建前端项目的 Jenkinsfile 文件
pipeline {
agent any
environment {
//引入在Jenkins中安装的SonarQube Scanner
scannerHome = tool 'sonar-scanner-jenkins'
}
stages {
stage('拉取代码') {
steps {
checkout scmGit(branches: [[name: '*/master']], extensions: [], userRemoteConfigs: [[credentialsId: 'fbf87557-40b6-468a-91c5-2cfa1b2e33e8', url: 'http://192.168.1.121:82/test/ruoyi-ui.git']])
}
}
stage('审查代码') {
steps {
//引入在Jenkins中配置的SonarQube服务器设置
withSonarQubeEnv('SonarQube-jenkins') {
sh '${scannerHome}/bin/sonar-scanner'
}
}
}
stage('打包,部署网站') {
steps {
script {
nodejs(nodeJSInstallationName: 'nodejs14') {
sh '''
npm install
# 构建生产环境
npm run build:prod
'''
}
// 将构建产物部署到 Nginx 容器挂载的目录
sh '''
# 将整个 dist 目录复制到挂载目录
scp -r dist 192.168.1.125:/data/ruoyi/nginx/html/
ssh 192.168.1.125 docker restart nginx
'''
}
}
}
}
}
7)在 RuoYi-Vue 目录下,创建 sonar-project.properties,写入以下内容,添加 SonarQube 代码审查
sonar.projectKey=ruoyi-api
sonar.projectName=ruoyi-api
sonar.projectVersion=1.0
sonar.sources=.
sonar.java.binaries=./ruoyi-admin/target/classes
sonar.exclusions=**/test/**,**/target/**
sonar.java.source=1.8
sonar.java.target=1.8
sonar.sourceEncoding=UTF-8
(8)在 RuoYi-Vue 目录下创建后端项目的 Jenkinsfile 文件
pipeline {
agent any
environment {
//引入在Jenkins中安装的SonarQube Scanner
scannerHome = tool 'sonar-scanner-jenkins'
}
stages {
stage('拉取代码') {
steps {
checkout scmGit(branches: [[name: '*/master']], extensions: [], userRemoteConfigs: [[credentialsId: 'fbf87557-40b6-468a-91c5-2cfa1b2e33e8', url: 'http://192.168.1.121:82/test/ruoyi-api.git']])
}
}
stage('编译构建') {
steps {
sh 'mvn clean package'
}
}
stage('审查代码') {
steps {
//引入在Jenkins中配置的SonarQube服务器设置
withSonarQubeEnv('SonarQube-jenkins') {
sh '${scannerHome}/bin/sonar-scanner'
}
}
}
stage('发布项目') {
steps {
script {
sh '''
ssh 192.168.1.125 "mkdir -p /data/ruoyi-api"
scp ruoyi-admin/target/*.jar 192.168.1.125:/data/ruoyi-api/ruoyi.jar
'''
// 创建Dockerfile
sh '''
ssh 192.168.1.125 'cat > /data/ruoyi-api/Dockerfile <<-EOF
FROM openjdk:8
MAINTAINER xie
VOLUME /tmp
ADD ruoyi.jar ruoyi.jar
ENTRYPOINT ["java","-jar","/ruoyi.jar"]
EXPOSE 8080
EOF'
'''
// 构建镜像
sh '''
ssh 192.168.1.125 "docker build -t ruoyi:1.0 /data/ruoyi-api"
'''
// 停止并删除现有的容器
sh '''
EXISTING_CONTAINER=$(ssh 192.168.1.125 "docker ps -a -q -f name=ruoyi")
if [ -n "$EXISTING_CONTAINER" ]; then
echo "容器 'ruoyi' 已存在,停止并删除旧容器..."
ssh 192.168.1.125 "docker rm -f $EXISTING_CONTAINER"
fi
'''
// 运行新的容器
sh '''
ssh 192.168.1.125 "docker run -d --name ruoyi -p 8080:8080 ruoyi:1.0"
'''
}
}
}
}
}
部署项目所需容器#
该项目中要用到 nginx、mysql 和 redis,需提前部署好容器。对应容器版本为 nginx:1.18.0、mysql:8.0.19、redis:6.0.8
(1)创建所需目录
mkdir -p /data/ruoyi
mkdir -p /data/ruoyi/nginx/conf
mkdir -p /data/ruoyi/mysql/db
(2)创建 nginx 临时容器,修改配置文件
docker run --rm -v /data/ruoyi/nginx/conf:/backup nginx:1.18.0 \
sh -c "cp -r /etc/nginx/. /backup"
修改/data/ruoyi/nginx/conf/conf.d
中的 default.conf 文件
server {
listen 80;
proxy_set_header Host $http_host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header REMOTE-HOST $remote_addr;
server_name localhost;
location / {
root /usr/share/nginx/html/dist;
index index.html index.htm;
try_files $uri /index.html;
}
location /prod-api/ {
proxy_set_header Host $http_host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header REMOTE-HOST $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_pass http://192.168.1.125:8080/; #注意修改ip
}
if ($request_uri ~ "/actuator") {
return 403;
}
}
(3)将RuoYi-Vue\sql
中的 sql 文件,拷贝到 192.168.1.125 主机的/data/ruoyi/mysql/db
目录
(4)撰写 yml,使用 docker compose 编排部署容器
#撰写yml文件
vi ruoyi.yml
services:
nginx:
image: nginx:1.18.0
container_name: nginx
restart: always
volumes:
- /data/ruoyi/nginx/conf:/etc/nginx
- /data/ruoyi/nginx/logs:/var/log/nginx
- /data/ruoyi/nginx/html:/usr/share/nginx/html
environment:
TZ: "Asia/Shanghai"
ports:
- "80:80"
networks:
ruoyi:
ipv4_address: 172.20.112.11
mysql:
container_name: mysql
image: mysql:8.0.19
restart: always
environment:
MYSQL_ROOT_PASSWORD: "password"
MYSQL_ALLOW_EMPTY_PASSWORD: "no"
MYSQL_DATABASE: "ry-vue"
TZ: "Asia/Shanghai"
ports:
- "3306:3306"
volumes:
- /data/ruoyi/mysql/db:/var/lib/mysql
- /data/ruoyi/mysql/conf:/etc/my.cnf
- /data/ruoyi/mysql/init:/docker-entrypoint-initdb.d
command: --default-authentication-plugin=mysql_native_password
networks:
ruoyi:
ipv4_address: 172.20.112.12
redis:
container_name: redis
image: redis:6.0.8
restart: always
environment:
TZ: "Asia/Shanghai"
ports:
- "6379:6379"
volumes:
- /data/ruoyi/redis/conf:/etc/redis/redis.conf
- /data/ruoyi/redis/data:/data
command: redis-server /etc/redis/redis.conf
networks:
ruoyi:
ipv4_address: 172.20.112.13
networks:
ruoyi:
driver: bridge
ipam:
config:
- subnet: 172.20.112.0/24
(5)执行命令创建容器
docker compose -f ruoyi.yml up -d
#查看容器运行状态
docker ps
#导入数据库
docker exec -it mysql bash
mysql -u root -ppassword ry-vue < /var/lib/mysql/ry_20250417.sql
mysql -u root -ppassword ry-vue < /var/lib/mysql/quartz.sql
上传代码到 GitLab#
(1)创建 ruoyi-ui 和 ruoyi-api 两个仓库分别存放前端和后端代码
(2)在 ruoyi-ui 目录下,打开 cmd,输入命令上传代码
git init
git remote add origin http://192.168.1.121:82/test/ruoyi-ui.git
#添加该目录下的git权限配置
git config user.name "test1"
git config user.email "test1@gitlab"
#继续上传
git add .
git commit -m "ruoyi-ui"
git push -u origin master
(3)在RuoYi-Vue
目录下,打开 cmd,输入命令上传代码
git init
git remote add origin http://192.168.1.121:82/test/ruoyi-api.git
#添加该目录下的git权限配置
git config user.name "test1"
git config user.email "test1@gitlab"
#继续上传
git add .
git commit -m "ruoyi-api"
git push -u origin master
配置 Jenkins 流水线#
(1)安装 nodejs 和 NodeJS 插件
在 jenkins 服务器上安装 nodejs
wget https://nodejs.org/dist/latest-fermium/node-v14.21.3-linux-x64.tar.gz
tar -vxzf node-v14.21.3-linux-x64.tar.gz -C /opt
mv /opt/node-v14.21.3-linux-x64 /opt/nodejs
#配置环境变量
echo "
export NODE_HOME=/opt/nodejs
export PATH=$NODE_HOME/bin:$PATH" >> /etc/profile
#变量生效
source /etc/profile
#查看版版本
node -v
npm -v
#配置镜像源
npm config set registry https://registry.npmmirror.com
npm config set sass_binary_site=https://npm.taobao.org/mirrors/node-sass
(2)配置 NodeJS 设置
在Manage Jenkins
-Tools
-NodeJS 安装中,点击新增NodeJS
,填写 nodejs 的名称为nodejs14
, 输入在服务器安装的 nodejs 路径/opt/nodejs
,保存应用。
(3)创建ruoyi-ui
流水线任务,在流水线 - 定义中选择Pipeline script from SCM
,SCM 选择Git
,填写 ruoyi-ui 的 git 仓库地址和登录凭证,其他选项保持默认,保存应用。
(4)点击Build Now
,等待任务执行完成。在浏览器中访问http://192.168.1.125/
,查看前端部署情况。
(5)创建ruoyi-api
流水线任务,在流水线 - 定义中选择Pipeline script from SCM
,SCM 选择Git
,填写 ruoyi-api 的 git 仓库地址和登录凭证,其他选项保持默认,保存应用。
(6)点击Build Now
,等待任务执行完成。在浏览器中访问http://192.168.1.125/
,可正常登录,即为成功。
(7)访问 sonarQube,分别查看前后端代码的具体质量审查情况。
本篇知识来源于 B 站视频 BV1pF411Y7tq