欢迎访问阿蛮君博客~
关于本站，有任何疑问都可以评论或留言。
蓝易云

Jenkins 微服务打包再优化

460次阅读
没有评论

共计 6977 个字符，预计需要花费 18 分钟才能阅读完成。

之前也写过 jenkins 微服务打包的教程，可以打包单个模块，但是如果需要一次性打包全部就实现不了了，这次优化了一下脚本。

如果有不了解的，可以先看看这两篇文章 Jenkins 打包微服务教程-一个配置文件即可打包所有模块，Jenkins 打包微服务流程优化。

不过这次需要用到 Extended Choice Parameter 插件，因为需要在构建时传参，但是 jenkins 默认不支持传多选，需要通过这个插件。

插件的使用也比较简单，在添加参数时选择 Extended Choice Parameter。

Jenkins 微服务打包再优化

然后按如下图填写即可。

Jenkins 微服务打包再优化

接下来就可以按住 ctrl 键配合鼠标进行多选了，也可以按住 shift 选择一个区间。

接下来就是配置源码地址，maven 的打包可以不需要，如果实在需要可以设置命令为 mvn dependency:tree，因为接下来会在脚本进行打包。

脚本如下，注意这里需要配置三个参数，分别是 all_module-候选打包模块，all_host-候选打包主机，branch-git分支，这个分支变量需要配置为 git 变量，其他两个使用上面的插件配置。

#!/bin/bash

# 0. 准备 1. 指定打包mvn路径 2. 获取打包的所有模块 3. 获取打包的所有主机
maven_command="/var/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/maven3.6/apache-maven-3.6.1/bin/mvn"
IFS=',' read -ra modules <<< "$all_module"
IFS=',' read -ra hosts <<< "$all_host"

echo "===============本次选择打包的模块 "$all_module"==============="
# 1. 打包
skip_tests="-Dmaven.test.skip=true"
for module in "${modules[@]}"
do
     echo "===============模块 "$module" 执行 mvn install==============="
     $maven_command clean install -pl ${module} -am $skip_tests
done

# 2. 构建镜像并保存
for module in "${modules[@]}"
do
    ## 构建镜像
    cd "${WORKSPACE}/${module}"
    serviceName="${module#*/}"
    current=$(date -d "8 hours" +"%Y%m%d-%H%M")
    branch_name=$(echo "${branch}" | sed 's/\//-/g')
    #imageName="${serviceName}-${branch_name}:${current}"
    imageName="${serviceName}:${branch_name}-${current}"
    tarName="${serviceName}-${current}.tar"
    jarFile=$(ls target/ | grep \.jar$)
    mv "target/${jarFile}" .
    docker build --build-arg JAR_FILE="${jarFile}" -t "${imageName}" .

    ## 保存镜像-保存在 jenkins 主目录下的 images 文件夹
    imagesDir="${JENKINS_HOME}/images/$JOB_NAME/${serviceName}"
    mkdir -p "${imagesDir}"
    docker save -o "${imagesDir}/${tarName}" "${imageName}"
    cp "${imagesDir}/${tarName}" target/

    ## 清理镜像
    docker rmi -f $(docker images | grep "${serviceName}" | awk 'NR>0 {print $3}')
    ## tar包保留指定数量
    cd "${imagesDir}"
    retainNumber=3
    rm -f $(ls -t | awk "NR>${retainNumber}")
done

# 3. 部署
# 准备工作 -> 1. 定义主机 2.获取工作目录 3. 连接新主机不询问是否添加到known_hosts
cd ${WORKSPACE}
cat > hosts.txt <<EOF
172.26.1.21 root xxx dev_test "-e ACTIVE=pro -e NACOS_URL=172.26.1.21"
EOF
grep -q 'StrictHostKeyChecking no' /etc/ssh/ssh_config || echo 'StrictHostKeyChecking no' >> /etc/ssh/ssh_config

#==========定义远程执行脚本文件开始==========
cd ${WORKSPACE}
cat << 'EOF' > script.sh
#!/bin/bash
cd /tmp/robot-patrol-platform
tarName=$(ls *.tar -1t | head -n 1)
imageName=$(docker load -i ${tarName} |  cut -d' ' -f3)
containerName=$(echo ${imageName} | cut -d: -f1)
# 删除原来的容器，并新建一个容器
if docker ps -a| grep "${containerName}" >/dev/null 2>&1; then docker rm -f ${containerName} ; fi
docker run -d --net host $1 --restart=unless-stopped --name ${containerName} ${imageName}
# 删除无用的镜像，只保留最新的镜像
serviceName=${containerName}
if docker images | grep "${serviceName}" >/dev/null 2>&1; then docker rmi -f $(docker images | grep ${serviceName} |awk 'NR>1 {print $3}'); fi
# 删除临时文件夹
rm -rf /tmp/robot-patrol-platform/${tarName}
rm -rf /tmp/robot-patrol-platform/script.sh
echo "The script has been executed successfully."
EOF
#==========定义远程执行脚本文件结束==========

#==========定义任务函数开始==========
dotask () {
    echo "===============远程主机 "$ip" 开始执行任务==============="
    for module in "${modules[@]}"
    do 
      echo "===============远程主机 "$ip" 正在部署 "$module" ==============="
      ip=$1; username=$2; password=$3; environment=$4; param=$5
      sshpass -p $password ssh $username@$ip "mkdir -p /tmp/robot-patrol-platform"
      sshpass -p $password scp ${WORKSPACE}/${module}/target/*.tar $username@$ip:/tmp/robot-patrol-platform
      sshpass -p $password scp ${WORKSPACE}/script.sh $username@$ip:/tmp/robot-patrol-platform
      sshpass -p $password ssh $username@$ip "chmod +x /tmp/robot-patrol-platform/script.sh && /tmp/robot-patrol-platform/script.sh $param"
   done
   echo "===============远程主机 "$ip" 脚本执行完成==============="
}
#==========定义任务函数结束==========

while read -r ip username password environment param; do
  for host in "${hosts[@]}"; do
    if [ "$host" = "$environment" ] || [ "$host" = "$ip" ]; then
      dotask "$ip" "$username" "$password" "$environment" "$param"
    fi
  done
done < hosts.txt
echo "===============所有任务已完成==============="

当然，这样的方式有个弊端，就是 idea 插件并不支持多选参数，

还有一种方式，需要配置 single_module、host 都为单选，并且提供 all 这个选项，意思是打包全部模块或发送到全部主机。然后配置一个 all_module 字符变量，这个变量是模块以逗号分隔，另外一个就是分支变量了。

脚本如下：

#!/bin/bash
modules=${single_module}
# 如果选择该项目，则全部进行打包
maven_command="/var/jenkins_home/tools/hudson.tasks.Maven_MavenInstallation/maven3.6/apache-maven-3.6.1/bin/mvn"
skip_tests="-Dmaven.test.skip=true"
if [ ${single_module} == "all" ]; then
     IFS=',' read -ra modules <<< "$all_module"
     echo "===============全部模块执行 mvn install==============="
     $maven_command clean install $skip_tests
else
     echo "===============${single_module}模块执行 mvn install==============="
     $maven_command clean install -pl ${single_module} -am $skip_tests
fi
for module in "${modules[@]}"
do
    echo $module
    ## 构建镜像
    cd "${WORKSPACE}/${module}"
    serviceName="${module#*/}"
    current=$(date -d "8 hours" +"%Y%m%d-%H%M")
    branch_name=$(echo "${branch}" | sed 's/\//-/g')
    #imageName="${serviceName}-${branch_name}:${current}"
    imageName="${serviceName}:${branch_name}-${current}"
    tarName="${serviceName}-${current}.tar"
    jarFile=$(ls target/ | grep \.jar$)
    mv "target/${jarFile}" .
    docker build --build-arg JAR_FILE="${jarFile}" -t "${imageName}" .

    ## 保存镜像-保存在 jenkins 主目录下的 images 文件夹
    imagesDir="${JENKINS_HOME}/images/$JOB_NAME/${serviceName}"
    mkdir -p "${imagesDir}"
    docker save -o "${imagesDir}/${tarName}" "${imageName}"
    cp "${imagesDir}/${tarName}" target/

    ## 清理镜像
    docker rmi -f $(docker images | grep "${serviceName}" | awk 'NR>0 {print $3}')
    ## tar包保留指定数量
    cd "${imagesDir}"
    retainNumber=3
    rm -f $(ls -t | awk "NR>${retainNumber}")
done

# 准备工作 -> 1. 定义主机 2.获取工作目录 3. 连接新主机不询问是否添加到known_hosts
cd ${WORKSPACE}
cat > hosts.txt <<EOF
172.26.1.21 root xxx dev_test "-e ACTIVE=pro -e NACOS_URL=172.26.1.21"
EOF
grep -q 'StrictHostKeyChecking no' /etc/ssh/ssh_config || echo 'StrictHostKeyChecking no' >> /etc/ssh/ssh_config

#==========定义远程执行脚本文件开始==========
cd ${WORKSPACE}
cat << 'EOF' > script.sh
#!/bin/bash
cd /tmp/robot-patrol-platform
tarName=$(ls *.tar -1t | head -n 1)
imageName=$(docker load -i ${tarName} |  cut -d' ' -f3)
containerName=$(echo ${imageName} | cut -d: -f1)
# 删除原来的容器，并新建一个容器
if docker ps -a| grep "${containerName}" >/dev/null 2>&1; then docker rm -f ${containerName} ; fi
docker run -d --net host $1 --restart=unless-stopped --name ${containerName} ${imageName}
# 删除无用的镜像，只保留最新的镜像
serviceName=${containerName}
if docker images | grep "${serviceName}" >/dev/null 2>&1; then docker rmi -f $(docker images | grep ${serviceName} |awk 'NR>1 {print $3}'); fi
# 删除临时文件夹
rm -rf /tmp/robot-patrol-platform/${tarName}
rm -rf /tmp/robot-patrol-platform/script.sh
echo "The script has been executed successfully."
EOF
#==========定义远程执行脚本文件结束==========

#==========定义任务函数开始==========
dotask () {
      echo "===============远程主机 "$ip" 开始执行任务==============="
    for module in "${modules[@]}"
    do 
      echo "===============远程主机 "$ip" 正在部署 "$module" ==============="
      ip=$1; username=$2; password=$3; environment=$4; param=$5
      sshpass -p $password ssh $username@$ip "mkdir -p /tmp/robot-patrol-platform"
      sshpass -p $password scp ${WORKSPACE}/${module}/target/*.tar $username@$ip:/tmp/robot-patrol-platform
      sshpass -p $password scp ${WORKSPACE}/script.sh $username@$ip:/tmp/robot-patrol-platform
      sshpass -p $password ssh $username@$ip "chmod +x /tmp/robot-patrol-platform/script.sh && /tmp/robot-patrol-platform/script.sh $param"
   done
   echo "===============远程主机 "$ip" 脚本执行完成==============="
}
#==========定义任务函数结束==========

while read -r ip username password environment param; do
  if [ "$host" = "all" ]; then
    dotask $ip $username $password $environment "$param"
  elif [ "$host" = "$environment" ]; then
    dotask $ip $username $password $environment "$param"
  fi
done < hosts.txt
echo "===============所有任务已完成==============="

提醒：本文发布于434天前，文中所关联的信息可能已发生改变，请知悉！

AD:【腾讯云服务器大降价】2核4G 222元/3年 1核2G 38元/年
正文完
jenkins打包 微服务打包
2023-09-26
 0
阿蛮君
版权声明：本站原创文章，由 阿蛮君 于2023-09-26发表，共计6977字。
转载说明：除特殊说明外本站文章皆由CC-4.0协议发布，转载请注明出处。
Java 包装类型的缓存机制
公众号排版利器 md2all 出问题啦！紧急发布修复
Docker 如何在 x86 平台构建 arm64 镜像 – 跨 cpu 架构构建镜像
APScheduler 官方文档
评论（没有评论）
文章搜索
随机文章
SSH 隧道本地转发、远程转发和动态转发详解及解决常出现的报错

SSH 隧道本地转发、远程转发和动态转发详解及解决常出现的报错

本地端口转发 ssh -fgN -L 2222:172.21.9.201:22 localhost 将本地机器上的2222端口转发到远程机器 172.21.9.201 上的 SSH 服务端口 22，可以通过连接到本地机器的 2222 端口来访问远程机器上的 SSH 服务。 远程端口转发 ssh -fgN -R 0.0.0.0:2222:localhost:22 root@172.21.9.201 ...
Docker 搭建最新版本 Minio 以及设置桶为公开权限

Docker 搭建最新版本 Minio 以及设置桶为公开权限

Minio 简介 Minio是一个高性能、分布式的对象存储服务，可以用于存储和检索大量的非结构化数据，例如图像、视频、日志文件和备份数据等。Minio可以部署在本地或云端环境中，支持常用的API和协议，例如Amazon S3 API、OpenStack Swift API和Azure Blob Storage API等。 Minio采用了分布式架构，可以将数据分散存储在多个节点中，从而提高了数据的...
解决知乎公众号等平台 markdown 排版的工具-md2all

解决知乎公众号等平台 markdown 排版的工具-md2all

当我习惯性将 markdown 格式的文章复制，粘贴到知乎时，提示不支持，要导入 markdown 文件才行。 挺烦的，要进入很多层文件夹才能找到文章，并且导入进去以后还是有点怪。 于是想着之前网上找找工具解决问题，果然找到一个 markdown 转其他格式的工具 Md2All。 后来想着自己搭建一个，于是就在 github 找到一个以颜家大少的 Md2All 为基础的Md2XEditor。 稍作...
Dokcer 安装 sqlite 的 web 可视化工具

Dokcer 安装 sqlite 的 web 可视化工具

一、简介 SQLite 是一个轻量级、零配置的数据库引擎。与传统的数据库管理系统相比，它并不使用独立的服务器进程，而是将整个数据库作为一个文件存储在主机文件系统中。 正是因为它的轻量级，和以文件的方式存储，导致不能通过网络进行连接数据库。因此，可能给调试带来不方便，这种情况可以通过安装 sqlite-web 解决。 二、安装和使用 1. docker安装 docker run --rm -d \ ...
Windows 使用 ffmpeg 批量压缩视频文件

Windows 使用 ffmpeg 批量压缩视频文件

下载了一些视频，感觉默认有点大，于是准备使用 ffmpeg 进行压缩，用了如下命令感觉效果还不错。 ffmpeg -i input.mp4 -c:v libx264 -crf 23 -preset medium -c:a aac -b:a 128k output.mp4 但是需要压缩的视频有点多，并且我的视频是分类好的，不想压缩的时候整到一个文件夹去到时候又要分文件夹，所以借助 gpt 写出了此脚...
热门文章

IDM 6.39.2 安装教程

Navicat15 最新版下载和安装教程

Dokcer 安装 v2rayA

Docker 搭建 headscale 异地组网完整教程

Ubuntu 22.04 锁屏不能远程连接的解决方案

最新评论
星海 星海 又来学习了！
阿蛮君 阿蛮君 搞定了就好 :smile:
星海 星海 怪我固执，一直想用最新版Headscale，结果怎么都和webui无法兼容。衷心感谢博主耐心指点，用0.22.3终于搞定！多谢多谢！
星海 星海 看到了，看到了。谢谢！
阿蛮君 阿蛮君 底部有联系方式哈
星海 星海 博主可以加个联系方式吗？正在按您的教程折腾headscale，快成功了
星海 星海 特来感谢！博主的教程是最详细、最有操作性、最负责的一篇！ :wink: :wink: :wink:
LzxkJ LzxkJ 站点名称：软技收集 链接地址：https://rjasj.com 站点简介：专注于软件与技术分享 站点头像：https://rjasj.com/favicon.png
暮岁 暮岁 好东西，我正愁呢，搭了个onenav，没图标，光秃秃的
阿蛮君 阿蛮君 啥？
留言建议| 免责声明| 友链申请| 站点地图
Copyright © 2022-2024 阿蛮君博客 湘ICP备2023001393号
本网站由 亿信互联 提供云计算服务 | 蓝易云CDN 提供安全防护和加速服务
Powered by Wordpress  Theme by Puock