DevOps 基于Walle的小型持續集成實戰（五）基于Walle發布Java應用

qc1iu 發布于2019-08-19 11:45 / 1721人閱讀

摘要：本章用于講解如何在下構建和運行。編譯發版都是基于的容器，下完成的。

本章用于講解如何在walle下構建和運行JavaWeb。主要包含SpringBoot,ScalaAkkaWeb應用，以Java -jar和Docker運行兩種方式（Tomcat方式不講，大家自行研究）

新建項目

項目中心 > 項目管理 > 新建項目

以下是一份配置好的項目表

分組	項目	參考	備注
基本配置	項目名稱	dev-我的JavaDemo項目	隨便填寫，名稱不要太長（不好看），最好把環境卸載最前，例如dev（開發環境）
基本配置	環境	開發環境	提前在環境管理配置好即可
基本配置	Git Repo	git@gitlab.xxx.com:xxx/java-demo.git	Git倉庫地址
目標集群	目標集群	192.168.0.122	提前配置服務器管理
目標集群	目標集群部署路徑	/data/walle-build/java-demo	實際運行的環境
目標集群	目標集群部署倉庫	/data/walle-run	會存放多個版本編譯后的項目
目標集群	目標集群部署倉庫版本保留數	5	可以回滾的版本數

配置腳本

Java生態下基本腳本大致一致，無細微差別

基本腳本

任務配置 - 部署包含文件

包含方式

docker-compose.yml
target/${SERVER_NAME}.jar

該方式用于描述從源碼包到發布包中，排除/包含的內容。一般java使用target即可

任務配置 - 自定義全局變量

# 運行目錄
JAVA_HOME=/data/walle-java
RUN_ROOT=/data/walle-run
SERVER_NAME=java-demo
MVN_HOME=/usr/local/maven3
PORT=2223

【SpringBoot to Docker】

任務配置 - 高級任務-Deploy前置任務

pwd
/usr/local/maven3//bin/mvn -v

任務配置 - 高級任務-Deploy后置任務

${MVN_HOME}/bin/mvn clean compile package -Dmaven.test.skip=true -DartifactId=${SERVER_NAME}
# cp target/${SERVER_NAME}.jar .
sed -i "s/${container_port}/"${PORT}"/g" docker-compose.yml 
sed -i "s/${container_name}/"${SERVER_NAME}"/g" docker-compose.yml

任務配置 - 高級任務-Release前置任務

docker-compose -p ${SERVER_NAME}  -f ${WEBROOT}/docker-compose.yml down || echo "服務不存在"
docker stop ${SERVER_NAME} || echo "服務不存在"
docker rm ${SERVER_NAME} || echo "服務不存在"
rm -rf ${WEBROOT}

任務配置 - 高級任務-Release后置任務

docker-compose -p ${SERVER_NAME}  up -d
echo "服務啟動完成"

項目 - Maven pom.xml配置




         
    
        ${artifactId}
        
            
                org.springframework.boot
                spring-boot-maven-plugin
                
                    com.walle.main.DevelopToolApplication
                
                
                    
                        
                            repackage
                        
                    
                
            
            
            
                org.apache.maven.plugins
                maven-dependency-plugin
                
                    
                        package
                        
                            copy-dependencies
                        
                    
                
                
                    system

此處配置了finalName=${artifactId}，用于可自定義生成的包名稱

此處使用了org.springframework.boot進行打包，mainClass設置執行的main方法

項目 - docker-compose.yml配置

version: "2"
services:
  web:
    # 鏡像:版本
    image: openjdk:8-jdk
    container_name: ${container_name}
    ports:
      - "${container_port}:${container_port}"
    volumes:
         - ./target/${container_name}.jar:/usr/local/${container_name}.jar
         - /etc/localtime:/etc/localtime
    command: /bin/bash -c "echo "Asia/Shanghai" > /etc/timezone && java -Dserver.port=${container_port} -jar /usr/local/${container_name}.jar"

映射宿主機./target下的文件${container_name}.jar，到/usr/local/${container_name}.jar

映射宿主機的時區到容器

啟動命令設置時區到上海，隨后調用啟動參數java -jar，此處可以設置更多的啟動參數

此處的參數傳遞方式較差（linux變量替換），可以尋求更好的參數傳遞方式

【ScalaAkka to Docker】

任務配置 - 高級任務-Deploy前置任務

pwd
/usr/local/maven3//bin/mvn -v

任務配置 - 高級任務-Deploy后置任務

${MVN_HOME}/bin/mvn clean scala:compile compile package -Dmaven.test.skip=true -DartifactId=${SERVER_NAME}
# cp target/${SERVER_NAME}.jar .
sed -i "s/${container_host}/"${HOST}"/g" docker-compose.yml 
sed -i "s/${container_port}/"${PORT}"/g" docker-compose.yml 
sed -i "s/${container_name}/"${SERVER_NAME}"/g" docker-compose.yml

任務配置 - 高級任務-Release前置任務

docker-compose -p ${SERVER_NAME}  -f ${WEBROOT}/docker-compose.yml down || echo "服務不存在"
docker stop ${SERVER_NAME} || echo "服務不存在"
docker rm ${SERVER_NAME} || echo "服務不存在"
rm -rf ${WEBROOT}

任務配置 - 高級任務-Release后置任務

docker-compose -p ${SERVER_NAME}  up -d
echo "服務啟動完成"

項目 - Maven pom.xml配置




         
    
        ${artifactId}
        
            
                org.springframework.boot
                spring-boot-maven-plugin
                
                    com.walle.main.DevelopToolApplication
                
                
                    
                        
                            repackage
                        
                    
                
            
            
                maven-shade-plugin
                2.3
                
                    
                        package
                        
                            shade
                        
                        
                            true
                            allinone
                            
                                
                                    *:*
                                
                            
                            
                                
                                    reference.conf
                                
                                
                                    
                                        com.main.Boot
                                    
                                
                            
                            
                                
                                    *:*
                                    
                                        META-INF/*.SF
                                        META-INF/*.DSA
                                        META-INF/*.RSA
                                    
                                
                            
                        
                    
                
            
            
                org.apache.maven.plugins
                maven-dependency-plugin
                
                    
                        package
                        
                            copy-dependencies
                        
                    
                
                
                    system

如為SpringBoot混合編譯，則多帶帶加上scala編譯即可


                org.scala-tools
                maven-scala-plugin
                2.15.2
                
                    
                        
                            compile
                            testCompile

此處配置了finalName=${artifactId}，用于可自定義生成的包名稱

此處使用了org.springframework.boot進行打包，mainClass設置執行的main方法

項目 - docker-compose.yml配置

version: "2"
services:
  web:
    # 鏡像:版本
    image: openjdk:8-jdk
    container_name: ${container_name}
    ports:
      - "${container_port}:${container_port}"
    volumes:
         - ./target/${container_name}.jar:/usr/local/${container_name}.jar
         - /etc/localtime:/etc/localtime
    command: /bin/bash -c "echo "Asia/Shanghai" > /etc/timezone && java -Dserver.port=${container_port} -jar /usr/local/${container_name}.jar"

映射宿主機./target下的文件${container_name}.jar，到/usr/local/${container_name}.jar

映射宿主機的時區到容器

啟動命令設置時區到上海，隨后調用啟動參數java -jar，此處可以設置更多的啟動參數

此處的參數傳遞方式較差（linux變量替換），可以尋求更好的參數傳遞方式

【SpringBoot to Jar】

任務配置 - 高級任務-Deploy前置任務

pwd
/usr/local/maven3//bin/mvn -v

任務配置 - 高級任務-Deploy后置任務

${MVN_HOME}/bin/mvn clean scala:compile compile package -Dmaven.test.skip=true -DartifactId=${SERVER_NAME}
# cp target/${SERVER_NAME}.jar .

任務配置 - 高級任務-Release前置任務

curl -X POST 127.0.0.1:${PORT}/shutdown || echo "服務不存在"
rm -rf ${WEBROOT}

任務配置 - 高級任務-Release后置任務

java -Dserver.port=${PORT} -jar
echo "服務啟動完成"

其他

上線通知

需要的話開啟

上線單是否開啟審核

需要的話開啟，會在審核后才能實際發布構建單

環境準備 研發環境

上訴內容完成后，是無法進行構建發版的。編譯發版都是基于walle的docker容器，python下完成的。該環境下無java和maven變量

我們有兩個方式解決宿主機映射 or 重新打包鏡像

此處只講解宿主機映射的方式（更推薦重新打包鏡像）

我們在宿主機安裝完成maven,java,node等環境，然后修改walle的docker-compose即可

# docker version:  18.06.0+
# docker-compose version: 1.23.2+
# OpenSSL version: OpenSSL 1.1.0h
version: "3.7"
services:
  python:
    image: alenx/walle-python:2.1
    container_name: walle-python
    hostname: walle-python
    env_file:
      # walle.env需和docker-compose在同級目錄
      - ./walle.env
    command: bash -c "ln -sf /data/walle-tool/node-v10.5.0-linux-x64/bin/node /usr/bin/node && ln -sf /data/walle-tool/node-v10.5.0-linux-x64/bin/npm /usr/bin/npm &&  cd /opt/walle_home/ && /bin/bash admin.sh migration &&  python waller.py "
    expose:
      - "5000"
    volumes:
      - /opt/walle_home/plugins/:/opt/walle_home/plugins/
      - /opt/walle_home/codebase/:/opt/walle_home/codebase/
      - /opt/walle_home/logs/:/opt/walle_home/logs/
      - /data/walle-build/:/walle/walle-build/
      - /data/walle-java/:/walle/walle-java/
      - /usr/local/maven3/:/usr/local/maven3/
      - /data/walle-run/:/data/walle-run/
      - /usr/bin/netstat:/usr/bin/netstat/
      - /root/.ssh:/root/.ssh/
      - /data/walle-tool/node-v10.5.0-linux-x64/:/data/walle-tool/node-v10.5.0-linux-x64/

進入從宿主機進入python，查看mvn,java,linux是否可用

服務連接

連接git

配置git ssh在宿主機（docker-compose-python，映射了ssh目錄），保證能免密碼拉去代碼即可

否則在部署時候，獲取不到git版本，無法拉去代碼

連接服務器

配置服務器的 ssh在宿主機，保證能免密碼登錄各服務器即可

否則在部署時候，無法連接需要部署的服務器

部署發布

部署管理 - 新建上線單

選擇環境和分支即可，回到列表頁，點擊上線查看詳情，再次點擊詳情頁上線即可開始發布

GPU云服務器云服務器 walle devops持續集成基于云計算的應用基于大數據平臺的應用服務

文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。

轉載請注明本文地址：http://specialneedsforspecialkids.com/yun/77791.html

DevOps 基于Walle的小型持續集成實戰（七）總結

摘要：當前版本針對于安裝版概要整體流程貫通，基本可以達到實用級別。仍舊有很多需要提高的地方發布構建時部署上線服務器卡頓嚴重，基本不可以多項目發布。該文章旨在描述從零開始搭建環境，中間遇到的問題以及最終的經驗總結。當前版本針對于2.0 docker安裝版概要整體流程貫通，基本可以達到實用級別。滿足2-5臺服務器，少量的應用部署是完全可以的，但達到一定規模之后則Walle和Jenkins...

iliyaku 2019-06-28 17:21 評論0 收藏0
DevOps 基于Walle的小型持續集成實戰（一）概述

摘要：該文章用于概述一個小型持續集成環境的搭建的方案什么是持續集成持續集成作為當今軟件開發實踐，可以簡單理解為團隊開發相對頻繁的集成他們的工作，一般讓每個成員每天至少集成一次，而這回造成每天會有多次的版本發布。該文章用于概述一個小型持續集成環境的搭建的方案什么是持續集成？持續集成作為當今軟件開發實踐，可以簡單理解為團隊開發相對頻繁的集成他們的工作，一般讓每個成員每天至少集成一次，而這回...

Yangyang 2019-06-28 17:22 評論0 收藏0
DevOps 基于Walle的小型持續集成實戰（二）設計

摘要：以便對整個持續集成印象加深。配置完各環境發布腳本后，則可以使用構建發起進行觸發環境準備。并會在遠程環境上存放多次發布的版本，用于回退和切換服務停用。進行等操作，停止原本運行的服務切換啟用。該文章用于建立一個小型的基于Walle的持續集成工具。解決java,react,angular項目的編譯發布。以便對整個持續集成印象加深。官方網站：https://walle-web.io/ 適用...

zr_hebo 2019-06-28 17:22 評論0 收藏0
DevOps 基于Walle的小型持續集成實戰（六）基于Walle發布前端React,Angular

摘要：本章用于講解如何在下構建和運行前端應用。項目配置服務名稱鏡像版本映射容器端口到本地端口數據卷映射本地文件到容器映射文件到容器的目錄并覆蓋文件映射文件夾到容器的文件夾覆蓋容器啟動后默認執行的命令。環境準備參考文檔本章用于講解如何在walle下構建和運行前端應用。主要包含React,Angular應用，以Nginx+Docker運行（Vue方式不講，大家自行研究）新建項目項目中心 >...

tuomao 2019-06-28 17:21 評論0 收藏0
DevOps 基于Walle的小型持續集成實戰（三）Docker與Gitlab

摘要：自動化測試和持續集成發布。在服務型環境中部署和調整數據庫或其他的后臺應用。容器與鏡像的關系類似于面向對象編程中的對象與類。容器容器是獨立運行的一個或一組應用。提供了龐大的鏡像集合供使用。還在按照mysql安裝教程一步一步配置服務配置賬戶嗎？還在為每開一個新環境重新配置這些服務感到苦惱嗎？使用Docker，服務快速構建部署。解決你的研發時間，早點下班～現代技術，還不會docker你就落...

since1986 2019-06-28 17:21 評論0 收藏0