`
zhmocean
  • 浏览: 206066 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

Cruise+ANT+maven2搭建持续集成环境

阅读更多

Cruise 简介

Cruise ThoughtWorks 推出的持续集成系统,它秉承了 CruiseControl 的优秀品质,同时加入了管线阶段、分布式集成等特性,让整个自动化环境更加合理智能。

当然,对于该系统更详细的介绍,各位可参考 ThoughtWorks 工程师 tony1130 的博客: http://blog.csdn.net/tony1130

安装

Cruise 的安装非常简单,只需要在其官网: http://studios.thoughtworks.com/cruise-release-management ,下载最新版本的安装文件,并在对应的系统上安装即可。

Cruise 运行环境分为 server agent 两部分,前者是持续集成管控系统,后者则是具体运行 job (即任务)的任务节点系统,两者是一对多关系,即一个 server 可以同时管理多个 agent (可通过网络进行分布式管理)。

Cruise 为小型团队提供免费版,此版本的 server 和agent只能运行在同一主机上,agent不限数量 ,不过对于小团队来说已经足够了。

运行

Cruise server agent 安装完毕后会自动成为系统级服务, server 会自动寻找 agent 并进行管理。

默认打开 http://localhost:8153 即可看到 server 的主界面,如图:

 


管线概念

CruiseControl 单个工程的概念不同, Cruise 使用了管线、阶段、 job 分级的方式来管理集成。

所谓管线( pipeline ),就是 CruiseControl 中的一个工程,它指向一个版本控制系统( SCM )工程库,并监测其中的变更。

一个管线会分多个串行的阶段( stage ),即按顺序执行的阶段,每个阶段执行完毕,下一个阶段才能执行。

为了支持分布式集成,每个阶段又可以分为多个任务( job ),任务之间是并行的,可以分发给相应的 agent 独立执行,但必须所有任务全部通过之后,该阶段才能通过。

每个任务是由多个自动化脚本组成,可以是 ant maven… 也可以是命令行工具。

下图中显示了 build test deploy candidate release 五个阶段:

 


配置

Cruise 的配置是基于 XML 的,我们可以使用它提供的管理界面,创建一个简单的 pipeline ,当然也可以直接编辑配置文件,获得更大的灵活性,下图为配置文件编辑界面:

 


 

ANT Maven2 双剑合璧

Cruise 的任务( job )是通过调用自动化脚本完成的,它本身并不具备实际的逻辑执行能力,而提到自动化脚本,我们自然会想到 ANT 以及 maven2 两大自动化构建工具。

ANT 被称为万金油一点不为过,它除了提供丰富的插件之外,还能够自由与命令行工具结合,这就使得它几乎适用于任何自动化环境,它应该是我们用于管理软件发布最常用的工具了。详细资料请参考: http://ant.apache.org/ 或《 ant 权威指南》

Maven2 是自动化构建工具的后起之秀,它更注重于软件生命周期的管理,其内部定义了一整套的从构建、测试到部署发布的 goal goal 表示了软件生命周期的一个阶段,类似于 Cruise stage )用于模板化管理。详细资料请参考: http://blog.csdn.net/wind5shy/archive/2007/10/18/1830826.aspx

一般来说,我们只需要选择一种工具就可以方便的管理我们的软件生命周期,但是一种工具必然有其利弊: ANT 虽然灵活强大,但它的脚本比较复杂,且不能自动管理依赖; Maven2 定义了一套现成的模板和具有很好的依赖管理功能,但它不能自己定义 goal ,且无法从文件中读取属性定义,其灵活程度大打折扣。

那既然如此,将两个工具的优势结合到一起,不就可以扬长避短了吗?哈哈,说干就干。

ANT 定义阶段和读取文件中的属性参数(还好 Maven2 支持命令行参数),之后将软件生命周期的工作交给 Maven2 来执行。

build.xml 关键代码如下:

       <!--
        *******************
       启动 maven

       *******************
       -->

       <target name="maven-run">
              <exec executable="${m2.path}" output="${infofile}" dir=".">
              <arg line=" ${m2.target} -Dpversion=${build.version}
                              "/>
        </exec>

              <!-- 判断运行是否成功 -->
              <loadfile property="run-info"
            srcFile="${infofile}"/>
        <echo message="${run-info}"/>
              <condition property="run-success">

      <!-- 没有关键字 "BUILD FAILURE" 即为成功 -->
         <not>
       <contains string="${run-info}" substring="BUILD FAILURE"/>
         </not>
    </condition>

  <fail unless="run-success"
        message="${run-info}"/>
       </target> 

此构建文件有以下注意事项:

1、 ANT 没有集成 Maven2 的调用任务插件,因此应该使用 exec 命令,但 exec 命令必须使用绝对路径调用程序,那么当任务运行在不同环境的 agent 上时,就无法使用统一的绝对路径(比如 windows linux 的路径格式无法兼容),所以,在此使用了 ${m2.target} 变量来表示 Maven2 所在的绝对路径,该变量从系统的环境变量中读取。

2、 使用 -D Maven2 传递参数时,尽量避开内置属性名称

 

3、 Maven2 执行完毕之后如成功则打印 BUILD SUCCESSFUL ,而 ANT 也会返回这样的关键字(此关键字常被作为构建成功的条件),那么为了让其不扰乱程序集成系统的判断,就必须使用 BUILD FAILURE 关键字来判断(即只要存在此关键字就代表构建过程失败)。

把这个 target 作为子 target ,就可以复用在多个 ANT 阶段中了。

最后,在 Cruise 中配置 ANT 任务,就完成了整个持续集成环境的搭建。其一个 stage 的完整代码如下:

<stage name="deploy">
  <jobs>
    <job name="ubuntu_deploy">
      <tasks>
        <!-- 清理构建环境 -->
        <exec command="mvn" args="clean" />
        <!-- 调用ANT脚本,执行自动化任务 -->
        <ant target="deploy -Dscmurl=http://xxxxxx/xxxx/xxxx -Dscm.username=xx -Dscm.password=xx" />
      </tasks>
      <artifacts>
        <!-- 将打包文件归档到服务器 -->
        <artifact src="target/*.war" />
      </artifacts>
    </job>
  </jobs>
</stage>

 

版本号管理

到此我们已经成功将 Cruise ANT Maven2 连接在一起,能够自动进行软件的集成和发布,但是似乎还有一个重复性的工作没有纳入到自动化环境中(重复浪费是自动化理念无法忍受的事情,所以 )。

一般的,我们习惯使用 4 段版本号方式来标识软件,即 x.y.z.p x 代表产品号, y 代表发布号, z 代表修正号, p 代表构建号(即构建次数),而我们内部管理的里程碑还有一个修订号,以方便跟踪版本库的代码,那么一般的版本号会是这种形式: 1.0.22 .342-r1232

我们会在每次提交代码的时候让版本库中的 revision 号加 1 ,每次构建完毕会让构建号加 1 ;每个相对稳定的候选版本则需要提取交给 QA 组测试,测试通过之后发布给用户,且修正号加 1 ;而对于功能性的变更,则需要发布号加 1 ;一个新的产品版本会让产品号加 1

那么对于版本号的管理似乎也是一个劳心费神的工作,料想我们不会每次在做版本变更的时候都去 check in 你的配置文件,那样的话,浪费时间不说,还很容易出错。

那既然这样,我们完全可以把工作交给持续集成环境来做,当然产品号一般是分支的号码,只需要手动管理即可,我们使用持续集成环境管理修订号、构建号、修正号、发布号。

Cruise 提供了版本库修订号 CRUISE_REVISION 和构建次数 CRUISE_PIPELINE_LABEL 两个参数,修订号和构建号搞定了;而其又为 stage 的执行提供了手动功能,那样的话我们就可以创建两个手动 stage ,每当需要发布的时候,手动运行相应的 stage ,让版本号自动变更。具体方法如下:

修订号和构建号由 CRUISE_REVISION CRUISE_PIPELINE_LABEL 两个参数提供,在 ANT 中引用即可。

创建两个手动的 stage ,一个命名为 candidate ,用于发布一个修正版(即仅修正号增加);一个命名为 release ,用于发布一个发布版(发布号增加,修正号归零)。

ANT 脚本中增加对应的两个 target ,用于刷新版本号和调用 Maven2 package 任务。

具体配置代码如下:

Build.xml

	<!—修正版本 -->
	<target name="candidate" depends="init">
		<property name="build.type" value="candidate"/>
		<antcall target="refresh"/>

		<property file="${versionfile}"/>

		<property name="build.version" value="${product.number}.${release.number}.${candidate.number}.${build.number}-RC"/>
		<property name="m2.target" value="package -DskipTests"/>
		<antcall target="maven-run"/>

		<antcall target="tag"/>
	</target>

	<!-- 发布版本 -->
	<target name="release" depends="init">
		<property name="build.type" value="release"/>
		<antcall target="refresh"/>

		<property file="${versionfile}"/>
		
		<property name="build.version" value="${product.number}.${release.number}.${candidate.number}.${build.number}-release"/>
		<property name="m2.target" value="package -DskipTests"/>
		<antcall target="maven-run"/>
		
		<antcall target="tag"/>		
	</target>

	<!-- ============子过程=============== -->

	<!-- 
	*******************
	刷新版本号
	*******************
	-->
	<target name="refresh">
		
		<java jar="${buildnumber.path}" fork="true">
			<arg value="${versionfile}"/>
			<arg value="${build.type}"/>
		</java>
	</target>

 

Cruise setup

  <stage name="candidate">
    <approval type="manual" />
    <jobs>
      <job name="ubuntu_candidate">
        <tasks>
          <exec command="mvn" args="clean" />
          <ant target="candidate -Dscmurl=http:// xxx/xxx/xxx -Dscm.username= xxx -Dscm.password=xxx" />
        </tasks>
      </job>
    </jobs>
  </stage>
  <stage name="release">
    <approval type="manual" />
    <jobs>
      <job name="ubuntu_release">
        <tasks>
          <exec command="mvn" args="clean" />
          <ant target="release -Dscmurl=http:// xxx/xxx/xxx -Dscm.username= xxx -Dscm.password=xxx" />
        </tasks>
      </job>
    </jobs>
  </stage>

 

到此貌似有个问题, ANT 只有一个 build.number 的机制,即在一个文件中记录任务执行的次数,但是这个参数无法被重命名,所以在导入到执行环境时,只能保留一个参数值,无法做到多级的版本自增逻辑。

Cruise Maven2 都没有此机制,看来,只能自己动手丰衣足食了。

抄起吃饭的家伙,花了一顿饭功夫搞定了个小小的 jar 包―― buildnumber ,专门用于多级版本号管理,既然 ANT 原生支持 java ,那么用它刷新版本号就易如反掌了,其实,这就是 build.xml 中名为 refresh 的子过程。

Buildnumber 从命令行读取参数,第一个为版本号存储的文件,这是一个标准的 properties 文本文件,默认是运行目录下的 version.properties ,如果文件不存在,则自动创建,初始号码均为 0 ;第二个是需要变更的版本号,支持 build (构建号)、 candidate (修正号)、 release (发布号)、 product (产品号),默认是 build

命令行( buildnumber 需要在 classpath 中):

java –jar buildnumber.jar my.properties release

 

返回结果:

update successful! new version is
product.number: 0
release.number: 1
candidate.number: 0
build.number: 0 

 

my.properties

#Auto generate by BuildNumber, don't edit it.
#Thu Sep 24 15:14:43 CST 2009
build.number=0
product.number=0
candidate.number=0
release.number=1 

 

将此文件放到一个不会被轻易变更的目录,并用系统环境变量引入 ANT (例子中使用了 VERSION_REPO 环境变量),就可以让 ANT 具备分级版本号自增功能啦,每执行一次 refresh ,那么指定的 build.type 对应的版本号就会自增。

自动 Tag

通常,对于代码的管理是基于 SCM 版本库的,所以,每次发布都在 SCM 中创建标记( tag )也是用于跟踪代码的一个重要工作。

当然,对于 ANT 来说,自动打 tag 那是小菜一碟,只需要调用 svn 插件的 copy 命令即可。

svn ANT 插件没有集成在标准包中,所以需要自行下载,并解压至 ANT_HOME\lib 中,并在 build.xml 中引入插件方可使用,具体代码如下:

	<!-- 
	*******************
	在svn上打tag 
	*******************
	-->
	<target name="tag">
	<property name="scm.srcurl" value="${scmurl}/trunk"/>
	<property name="scm.desturl" value="${scmurl}/tags/${build.version}"/>
    <!-- 引入svn插件 -->
	<taskdef name="svn" classname="org.tigris.subversion.svnant.SvnTask" />

	<svn username="${scm.username}" password="${scm.password}">
    <copy srcUrl="${scm.srcurl}"
      destUrl="${scm.desturl}"
	  message="Tag created by cruise on ${TODAY}" />
	</svn>		
	<echo message="new tag is ${build.version}"/>
	<echo message="success create tag at ${scm.desturl}"/>
	</target>

 

其中, scmurl scm.username scm.password 等变量是由 Cruise exec 标签传入的参数。

这样就可以在每次 deploy candidate release 之后,在 SCM 上创建 tag 了。

示例完整的 Cruise 配置、 build.xml pom.xml http://download.qihangsoft.net/cruise_config.zip

buildnumber 及其源码: http://download.qihangsoft.net/BuildNumber.zip

Maven2 完全使用手册: http://blog.csdn.net/wind5shy/archive/2007/10/18/1830826.aspx

ANT 入门教程: http://www.java3z.com/cwbwebhome/article/article2/2764.html?id=1271

tony1130 博客: http://blog.csdn.net/tony1130

 

1
0
分享到:
评论
1 楼 Tin 2009-09-24  
写的不错!

相关推荐

    CruiseControl+SVN+Maven+Tomcat持续集成环境搭建

    搭建CruiseControl+SVN+Maven+Tomcat持续集成环境,主要是为了实现代码的自动构建、测试和部署,从而提高开发效率,减少错误。整个过程涉及到多个工具的安装、配置和集成,确保每个环节都能正确工作,并通过权限管理...

    持续集成与自动化测试

    **搭建持续集成环境** 1. **设置SVN环境**:安装SVN Server和客户端,创建仓库并将项目置于版本控制之下。 2. **配置CruiseControl**:安装CruiseControl,从SVN检出项目至其项目目录,并配置config.xml文件以添加...

    Matlab环境下决策分类树的构建、优化与应用

    内容概要:本文详细介绍了如何利用Matlab构建、优化和应用决策分类树。首先,讲解了数据准备阶段,将数据与程序分离,确保灵活性。接着,通过具体实例展示了如何使用Matlab内置函数如fitctree快速构建决策树模型,并通过可视化工具直观呈现决策树结构。针对可能出现的过拟合问题,提出了基于成本复杂度的剪枝方法,以提高模型的泛化能力。此外,还分享了一些实用技巧,如处理连续特征、保存模型、并行计算等,帮助用户更好地理解和应用决策树。 适合人群:具有一定编程基础的数据分析师、机器学习爱好者及科研工作者。 使用场景及目标:适用于需要进行数据分类任务的场景,特别是当需要解释性强的模型时。主要目标是教会读者如何在Matlab环境中高效地构建和优化决策分类树,从而应用于实际项目中。 其他说明:文中不仅提供了完整的代码示例,还强调了代码模块化的重要性,便于后续维护和扩展。同时,对于初学者来说,建议从简单的鸢尾花数据集开始练习,逐步掌握决策树的各项技能。

    《营销调研》第7章-探索性调研数据采集.pptx

    《营销调研》第7章-探索性调研数据采集.pptx

    Assignment1_search_final(1).ipynb

    Assignment1_search_final(1).ipynb

    美团外卖优惠券小程序 美团优惠券微信小程序 自带流量主模式 带教程.zip

    美团优惠券小程序带举牌小人带菜谱+流量主模式,挺多外卖小程序的,但是都没有搭建教程 搭建: 1、下载源码,去微信公众平台注册自己的账号 2、解压到桌面 3、打开微信开发者工具添加小程序-把解压的源码添加进去-appid改成自己小程序的 4、在pages/index/index.js文件搜流量主广告改成自己的广告ID 5、到微信公众平台登陆自己的小程序-开发管理-开发设置-服务器域名修改成

    《计算机录入技术》第十八章-常用外文输入法.pptx

    《计算机录入技术》第十八章-常用外文输入法.pptx

    基于Andorid的跨屏拖动应用设计.zip

    基于Andorid的跨屏拖动应用设计实现源码,主要针对计算机相关专业的正在做毕设的学生和需要项目实战练习的学习者,也可作为课程设计、期末大作业。

    《网站建设与维护》项目4-在线购物商城用户管理功能.pptx

    《网站建设与维护》项目4-在线购物商城用户管理功能.pptx

    区块链_房屋转租系统_去中心化存储_数据防篡改_智能合约_S_1744435730.zip

    区块链_房屋转租系统_去中心化存储_数据防篡改_智能合约_S_1744435730

    《计算机应用基础实训指导》实训五-Word-2010的文字编辑操作.pptx

    《计算机应用基础实训指导》实训五-Word-2010的文字编辑操作.pptx

    《移动通信(第4版)》第5章-组网技术.ppt

    《移动通信(第4版)》第5章-组网技术.ppt

    ABB机器人基础.pdf

    ABB机器人基础.pdf

    《综合布线施工技术》第9章-综合布线实训指导.ppt

    《综合布线施工技术》第9章-综合布线实训指导.ppt

    最新修复版万能镜像系统源码-最终版站群利器持续更新升级

    很不错的一套站群系统源码,后台配置采集节点,输入目标站地址即可全自动智能转换自动全站采集!支持 https、支持 POST 获取、支持搜索、支持 cookie、支持代理、支持破解防盗链、支持破解防采集 全自动分析,内外链接自动转换、图片地址、css、js,自动分析 CSS 内的图片使得页面风格不丢失: 广告标签,方便在规则里直接替换广告代码 支持自定义标签,标签可自定义内容、自由截取、内容正则截取。可以放在模板里,也可以在规则里替换 支持自定义模板,可使用标签 diy 个性模板,真正做到内容上移花接木 调试模式,可观察采集性能,便于发现和解决各种错误 多条采集规则一键切换,支持导入导出 内置强大替换和过滤功能,标签过滤、站内外过滤、字符串替换、等等 IP 屏蔽功能,屏蔽想要屏蔽 IP 地址让它无法访问 ****高级功能*****· url 过滤功能,可过滤屏蔽不采集指定链接· 伪原创,近义词替换有利于 seo· 伪静态,url 伪静态化,有利于 seo· 自动缓存自动更新,可设置缓存时间达到自动更新,css 缓存· 支持演示有阿三源码简繁体互转· 代理 IP、伪造 IP、随机 IP、伪造 user-agent、伪造 referer 来路、自定义 cookie,以便应对防采集措施· url 地址加密转换,个性化 url,让你的 url 地址与众不同· 关键词内链功能· 还有更多功能等你发现…… 程序使用非常简单,仅需在后台输入一个域名即可建站,不限子域名,站群利器,无授权,无绑定限制,使用后台功能可对页面进行自定义修改,在程序后台开启生 成功能,只要访问页面就会生成一个本地文件。当用户再次访问的时候就直接访问网站本地的页面,所以目标站点无法访问了也没关系,我们的站点依然可以访问, 支持伪静态、伪原创、生成静态文件、自定义替换、广告管理、友情链接管理、自动下载 CSS 内的图。

    《Approaching(Almost)any machine learning problem》中文版第11章

    【自然语言处理】文本分类方法综述:从基础模型到深度学习的情感分析系统设计

    基于Andorid的下拉浏览应用设计.zip

    基于Andorid的下拉浏览应用设计实现源码,主要针对计算机相关专业的正在做毕设的学生和需要项目实战练习的学习者,也可作为课程设计、期末大作业。

    P2插电式混合动力系统Simulink模型:基于逻辑门限值控制策略的混动汽车仿真

    内容概要:本文详细介绍了一个原创的P2插电式混合动力系统Simulink模型,该模型基于逻辑门限值控制策略,涵盖了多个关键模块如工况输入、驾驶员模型、发动机模型、电机模型、制动能量回收模型、转矩分配模型、运行模式切换模型、档位切换模型以及纵向动力学模型。模型支持多种标准工况(WLTC、UDDS、EUDC、NEDC)和自定义工况,并展示了丰富的仿真结果,包括发动机和电机转矩变化、工作模式切换、档位变化、电池SOC变化、燃油消耗量、速度跟随和最大爬坡度等。此外,文章还深入探讨了逻辑门限值控制策略的具体实现及其效果,提供了详细的代码示例和技术细节。 适合人群:汽车工程专业学生、研究人员、混动汽车开发者及爱好者。 使用场景及目标:①用于教学和科研,帮助理解和掌握P2混动系统的原理和控制策略;②作为开发工具,辅助设计和优化混动汽车控制系统;③提供仿真平台,评估不同工况下的混动系统性能。 其他说明:文中不仅介绍了模型的整体架构和各模块的功能,还分享了许多实用的调试技巧和优化方法,使读者能够更好地理解和应用该模型。

    电力系统分布式调度中ADMM算法的MATLAB实现及其应用

    内容概要:本文详细介绍了基于ADMM(交替方向乘子法)算法在电力系统分布式调度中的应用,特别是并行(Jacobi)和串行(Gauss-Seidel)两种不同更新模式的实现。文中通过MATLAB代码展示了这两种模式的具体实现方法,并比较了它们的优劣。并行模式适用于多核计算环境,能够充分利用硬件资源,尽管迭代次数较多,但总体计算时间较短;串行模式则由于“接力式”更新机制,通常收敛更快,但在计算资源有限的情况下可能会形成瓶颈。此外,文章还讨论了惩罚系数rho的自适应调整策略以及在电-气耦合系统优化中的应用实例。 适合人群:从事电力系统优化、分布式计算研究的专业人士,尤其是有一定MATLAB编程基础的研究人员和技术人员。 使用场景及目标:①理解和实现ADMM算法在电力系统分布式调度中的应用;②评估并行和串行模式在不同应用场景下的性能表现;③掌握惩罚系数rho的自适应调整技巧,提高算法收敛速度和稳定性。 其他说明:文章提供了详细的MATLAB代码示例,帮助读者更好地理解和实践ADMM算法。同时,强调了在实际工程应用中需要注意的关键技术和优化策略。

    这篇文章详细探讨了交错并联Buck变换器的设计、仿真及其实现,涵盖了从理论分析到实际应用的多个方面(含详细代码及解释)

    内容概要:本文深入研究了交错并联Buck变换器的工作原理、性能优势及其具体实现。文章首先介绍了交错并联Buck变换器相较于传统Buck变换器的优势,包括减小输出电流和电压纹波、降低开关管和二极管的电流应力、减小输出滤波电容容量等。接着,文章详细展示了如何通过MATLAB/Simulink建立该变换器的仿真模型,包括参数设置、电路元件添加、PWM信号生成及连接、电压电流测量模块的添加等。此外,还探讨了PID控制器的设计与实现,通过理论分析和仿真验证了其有效性。最后,文章通过多个仿真实验验证了交错并联Buck变换器在纹波性能、器件应力等方面的优势,并分析了不同控制策略的效果,如P、PI、PID控制等。 适合人群:具备一定电力电子基础,对DC-DC变换器特别是交错并联Buck变换器感兴趣的工程师和技术人员。 使用场景及目标:①理解交错并联Buck变换器的工作原理及其相对于传统Buck变换器的优势;②掌握使用MATLAB/Simulink搭建交错并联Buck变换器仿真模型的方法;③学习PID控制器的设计与实现,了解其在电源系统中的应用;④通过仿真实验验证交错并联Buck变换器的性能,评估不同控制策略的效果。 其他说明:本文不仅提供了详细的理论分析,还给出了大量可运行的MATLAB代码,帮助读者更好地理解和实践交错并联Buck变换器的设计与实现。同时,通过对不同控制策略的对比分析,为实际工程应用提供了有价值的参考。

Global site tag (gtag.js) - Google Analytics