用MSBuild和Jenkins搭建持续集成环境(1)
你或其他人刚刚写完了一段代码,提交到项目的版本仓库里面。但等一下,如果新提交的代码把构建搞坏了怎么办?万一出现编译错误,或者有的测试失败了,或者代码不符合质量标准所要求的底限,你该怎么办?
最不靠谱的解决方案就是寄希望于所有人都是精英,他们根本不会犯这些错误。但如果真的出现了这些问题,我们就希望发现的越早越好。最好的方式就是只要有代码提交,我们就有某种方式对它进行验证。这就是持续集成的作用。
持续集成相关的工具有很多。最流行的要数一款基于Java的名叫Jenkins的工具。它提供了Web界面,用户可以在界面上配置Job,每个 Job都包含一系列的构建步骤。Jenkins可以完成开头那个场景中所提到的所有验证工作,它还能更进一步做自动化部署或者一键式部署。
Jenkins是由Sun的前员工开发的,它的根基是Java,但也可以用在非Java的项目里,比如PHP、Ruby on Rails、.NET。在.NET项目里,你除了Jenkins之外还要熟悉另一样工具:MSBuild。
Visual Studio用MSBuild构建.NET项目。MSBuild所需的仅仅是一个脚本,在脚本中指定要执行的target。项目中的.csproj和.vbproj 文件都是MSBuild脚本。
在这篇文章中,我们会从头开始,一步步完成一个属于我们自己的MSBuild脚本。在它完成以后,我们只需要一个命令就可以删除之前的构建产物,构 建.NET应用,运行单元测试。后面我们还会配一个Jenkins Job,让它从代码库中更新代码,执行MSBuild脚本。最后还会配另一个Jenkins Job,让它监听第一个Job的结果,当第一步成功以后,它会把相关的构建产物复制出来,放到web服务器里启动运行。
我们用一个ASP.NET MVC 3应用做例子,在VS里面创建ASP.NET MVC 3应用并选择“application”模版就行。我们还要用一个单元测试项目来跑测试。代码可以在这里下载。
你好,MSBuild
MSBuild是在.NET 2.0中引入的针对Visual Studio的构建系统。它可以执行构建脚本,完成各种Task──最主要的是把.NET项目编译成可执行文件或者DLL。从技术角度来说,制作EXE或 者DLL的重要工作是由编译器(csc,vbc等等)完成的。MSBuild会从内部调用编译器,并完成其他必要的工作(例如拷贝引用 ──CopyLocal,执行构建前后的准备及清理工作等)
这些工作都是MSBuild执行脚本中的Task完成的。MSBuild脚本就是XML文件,根元素是Project,使用MSBuild自己的命 名空间。MSBuild文件都要有Target。Target由Task组成,MSBuild运行这些Task,完成一个完整的目标。Target中可以 不包含Task,但是所有的Target都要有名字。
下面来一起创建一个“Hello World”的MSBuild脚本,先保证配置正确。我建议用VS来写,因为它可以提供IntelliSense支持,不过用文本编辑器也无所谓,因为只 是写个XML文件,IntelliSense的用处也不是很大。先创建一个XML文件,命名为“basics.msbuild”,这个扩展名只是个约定而 已,好让我们容易认出这是个MSBuild脚本,你倒不用非写这样的扩展名。给文件添加一个Project元素作为根元素,把 http://schemas.microsoft.com/developer/msbuild/2003设置成命名空间,如下所示
<Project xmlns="http://schemas.microsoft.com/developer/msbuild/2003"> </Project>
下一步,给Project元素添加一个Target元素,起名叫“EchoGreeting”
<Project xmlns="http://schemas.microsoft.com/developer/msbuild/2003"> <Target Name="EchoGreeting" /> </Project>
这就行了。我们已经有了一个可以运行的MSBuild脚本。它虽然还啥事都没干,但我们可以用它来验证当前环境是不是可以运行MSBuild脚本。 在运行脚本的时候,我们要用到.NET框架安装路径下的MSBuild可执行文件。打开命令行,执行“MSBuild /nologo /version”命令,看看.NET框架安装路径是不是放到了PATH环境变量里面。如果一切正确,你应该能看到屏幕上打印出MSBuild的当前版 本。倘若没有的话,或者把.NET框架安装路径放到PATH里面去,或者直接用Visual Studio Command Prompt,它已经把该配的都配好了。
进入存放刚才那个脚本的目录后,以文件名当作参数调用MSBuild,就可以执行脚本了。在我的机器上可以看到下面的执行结果:
C:\>msbuild basics.msbuild Microsoft (R) Build Engine Version 4.0.30319.1 [Microsoft .NET Framework, Version 4.0.30319.269] Copyright (C) Microsoft Corporation 2007. All rights reserved. Build started 8/2/2012 5:59:45 AM. Build succeeded. 0 Warning(s) 0 Error(s) Time Elapsed 00:00:00.03
执行完脚本以后,MSBuild会首先显示一个启动界面和版权信息(用 /nologo 开关可以隐藏掉它们)。接下来会显示一个启动时间,然后便是真正的构建过程。因为咱们的脚本啥都没干,所以构建就直接成功了。总计用时也会显示在界面上。 下面咱们来给EchoGreeting Target添加一个Task,让脚本真的干点事。
<Target Name="EchoGreeting"> lt;Exec Command="echo Hello from MSBuild" /> </Target>
现在EchoGreeting Target有了一个Exec Task,它会执行Command属性中定义的任何命令。再运行一次脚本,你应该能看到更多信息了。在大多数时候,MSBuild的输出信息都很长,你可 以用 /verbosity 开关来只显示必要信息。不过无论怎样,MSBuild都会把我们的文字显示到屏幕上。下面再添加一个Target。
<Target Name="EchoDate"> <Exec Command="echo %25date%25" /> </Target>
这个Target会输出当前日期。它的命令要做的事情就是“echo %25date%25”,但是“%”字符在MSBuild中有特殊含义,所以这个命令需要被转义。当遇到转义字符的时候,“%”后面的十进制字符会被转成 对应的ASCII码。MSBuild只会执行Project元素中的第一个Target。要执行其他Target的时候,需要把/target开关(可简 写为 /t)加上Target名称传给MSBuild。你也可以指定MSBuild执行多个Target,只要用分号分割Target名字就可以。
C:\>msbuild basics.msbuild /nologo /verbosity:minimal /t:EchoGreeting;EchoDate Hello from MSBuild Thu 08/02/2012
更实用的构建脚本
演示就先到这里。下面来用MSBuild来构建一个真实项目。首先把示例代码下载下来,或是自己创建一个ASP.NET应用。给它添加一个MSBuild脚本,以solution或project名字给脚本命名,扩展名用“.msbuild”。照先前一样指定MSBuild命名空间。
开始写脚本之前,先把脚本要干的事情列出来:
- 创建BuildArtifacts目录
- 构建solution,把构建产物(DLL,EXE,静态内容等等)放到BuildArtifacts目录下。
- 运行单元测试。
因为示例应用叫做HelloCI,于是这个脚本也就命名为HelloCI.msbuild。先添加命名空间,然后就可以添加第一个Target了,我管它叫做Init。
<Target Name="Init"> <MakeDir Directories="BuildArtifacts" /> </Target>
这个Target会调用MakeDir Task创建一个新的目录,名叫BuildArtifacts,跟脚本在同一目录下。运行脚本,你会发现该目录被成功创建。如果再次运行,MSBuild就会跳过这个Task,因为同名目录已经存在了。
接下来写一个Clean Target,它负责删除BuildArtifacts目录和里面的文件。
<Target Name="Clean"> <RemoveDir Directories="BuildArtifacts" /> </Target>
理解了Init之后,这段脚本就应该很好懂了。试着执行一下,BuildArtifacts目录应该就被删掉了。下面再来把代码中的重复干掉。在 Init和Clean两个Target里面,我们都把BuildArtifacts的目录名硬编码到代码里面了,如果未来要修改这个名字的话,就得同时改 两个地方。这里可以利用Item或Property避免这种问题。
Item和Property只有些许差别。Property由简单的键值对构成,在脚本执行的时候还可以用 /property 赋值。Item更强大一些,它可以用来存储更复杂的数据。我们这里不用任何复杂数据,但需要用Items获取额外的元信息,例如文件全路径。
接下来修改一下脚本,用一个Item存放路径名,然后修改Init和Clean,让它们引用这个Item。
<ItemGroup> <BuildArtifactsDir Include="BuildArtifacts\" /> </ItemGroup> <Target Name="Init"> <MakeDir Directories="@(BuildArtifactsDir)" /> </Target> <Target Name="Clean"> <RemoveDir Directories="@(BuildArtifactsDir)" /> </Target>
Item是在ItemGroup里面定义的。在一个Project中可以有多个ItemGroup元素,用来把有关系的Item分组。这个功能在 Item较多的时候特别有用。我们在ItemGroup里定义了BuildArtifactsDir元素,并用Include属性指定 BuildArtifacts目录。记得BuildArtifacts目录后面要有个斜杠。最后,我们用了@(ItemName)语法在Target里面 引用这个目录。现在如果要修改目录名的话,只需要改BuildArtifactsDir的Include属性就好了。
接下来还有个问题要处理。在BuildArtifacts目录已经存在的情况下,Init是什么事都不干的。也是就说,在调用Init的时候磁盘上 的已有文件还会被保留下来。这一点着实不妥,如果能每次调用Init的时候,都把目录和目录里面的所有文件都一起删掉再重新创建,就能保证后续环节都在干 净的环境下执行了。我们固然可以在每次调用Init的时候先手工调一下Clean,但给Init Target加一个DependsOnTargets属性会更简单,这个属性会告诉MSBuild,每次执行Init的时候都先执行Clean。
<Target Name="Init" DependsOnTargets="Clean"> <MakeDir Directories="@(BuildArtifactsDir)" /> </Target>
现在MSBuild会帮我们在调Init之前先调Clean了。跟DependsOnTargets这个属性所暗示的一样,一个Target可以依赖于多个Target,之间用分号分割就行。
接下来我们要编译应用程序,把编译后的结果放到BuildArtifacts目录下。先写一个Compile Target,让它依赖于Init。这个Target会调用另一个MSBuild实例来编译应用。我们把BuildArtifacts目录传进去,作为编 译结果的输出目录。
<ItemGroup> <BuildArtifactsDir Include="BuildArtifacts\" /> <SolutionFile Include="HelloCI.sln" /> </ItemGroup> <PropertyGroup> <Configuration Condition=" '$(Configuration)' == '' ">Release</Configuration> <BuildPlatform Condition=" '$(BuildPlatform)' == '' ">Any CPU</BuildPlatform> </PropertyGroup> <Target Name="Compile" DependsOnTargets="Init"> <MSBuild Projects="@(SolutionFile)" Targets="Rebuild" Properties="OutDir=%(BuildArtifactsDir.FullPath);Configuration=$(Configuration);Platform=$(BuildPlatform)" /> </Target>
上面的脚本做了几件事情。首先,ItemGroup添加了另一个Item,叫做SolutionFile,它指向solution文件。在构建脚本中用Item或Property代替硬编码,这算的是一个优秀实践吧。
其次,我们创建了一个PropertyGroup,里面包含两个Property:Configuration和BuildPlatform。它们 的值分别是“Release”和“Any CPU”。当然,Property也可以在运行时通过/property(简写为/p)赋值。我们还用了Condition属性,它在这里的含义是,只有 当这两个属性没有值的情况下,才用我们定义的数据给它们赋值。这段代码实际上就是给它们一个默认值。
接下来就是Compile Target了,它依赖于Init,里面内嵌了一个MSBuild Task。它在运行的时候会调用另外一个MSBuild实例。在脚本中定义了这个被内嵌的MSBuild Task要操作的项目。在这里,我们既可以传入另外一个MSBuild脚本,也可以传入.csproj文件(它本身也是个MSBuild脚本)。但我们选 择了传入HelloCI应用的solution文件。Solution文件不是MSBuild脚本,但是MSBuild可以解析它。脚本中还指定了内嵌的 MSBuild Task要执行的Target名称:“Rebuild”,这个Target已经被导入到solution的.csproj文件中了。最后,我们给内嵌的 Task传入了三个Property。
OutDir
编译结果的输出目录
Configuration
构建(调试、发布等)时要使用的配置
Platform
编译所用的平台(x86、x64等)
给上面这三个Property赋值用的就是先前定义的Item和Property。OutDir Property用的是BuildArtifacts目录的全路径。这里用了%(Item.MetaData) 语法。这个语法应该看起来很眼熟吧?就跟访问C#对象属性的语法一样。MSBuild创建出来的任何Item,都提供了某些元数据以供访问,例如 FullPath和ModifiedTime。但这些元数据有时候也没啥大用,因为Item不一定是文件。
Configuration和Platform用到了先前定义好的Property,语法格式是$(PropertyName)。在这里可以看到系统保留的一些属性名,用户不能更改。定义Property的时候请不要用它们。
这里还有些东西值得提一下。用了Property以后,我们可以在不更改构建脚本的情况下使用不同的Configuration或者 BuildPlatform,只要在运行的时候用 /property 传值进去就行。所以“msbuild HelloCI.msbuild /t:Compile /p:Configuration:Debug”这个命令会用Debug配置构建项目,而“msbuild HelloCI.msbuild /t:Compile /p:Configuration:Test;BuildPlatform:x86”会在x86平台下使用Test配置。
现在运行Compile,就可以编译solution下的两个项目,把编译结果放到BuildArtifacts目录下。在完成构建脚本之前,只剩下最后一个Target了:
<ItemGroup> <BuildArtifacts Include="BuildArtifacts\" /> <SolutionFile Include="HelloCI.sln" /> <NUnitConsole Include="C:\Program Files (x86)\NUnit 2.6\bin\nunit-console.exe" /> <UnitTestsDLL Include="BuildArtifacts\HelloCI.Web.UnitTests.dll" /> <TestResultsPath Include="BuildArtifacts\TestResults.xml" /> </ItemGroup> <Target Name="RunUnitTests" DependsOnTargets="Compile"> <Exec Command='"@(NUnitConsole)" @(UnitTestsDLL) /xml=@(TestResultsPath)' /> </Target>
ItemGroup里现在又多了三个Item:NUnitConsole指向NUnit控制台运行器(console runner);UnitTestDLL指向单元测试项目生成的DLL文件;TestResultsPath是要传给NUnit的,这样测试结果就会放到 BuildArtifacts目录下。
RunUnitTests Target用到了Exec Task。如果有一个测试运行失败,NUnit控制台运行器会返回一个非0的结果。这个返回值会告诉MSBuild有个地方出错了,于是整个构建的状态就是失败。
现在这个脚本比较完善了,用一个命令就可以删除旧的构建产物、编译、运行单元测试:
C:\HelloCI\> msbuild HelloCI.msbuild /t:RunUnitTests
我们还可以给脚本设一个默认Target,就省得某次都要指定了。在Project元素上加一个DefaultTargets属性,让RunUnitTests成为默认Target。
<Project xmlns="http://schemas.microsoft.com/developer/msbuild/2003" DefaultTargets="RunUnitTests">
你还可以创建自己的Task。这里有个例子,AsyncExec,它允许人们以异步的方式执行命令。比如有个Target用来启动Web服务器,要是用Exec命令的话,整个构建都会停住,直到服务器关闭。用AsyncExec这个命令可以让构建继续执行,不用等待命令执行结束。
本文的完整脚本可以在这里下载。
在接下来的文章中,我会讲述如何配置Jenkins。我们不再需要手动运行命令来构建整个项目,Jenkins会检测代码库,一旦有更新就会自动触发构建。
查看英文原文:Continuous Integration with MSBuild and Jenkins – Part 1
相关推荐
用MSBuild和Jenkins搭建持续集成环境.你或其他人刚刚写完了一段代码,提交到项目的版本仓库里面。但等一下,如果新提交的代码把构建搞坏了怎么办?万一出现编译错误,或者有的测试失败了,或者代码不符合质量标准所...
本文主要介绍了一种基于Jenkins的持续集成自动化搭建方法,结合了Msbuild、SVN、Python和Jmeter等工具,适用于.NET环境下的项目。以下是详细的知识点解析: 1. **Jenkins**:作为持续集成的核心工具,Jenkins是一款...
在介绍了持续集成环境的搭建之后,文章还提到了几个实际应用的例子,通过这些例子可以更直观地了解持续集成脚本的编写和应用。这些实践不仅提升了团队的协作效率,也显著提高了代码质量,进而增强了产品的稳定性和...
本配置指南详细阐述了如何使用Jenkins实现一套基于SVN、NuGet、MSBuild和FTP的持续集成流程。通过这个流程,你可以从SVN代码库拉取代码,利用NuGet获取项目依赖,通过MSBuild编译.NET应用程序,最后将编译结果通过...
标题中的“持续集成JAVA和C#”指的是在软件开发过程中,使用自动化工具将开发者提交的代码频繁地合并到主分支,并进行构建和测试的过程。这种做法可以尽早发现并解决潜在问题,提高软件质量和团队协作效率。Java和C#...
Jenkins 是一款开源的持续集成(Continuous Integration, CI)工具,用于自动化各种软件开发任务,如构建、测试和部署。它支持多种编程语言和构建工具,如Java、C#等,并且拥有丰富的插件生态系统,使得扩展功能变得...
其压缩包内的各个组件协同工作,确保了分析的高效性和准确性,为开发团队提供了一套完整的持续集成和持续质量检查解决方案。通过理解这些组件的功能和作用,我们可以更好地利用SonarScanner MSBuild提升项目质量,...
在.NET 2003时代,构建过程主要依赖于集成开发环境(IDE)进行控制,这种方式存在明显的局限性,比如构建逻辑不透明、难以管理和扩展等。为了解决这些问题,微软在.NET 2005中引入了MSBuild作为新的构建引擎,它提供了...
总的来说,理解和掌握MSBuild对于.NET开发者至关重要,它不仅是构建.NET项目的工具,也是实现自动化构建和持续集成的关键组件。通过深入学习MSBuild的工作原理和使用技巧,开发者可以更高效地管理和维护他们的项目...
通过Azure Pipelines,代码在提交时或按预定时间自动编译、测试和部署,确保持续集成和持续部署(CI/CD)的顺利进行。 **总结** MSBuild是.NET生态系统中的关键组件,它提供了灵活的构建解决方案,不仅可以与Visual...
基于MSBuild的daily build流程是指使用MSBuild工具来自动化整个构建过程,使得开发团队可以更方便地管理和维护构建流程。MSBuild是一款强大且灵活的构建工具,可以直接读取csproj文件,控制csc/vbc等编译器,生成...
1. 构建服务器:Jenkins 需要与 Git 和 Msbuild 配合使用,以实现版本控制和构建过程。Git 用于代码管理,Msbuild 是 .NET 平台的构建工具。在这里,我们选择的是 JDK 1.8.0_121 版本,因为它兼容 Jenkins 的要求。...
在MSBuild 12.0中,重点在于与Visual Studio 2013的集成,引入了一些关键改进,如性能优化、更好的错误和警告消息,以及对.NET Framework 4.5.1的支持。这个版本还引入了新的任务和目标,使得自动化构建流程更加灵活...
本书主要介绍了微软构建工具集的核心组件——MSBuild以及如何在软件开发过程中高效利用MSBuild和Team Foundation Build进行自动化构建和持续集成。 #### 二、MSBuild简介 MSBuild(Microsoft Build Engine)是微软...
1. **安装和配置 Slave 节点**:在每台从节点上安装 Jenkins Slave Agent,并配置连接到主节点的信息。 2. **在 Master 节点上添加 Slave**:通过 Jenkins Web UI 添加新的 Slave 节点,配置名称、标签、JNLP agent ...
Jenkins 是一款流行的自动化构建工具,广泛应用于软件开发、测试和部署过程中。本文将详细介绍 Jenkins 的自动发布配置,包括安装、插件选择、全局配置、应用服务器设置、编译项目、自动发布项目和回滚项目等方面的...
标题中的"sonar-scanner-msbuild-5.0.4.24009-net46.zip"指的是一款名为SonarScanner的.NET版本构建工具的压缩包,用于.NET...通过与MSBuild和TFS的集成,它简化了在持续集成/持续部署(CI/CD)流程中的代码质量管理。
MSBuild是微软开发的一种构建工具,它...对于大型工程,良好的MSBuild配置能提高开发效率,减少错误,并简化持续集成和部署流程。在使用"MSBuild.rar"中的内容时,确保备份原有设置,谨慎操作,以免破坏现有构建流程。
grunt-msbuild, 用于MSBuild和XBuild的Grunt插件 grunt-msbuild使用Grunt生成带有MSBuild和XBuild的项目正在启动这个插件需要 Grunt ~0.4.0 。 换句话说,它应该在 0.4.0或者更高版本上工作。If之前,请务必先查看...