`

[转]浅谈怎样加快C++代码的编译速度

 
阅读更多
C++代码一直以其运行时的高性能高调面对世人, 但是说起编译速度,却只有低调的份了。本文介绍了加快C++编译速度的方法,一起来看。
AD:
C++代码一直以其运行时的高性能高调面对世人, 但是说起编译速度,却只有低调的份了。比如我现在工作的源代码,哪怕使用Incredibuild调动近百台机子,一个完整的build也需要四个小时,恐怖!!!虽然平时开发一般不需要在本地做完整的build,但编译几个相关的工程就够你等上好一段时间的了(老外管这个叫monkey around,相当形象)。想想若干年在一台单核2.8GHZ上工作时的场景 - 面前放本书,一点build按钮,就低头读一会书~~~往事不堪回首。

可以想象,如果不加以重视,编译速度极有可能会成为开发过程中的一个瓶颈。那么,为什么C++它就编译的这么慢呢?

我想最重要的一个原因应该是C++基本的"头文件-源文件"的编译模型:

1.每个源文件作为一个编译单元,可能会包含上百甚至上千个头文件,而在每一个编译单元,这些头文件都会被从硬盘读进来一遍,然后被解析一遍。

2.每个编译单元都会产生一个obj文件,然后所以这些obj文件会被link到一起,并且这个过程很难并行。
这里,问题在于无数头文件的重复load与解析,以及密集的磁盘操作。

下面从各个角度给出一些加快编译速度的做法,主要还是针对上面提出的这个关键问题。

一、代码角度

1、在头文件中使用前置声明,而不是直接包含头文件。

不要以为你只是多加了一个头文件,由于头文件的"被包含"特性,这种效果可能会被无限放大。所以,要尽一切可能使头文件精简。很多时候前置申明某个namespace中的类会比较痛苦,而直接include会方便很多,千万要抵制住这种诱惑;类的成员,函数参数等也尽量用引用,指针,为前置声明创造条件。

2、使用Pimpl模式

Pimpl全称为Private Implementation。传统的C++的类的接口与实现是混淆在一起的,而Pimpl这种做法使得类的接口与实现得以完全分离。如此,只要类的公共接口保持不变,对类实现的修改始终只需编译该cpp;同时,该类提供给外界的头文件也会精简许多。

3、高度模块化

模块化就是低耦合,就是尽可能的减少相互依赖。这里其实有两个层面的意思。一是文件与文件之间,一个头文件的变化,尽量不要引起其他文件的重新编译;二是工程与工程之间,对一个工程的修改,尽量不要引起太多其他工程的编译。这就要求头文件,或者工程的内容一定要单一,不要什么东西都往里面塞,从而引起不必要的依赖。这也可以说是内聚性吧。

以头文件为例,不要把两个不相关的类,或者没什么联系的宏定义放到一个头文件里。内容要尽量单一,从而不会使包含他们的文件包含了不需要的内容。记得我们曾经做过这么一个事,把代码中最"hot"的那些头文件找出来,然后分成多个独立的小文件,效果相当可观。

其实我们去年做过的refactoring,把众多DLL分离成UI与Core两个部分,也是有着相同的效果的 - 提高开发效率。

4、删除冗余的头文件

一些代码经过上十年的开发与维护,经手的人无数,很有可能出现包含了没用的头文件,或重复包含的现象,去掉这些冗余的include是相当必要的。当然,这主要是针对cpp的,因为对于一个头文件,其中的某个include是否冗余很难界定,得看是否在最终的编译单元中用到了,而这样又可能出现在一个编译单元用到了,而在另外一个编译单元中没用到的情况。

之前曾写过一个Perl脚本用来自动去除这些冗余的头文件,在某个工程中竟然去掉多达了5000多个的include。

5、特别注意inline和template

这是C++中两种比较"先进"的机制,但是它们却又强制我们在头文件中包含实现,这对增加头文件的内容,从而减慢编译速度有着很大的贡献。使用之前,权衡一下。

二、综合技巧

1、预编译头文件(PCH)

把一些常用但不常改动的头文件放在预编译头文件中。这样,至少在单个工程中你不需要在每个编译单元里一遍又一遍的load与解析同一个头文件了。

2、Unity Build

Unity Build做法很简单,把所有的cpp包含到一个cpp中(all.cpp) ,然后只编译all.cpp。这样我们就只有一个编译单元,这意味着不需要重复load与解析同一个头文件了,同时因为只产生一个obj文件,在链接的时候也不需要那么密集的磁盘操作了,估计能有10x的提高,看看这个视频感受一下其做法与速度吧。

3、ccache

compiler cache, 通过cache上一次编译的结果,使rebuild在保持结果相同的情况下,极大的提高速度。我们知道如果是build,系统会对比源代码与目标代码的时间来决定是否要重新编译某个文件,这个方法其实并不完全可靠(比如从svn上拿了上个版本的代码),而ccache判断的原则则是文件的内容,相对来讲要可靠的多。

很可惜的是,Visual Studio现在还不支持这个功能 - 其实完全可以加一个新的命令,比如cache build,介于build与rebuild之间,这样,rebuild就可以基本不用了。

4、不要有太多的Additional Include Directories

编译器定位你include的头文件,是根据你提供的include directories进行搜索的。可以想象,如果你提供了100个包含目录,而某个头文件是在第100个目录下,定位它的过程是非常痛苦的。组织好你的包含目录,并尽量保持简洁。

三、编译资源

要提高速度,要么减少任务,要么加派人手,前面两个方面讲得都是减少任务,而事实上,在提高编译速度这块,加派人手还是有着非常重要的作用的。

1、并行编译

买个4核的,或者8核的cpu,每次一build,就是8个文件并行着编,那速度,看着都爽。 要是你们老板不同意,让他读读这篇文章:Hardware is Cheap, Programmers are Expensive

2、更好的磁盘

我们知道,编译速度慢很大一部分原因是磁盘操作,那么除了尽可能的减少磁盘操作,我们还可以做的就是加快磁盘速度。比如上面8个核一块工作的时候,磁盘极有可能成为最大的瓶颈。买个15000转的磁盘,或者SSD,或者RAID0的,总之,越快越好。

3、分布式编译

一台机子的性能始终是有限的,利用网络中空闲的cpu资源,以及专门用来编译的build server来帮助你编译才能从根本上解决我们编译速度的问题,想想原来要build 1个多小时工程的在2分钟内就能搞定,你就知道你一定不能没有它 - Incredibuild。

4、并行,其实还可以这么做。

这是一个比较极端的情况,如果你用了Incredibuild,对最终的编译速度还是不满意,怎么办?其实只要跳出思维的框架,编译速度还是可以有质的飞跃的 - 前提是你有足够多的机器:

假设你有solution A和solution B,B依赖于A,所以必须在A之后Build B。其中A,B Build各需要1个小时,那么总共要2个小时。可是B一定要在A之后build吗?跳出这个思维框架,你就有了下述方案:

◦同时开始build A和B 。

◦A的build成功,这里虽然B的build失败了,但都只是失败在最后的link上。

◦重新link B中的project。

这样,通过让A的build与B的编译并行,最后link一下B中的project,整个编译速度应该能够控制在1个小时15分钟之内。

原文链接:http://www.debuggingnow.com/blog/2010/01/how-to-improve-build-performance-of-cpp-code.html

希望本文能给你帮助。

转自:http://developer.51cto.com/art/201105/264158.htm
分享到:
评论

相关推荐

    浅谈c语言和c++和VB的区别.docx.pdf

    C++的开发环境通常支持项目工程管理,将不同的源代码和资源文件分开管理,使得开发大型应用程序更为方便。 6. 开发环境和工具: C++有功能强大的集成开发环境(IDE),例如Visual Studio,它提供了丰富的工具和功能...

    C++:浅谈修饰符const

    9. const在实际编程中的应用:理解const的不同用途以及如何正确使用它,对于编写高效且可靠的C++代码至关重要。合理利用const修饰符可以减少很多运行时错误,并且增加程序的可维护性。 总之,const修饰符是C++语言...

    C++技术

    这份文档可能通过实例和解释,帮助读者掌握如何正确理解和写出复杂的声明,这对于阅读和编写C++代码是必不可少的技能。 5. **VC++的链接错误LNK2001.doc** LNK2001是Visual C++编译过程中常见的链接错误,通常...

    浅谈Python程序与C++程序的联合使用

    但是,ctypes无法直接调用C++代码,因为C++使用了名字修饰(name mangling)技术来实现函数重载,这意味着所有C++函数的名称在编译后都会被修改。因此,如果需要与C++代码交互,C++程序员必须提供符合C语言调用约定...

    浅谈C/C++中的static与extern关键字的使用详解

    2. **加速编译**:使用`extern`声明变量或函数,可以避免重复定义,从而加快编译速度。如果直接`#include`另一个文件,编译器会读取整个文件,而`extern`只需声明。 3. **C++中的extern "C"**:在C++中,`extern "C...

    浅谈VC中预编译的头文件放那里的问题分析

    预编译头文件则将这些公共的、不常改变的头文件一次性处理,生成预编译对象文件(通常为`.pch`文件),之后的编译过程中只需链接这个预编译好的对象,显著提高了编译速度。 在VC++中,预编译头文件的标准实现是`...

    浅谈JNI技术在嵌入式软件开发中的应用-信息技术教学论文.doc

    JNI(Java Native Interface)技术是Java平台中用于连接Java代码和本地(非Java)代码的接口,它允许Java程序员调用C/C++等本地代码,同时也允许本地代码调用Java对象和方法。在嵌入式软件开发中,JNI技术扮演着重要...

    机器语言浅谈.pdf

    1. 直接执行:由于机器语言是计算机硬件直接理解的语言,所以它的执行速度非常快,没有任何翻译或解释过程。 2. 效率高:由于其直接性和高效性,机器语言编写的程序通常比高级语言编写的程序运行更快,占用资源更少...

    浅谈计算机编程语言的发展.pdf

    而高级语言,如VB、VC、Python、Java等,提供更为抽象的语法,简化了编程过程,同时分为解释型和编译型,前者如Python,后者如C++,分别有不同的执行机制。 5. **编程语言的流行趋势** Tiobe指数等排行榜反映了...

    浅谈计算机应用软件开发中编程语言的选择研究中英文对照.pdf

    浅谈计算机应用软件开发中编程语言的选择研究 随着信息技术的飞速发展,计算机应用软件已经深入到我们生活的各个角落,成为现代社会不可或缺的一部分。对于软件开发企业来说,选择合适的编程语言至关重要,因为它...

    嵌入式C/C++语言精华文章集锦

    - **链接兼容性**:使用`extern "C"`声明的函数会被按照C的规则来链接,这样即使在C++代码中也可以直接调用C库中的函数。 - **示例**:如果有一个C++程序需要调用C库中的函数`foo`,那么在C++代码中应该这样声明: ...

    浅谈 Node.js 模块机制及常见面试问题解答1

    3. **编译执行**:加载并执行找到的模块文件,如果是.js文件,会以同步方式执行,确保模块加载完毕后才继续执行其他代码。 面试中常见的问题包括: - **require的加载机制**:require函数会首先检查缓存,如果找到...

    浅谈基于C语言的计算机软件编程 (1).pdf

    5. 效率高:C语言编写的程序执行效率高,程序紧凑,运行速度快,特别适合于性能要求较高的应用场景。 在使用C语言进行编程的过程中,有一些技巧是必须掌握的: - 理解指针:指针是C语言中一个非常重要的概念,它...

    浅谈计算机软件开发的JAVA编程语言.pdf

    其次,JAVA语言在编程模式上偏向于对象导向,与C++等语言相比,JAVA更注重于对象的使用,并且在编译时生成二进制字节码,这在执行时通过Java虚拟机进行解释,这种编译机制使得JAVA语言的应用更为广泛和安全。...

    积分管理系统java源码-WebAssembly:让C/C++在浏览器中运行

    WebAssembly是一种新型的二进制格式,文件体积更小,启动速度&运行速度更快; WebAssembly是多种编程语言的编译目标,包括C和C++; WebAssembly开始被应用于Web浏览器之外的领域,如区块链和内容分发网络(CDN); 最初...

    浅谈内联函数与宏定义的区别详解

    内联函数与宏定义是C++编程中两种常见的代码优化手段,它们都可以用于替代简单的函数调用,以减少函数调用带来的开销。然而,两者之间存在显著的区别和优缺点。 首先,内联函数是在编译期间进行展开的,它允许...

    浅谈iOS关于头文件的导入问题

    在iOS开发中,头文件(Header Files)的导入是日常编码过程中常见的操作,但如何高效、合理地使用它们,往往关系到项目的可维护性和编译速度。本文将深入探讨`import`与`@class`的使用及其在解决类之间相互引用问题...

    浅谈Android Studio3.6 更新功能

    View binding 可以在代码中引用视图时提供编译时安全性。现在,您可以使用自动生成的绑定类引用替换 findViewById()。要开始使用 View binding,请在每个模块的 build.gradle 文件中包括以下内容:android { view...

    浅谈Android Classloader动态加载分析

    后续启动时,系统将直接使用ODEX文件,而不是重新解析DEX,从而加快启动速度。 7. **ClassLoader工作流程** 类加载器遵循双亲委托模型,当一个类加载请求到来时,ClassLoader会首先询问父加载器是否已经加载过该类...

Global site tag (gtag.js) - Google Analytics