如何提高工程编译速度-程序员宅基地
技术标签： python java ubuntu linux 大数据
点击上方蓝字可直接关注！方便下次阅读。如果对你有帮助，麻烦点个在看或点个赞，感谢~ 文章首发 公众号—— Pou光明
公众号还在维护，大家莫慌~
Linux Qt 平台为例测试
编译总量 = 编译速度 * 编译时间
按照上面等式进行优化，则：
在编译总量不变的前提下，要减少编译时间，则可提升编译速度；
或在编译速度不变的情况下，较少编译总量；
再或者既减少编译总量又提高编译速度。
C/C++编译特点
C/C++ 编译单位是文件，无法进行跨模块优化，C++20可支持。
将.o文件链接在一起时很难并行。
预处理过程可并行进行。
提高编译速度
1 减小编译总量
包含大量头文件会导致预处理时间变长，针对此尽量使用前置声明。
Pimpl(Private Implementation)模式与不透明指针。
高内聚、低耦合，减少模块间的依赖。
删除不必要的头文件。
2 提高编译速度
在提升编译速度上，可以增加编译机器数量或者提高单机编译能力。针对整体工程。
2.1 提高单机编译能力
多核编译
make -j*
#减少重复编译相同代码的时间
ccache
解决IO瓶颈，充分利用内存资源，头文件非常多，预处理时需要反复从磁盘读取文件
tmpfs
2.2 使用多机进行
distcc ：分布式编译，利用多台计算机资源共同编译一个程序，
可用于内核或者大型程序(**未做测试**)，简单讲链接过程在主机进行。
icecc : distcc升级版
Qt多核编译与ccache使用具体操作流程
1 Qt 设置多核编译
Qt侧边栏 Projects -> Build -> Build Steps
注意虚拟机配置核数。
2 ccache 安装及配置步骤
2.1 ccache安装
sudo apt-get install ccache
ccache -V 可查看是否安装成功
安装完成后默认缓存路径为~/.ccache ，默认缓存空间配置为5G
2.2 Qt中配置ccache
#Qt pro中添加
equals(COMPILE,2){
QMAKE_CXX = ccache g++
}
需在Qt->Projects->Build Steps->Additionals arguments 配置变量，如图
注：使用软链接、配置环境变量等方式无法完成Qt自动使用ccache，qmake生成的Makefile中未使用ccache.
Qt使用分布式编译icecc具体操作流程
1 Qt 设置多核编译，设置如上
２.1 1icecc 及gui工具安装
sudo apt-get install icecc
sudo apt install icecc-monitor#在终端使用icemon命令进行查看
#开机后icecc-scheduler(调度器)可自动启动，如未启动，可使用systemctl start icecc-scheduler命令启动
一个调度器，两个编译机图示。
２.２ icecc 相关设置
如果在ui工具中无法搜索到调度机与客户机，可使用下面命令查看防火墙状态。如果状态为inactive，则无需进行其他设置。
sudo ufw status# Status: inactive
如果状态为active，则需添加相关端口。
sudo ufw allow 10245/tcp #添加TCP/10245端口
TCP/10245 on the daemon computers (required)
TCP/8765 for the the scheduler computer (required)
TCP/8766 for the telnet interface to the scheduler (optional)
UDP/8765 for broadcast to find the scheduler (optional)
３ Qt中使用icecc
#Qt pro中添加
equals(COMPILE,2){
QMAKE_CXX = icecc g++
}
Qt使用icecc及ccache
Qt pro中添加
equals(COMPILE,2){
QMAKE_CXX = icecc ccache g++
}
icecc不同电脑间组成局域网
1 虚拟机开发环境相关设置(VMWare为例)
1.1 查看windows无线网卡
ipconfig /all
无线局域网适配器 描述 如 Intel(R) Wi-Fi 6 AX200 160MHz
1.２ 设置VMWare Vmnet信息
编辑->虚拟网络编辑器->更改设置->设置桥接模式->已桥接至选择第一步windows无线网卡信息
1.3设置虚拟机网络适配器为桥接模式
1.4关闭Windows无线网络使用的防火墙
1.5 重启电脑
1.6测试效果
2 ubuntu开发环境相关设置
连接无线即可.
测试效果
3 使用效果总结
尽可能提高编译主机核数以增加Active jobs
各个编译机调度受网速影响
智能推荐
解决win10/win8/8.1 64位操作系统MT65xx preloader线刷驱动无法安装_mt65驱动-程序员宅基地
文章浏览阅读1.3w次。转载自 http://www.miui.com/thread-2003672-1-1.html 当手机在刷错包或者误修改删除系统文件后会出现无法开机或者是移动定制（联通合约机）版想刷标准版，这时就会用到线刷，首先就是安装线刷驱动。 在XP和win7上线刷是比较方便的，用那个驱动自动安装版，直接就可以安装好，完成线刷。不过现在也有好多机友换成了win8/8.1系统，再使用这个_mt65驱动
SonarQube简介及客户端集成_sonar的客户端区别-程序员宅基地
文章浏览阅读1k次。SonarQube是一个代码质量管理平台，可以扫描监测代码并给出质量评价及修改建议，通过插件机制支持25+中开发语言，可以很容易与gradle\maven\jenkins等工具进行集成，是非常流行的代码质量管控平台。通CheckStyle、findbugs等工具定位不同，SonarQube定位于平台，有完善的管理机制及强大的管理页面，并通过插件支持checkstyle及findbugs等既有的流..._sonar的客户端区别
元学习系列（六）：神经图灵机详细分析_神经图灵机方法改进-程序员宅基地
文章浏览阅读3.4k次，点赞2次，收藏27次。神经图灵机是LSTM、GRU的改进版本，本质上依然包含一个外部记忆结构、可对记忆进行读写操作，主要针对读写操作进行了改进，或者说提出了一种新的读写操作思路。神经图灵机之所以叫这个名字是因为它通过深度学习模型模拟了图灵机，但是我觉得如果先去介绍图灵机的概念，就会搞得很混乱，所以这里主要从神经图灵机改进了LSTM的哪些方面入手进行讲解，同时，由于模型的结构比较复杂，为了让思路更清晰，这次也会分开几..._神经图灵机方法改进
【机器学习】机器学习模型迭代方法(Python)-程序员宅基地
文章浏览阅读2.8k次。一、模型迭代方法机器学习模型在实际应用的场景，通常要根据新增的数据下进行模型的迭代，常见的模型迭代方法有以下几种：1、全量数据重新训练一个模型，直接合并历史训练数据与新增的数据，模型直接离线学习全量数据，学习得到一个全新的模型。优缺点：这也是实际最为常见的模型迭代方式，通常模型效果也是最好的，但这样模型迭代比较耗时，资源耗费比较多，实时性较差，特别是在大数据场景更为困难；2、模型融合的方法，将旧模..._模型迭代
base64图片打成Zip包上传，以及服务端解压的简单实现_base64可以装换zip吗-程序员宅基地
文章浏览阅读2.3k次。1、前言上传图片一般采用异步上传的方式，但是异步上传带来不好的地方，就如果图片有改变或者删除，图片服务器端就会造成浪费。所以有时候就会和参数同步提交。笔者喜欢base64图片一起上传，但是图片过多时就会出现数据丢失等异常。因为tomcat的post请求默认是2M的长度限制。2、解决办法有两种：① 修改tomcat的servel.xml的配置文件，设置 maxPostSize=..._base64可以装换zip吗
Opencv自然场景文本识别系统（源码＆教程）_opencv自然场景实时识别文字-程序员宅基地
文章浏览阅读1k次，点赞17次，收藏22次。Opencv自然场景文本识别系统（源码＆教程）_opencv自然场景实时识别文字
随便推点
ESXi 快速复制虚拟机脚本_exsi6.7快速克隆centos-程序员宅基地
文章浏览阅读1.3k次。拷贝虚拟机文件时间比较长，因为虚拟机 flat 文件很大，所以要等。脚本完成后，以复制虚拟机文件夹。将以下脚本内容写入文件。_exsi6.7快速克隆centos
好友推荐—基于关系的java和spark代码实现_本关任务:使用 spark core 知识完成 " 好友推荐 " 的程序。-程序员宅基地
文章浏览阅读2k次。本文主要实现基于二度好友的推荐。数学公式参考于：http://blog.csdn.net/qq_14950717/article/details/52197565测试数据为自己随手画的关系图把图片整理成文本信息如下：a b c d e f yb c a f gc a b dd c a e h q re f h d af e a b gg h f bh e g i di j m n ..._本关任务:使用 spark core 知识完成 " 好友推荐 " 的程序。
南京大学-高级程序设计复习总结_南京大学高级程序设计-程序员宅基地
文章浏览阅读367次。南京大学高级程序设计期末复习总结，c++面向对象编程_南京大学高级程序设计
4.朴素贝叶斯分类器实现－matlab_朴素贝叶斯 matlab训练和测试输出-程序员宅基地
文章浏览阅读3.1k次，点赞2次，收藏12次。实现朴素贝叶斯分类器，并且根据李航《统计机器学习》第四章提供的数据训练与测试，结果与书中一致分别实现了朴素贝叶斯以及带有laplace平滑的朴素贝叶斯%书中例题实现朴素贝叶斯%特征1的取值集合A1=[1;2;3];%特征2的取值集合A2=[4;5;6];%S M LAValues={A1;A2};%Y的取值集合YValue=[-1;1];%数据集和T=[ 1,4,-1;..._朴素贝叶斯 matlab训练和测试输出
Markdown 文本换行_markdowntext 换行-程序员宅基地
文章浏览阅读1.6k次。Markdown 文本换行_markdowntext 换行
错误:0xC0000022 在运行 Microsoft Windows 非核心版本的计算机上,运行”slui.exe 0x2a 0xC0000022″以显示错误文本_错误: 0xc0000022 在运行 microsoft windows 非核心版本的计算机上,运行-程序员宅基地
文章浏览阅读6.7w次，点赞2次，收藏37次。win10 2016长期服务版激活错误解决方法：打开“注册表编辑器”；（Windows + R然后输入Regedit）修改SkipRearm的值为1：（在HKEY_LOCAL_MACHINE–》SOFTWARE–》Microsoft–》Windows NT–》CurrentVersion–》SoftwareProtectionPlatform里面，将SkipRearm的值修改为1）重..._错误: 0xc0000022 在运行 microsoft windows 非核心版本的计算机上,运行“slui.ex