↑ 点击上方“IPDCHAT”关注我们 关键词 持续集成,自动化测试 在搭建中间件的测试环境时,我们发现因为中间件的版本频繁更新,甚至每天都更新,传统的人工取代码,人工编译部署测试环境,变得非常的费力而且经常出错。为了解决这个问题,我们引入了持续集成CICD(Continuous integration,Continuous deployment)系统来实现用机器来做从git代码到搭建测试环境的流程。 CICD分为三项:
持续集成 持续集成指的是,频繁地(一天多次)将代码集成到主干。 它的好处主要有两个。 (1)快速发现错误。每完成一点更新,就集成到主干,可以快速发现错误,定位错误也比较容易。 (2)防止分支大幅偏离主干。如果不是经常集成,主干又在不断更新,会导致以后集成的难度变大,甚至难以集成。 持续集成的目的,就是让产品可以快速迭代,同时还能保持高质量。它的核心措施是,代码集成到主干之前,必须通过自动化测试。只要有一个测试用例失败,就不能集成。 Martin Fowler说过,"持续集成并不能消除Bug,而是让它们非常容易发现和改正。 持续交付 持续交付(Continuous delivery)指的是,频繁地将软件的新版本,交付给质量团队或者用户,以供评审。如果评审通过,代码就进入生产阶段。 持续交付可以看作持续集成的下一步。它强调的是,不管怎么更新,软件是随时随地可以交付的。 持续部署 持续部署(continuous deployment)是持续交付的下一步,指的是代码通过评审以后,自动部署到生产环境。 持续部署的目标是,代码在任何时刻都是可部署的,可以进入生产阶段。 持续部署的前提是能自动化完成测试、构建、部署等步骤。它与持续交付的区别,可以参考下图。 根据持续集成的设计,代码从提交到生产,整个过程有以下几步。 ① 提交 流程的第一步,是开发者向代码仓库提交代码。所有后面的步骤都始于本地代码的一次提交(commit)。 ② 测试(第一轮) 代码仓库对commit操作配置了钩子(hook),只要提交代码或者合并进主干,就会跑自动化测试。 测试有好几种。 单元测试:针对函数或模块的测试 集成测试:针对整体产品的某个功能的测试,又称功能测试 端对端测试:从用户界面直达数据库的全链路测试 第一轮至少要跑单元测试。 ③ 构建 通过第一轮测试,代码就可以合并进主干,就算可以交付了。 交付后,就先进行构建(build),再进入第二轮测试。所谓构建,指的是将源码转换为可以运行的实际代码,比如安装依赖,配置各种资源(样式表、JS脚本、图片)等等。 常用的构建工具如下。 n Jenkins n Travis n Codeship n Strider ④ 测试(第二轮) 构建完成,就要进行第二轮测试。如果第一轮已经涵盖了所有测试内容,第二轮可以省略,当然,这时构建步骤也要移到第一轮测试前面。 第二轮是全面测试,单元测试和集成测试都会跑,有条件的话,也要做端对端测试。所有测试以自动化为主,少数无法自动化的测试用例,就要人工跑。 需要强调的是,新版本的每一个更新点都必须测试到。如果测试的覆盖率不高,进入后面的部署阶段后,很可能会出现严重的问题。 ⑤ 部署 通过了第二轮测试,当前代码就是一个可以直接部署的版本(artifact)。将这个版本的所有文件打包(tar filename.tar *)存档,发到生产服务器。 生产服务器将打包文件,解包成本地的一个目录,再将运行路径的符号链接(symlink)指向这个目录,然后重新启动应用。这方面的部署工具有Ansible,Chef,Puppet等。 ⑥ 回滚 一旦当前版本发生问题,就要回滚到上一个版本的构建结果。最简单的做法就是修改一下符号链接,指向上一个版本的目录。 下面以JIMDB为例,来讲解下如何做JIMDB CICD。我们稍微改良了一下CICD的流程。把测试放在部署之后。 【JIMDB架构图】: Jimdb有12个模块,语言统计:c语言2个, java3个, golang7个。
我们采用jenkins作为CI服务器, 为每一个模块创建一个jenkins任务: CI服务器从代码库拿到代码后build,打包成package, 上传到测试机。建立软链接,替换原版本。每天凌晨测试机运行自动化测试脚本,将测试结果在9点前发送邮件给相关人员。 上面讲解了从git代码到测试运行环境的自动化构建,下面我们来讲一下自动化测试。 我们使用linux的cron来设置定时任务,运行写好的测试例脚本。listall.sh是所有自动化测试脚本的源头。
我们创建一个名称为jimdb_auto_test的项目, 在script目录下存放各类python脚本和shell脚本 已实现脚本化的测试用例:
每天清晨,测试脚本sendmail.py发邮件,将测试结果发送给关系人: 结束语 目前我们实现了JIMDB ,JMQ, JSS的持续集成及自动化测试实践。时间证明它是一个行之有效的质量保证方法。 以上内容为IPD原创,如需转载,请注明出处~ 扫描下方二维码关注我们~IPDCHAT专注输出技术干货~!
本文转载于微信公众号: IPDCHAT(IPDCHAT),更多微信文章请扫描关注公众号: | ||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
|
声明:文章版权归原作者所有 部分文章转自互联网 如有侵权请联系
[邮箱地址] 删除
|