.NET DevOps 接入指南 | 创建第一条流水线

使用流水线编辑器

GitLab提供了流水线编辑器,方便在线创建流水线。创建路径为:CI/CD->编辑器->创建新的 CI/CD 流水线。打开后如下图所示:
image

可以通过点击可视化标签页查看当前流水线的总体概貌,如下图所示:

image

从图中可以明显看出,整个流水线分为三个阶段:Build 、Test和Deploy阶段,其中Test 阶段包含两个Job,unit-test-joblint-test-job。下面就在原有示例的基础上,实现每次往develop分支推送时,进行自动构建与测试,并支持手动部署。

配置自动构建Job

ASP.NET Core 项目的构建需要依赖dotnet Sdk,因此要确保运行Job的Runner上拥有该依赖,GitLab 通过在定义Job时允许通过image参数指定依赖的镜像来解决环境依赖问题,因此对于.NET 项目可以根据项目依赖的dotnet runntime(运行时)选择对应的镜像依赖。修改build-job如下:

build-job:
    image: mcr.microsoft.com/dotnet/sdk:5.0 # 指定dotnet sdk 镜像
    stage: build # 指定所属阶段
    script:
        - dotnet build # 执行构建脚本
        - echo "build passed"

提交后,流水线会自动触发运行,经过一段时间后,通过点击CI/CD->流水线即可看到所有流水线的执行状态概览,如下图所示:

image

点击流水线,又可以看到每个阶段各个job的执行状态,如下图所示,也可以通过点击图中的Job来查看单个Job执行日志。
image

配置自动测试Job

有了上面自动构建的经验,自动测试的Job就很好写了,脚本如下:

unit-test-job:   
  image: mcr.microsoft.com/dotnet/sdk:5.0  # 指定dotnet sdk 镜像
  stage: test    # 指定所属阶段
  script:
    - dotnet test # 执行测试命令
    - echo "test passed"
image

再次提交,触发流水线后,发现本次流水线的测试阶段,毫无疑问的失败了,如上图所示。打开unit-test-job的查看执行日志如下:

// 省略部分日志
[xUnit.net 00:00:01.07]     AspNetCore.CiCd.Web.Tests.UnitTest1.IsPrime_InputIs1_ShouldReturnFalse [FAIL]
  Failed AspNetCore.CiCd.Web.Tests.UnitTest1.IsPrime_InputIs1_ShouldReturnFalse [2 ms]
  Error Message:
   System.NotImplementedException : Not implemented yet!
  Stack Trace:
     at AspNetCore.CiCd.Web.PrimeCheckService.IsPrimeNumber(Int32 num) in /builds/hBgzwyRz/0/demos/aspnetcore.cicd.demo/AspNetCore.CiCd.Web/PrimeCheckService.cs:line 14
   at AspNetCore.CiCd.Web.Tests.UnitTest1.IsPrime_InputIs1_ShouldReturnFalse() in /builds/hBgzwyRz/0/demos/aspnetcore.cicd.demo/AspNetCore.CiCd.Web.Tests/UnitTest1.cs:line 10
Failed!  - Failed:     1, Passed:     0, Skipped:     0, Total:     1, Duration: < 1 ms - /builds/hBgzwyRz/0/demos/aspnetcore.cicd.demo/AspNetCore.CiCd.Web.Tests/bin/Debug/net5.0/AspNetCore.CiCd.Web.Tests.dll (net5.0)
Cleaning up file based variables
00:01
ERROR: Job failed: command terminated with exit code 1

通过这个构建脚本来说明通过持续构建的自动测试脚本,可以帮助识别项目中的潜在问题,以保证代码质量。发现问题后,就可以创建Issue跟踪修复了。将判断逻辑修复如下,重新运行流水线即可成功。

public static class PrimeCheckService
{
    /// <summary>
    /// 素数:大于1的自然数,除了1和它自身外,不能被其他自然数整除的数叫做质数。
    /// </summary>
    /// <param name="num"></param>
    /// <returns></returns>
    public static bool IsPrimeNumber(int num)
    {
        if (num <= 1) return false;
        for (int i = 2; i < num; i++)
        {
            if (num % i == 0) return false;
        }
        return true;
    }
}

配置手动部署Job

对于部署,这里仅演示如何手动触发打包流程,并通过artifact支持下载打包应用。对于.NET Core 应用的打包主要借助于dotnet publish命令,因此可以添加publish-job如下所示:

publish-job:
  image: mcr.microsoft.com/dotnet/sdk:5.0  # 指定dotnet sdk 镜像
  stage: deploy    # 指定所属阶段
  when: manual # 指定手动触发该Job
  script:
    - dotnet publish --no-restore -o publish # 执行发布命令
    - echo "publish passed"
  artifacts:
    paths:
      - publish/    

再次提交,触发流水线后,发现publish-job并未执行,如下图所示,需要手动点击触发。

image

手动触发,执行完毕后,回到流水线列表,就可以下载发布产物,如下图所示:
image

优化Job提升性能

如果仔细观察会发现一个问题,那就是三个Job每次执行时都要重新还原NuGet包并构建,这是一个可以优化的点,针对这个点,有两种优化手段:

  1. 将自动构建、测试和发布合并到同一个Job,由于在同一个Runner中,因此可以避免重复还原和构建,该方法简单粗暴:
build-job:
    image: mcr.microsoft.com/dotnet/sdk:5.0 # 指定dotnet sdk 镜像
    stage: build # 指定所属阶段
    script:
        - dotnet build # 执行构建脚本
        - echo "build passed"
            - dotnet test # 执行测试命令
            - echo "test passed"
            - dotnet publish --no-restore -o publish # 执行发布命令
            - echo "publish passed"
  1. 使用cache关键字进行Nuget包的缓存:

  2. 添加全局缓存,并定义before_script

variables:
  NUGET_PACKAGES_DIRECTORY: ".nuget" # 定义变量,指定nuget包的还原路径
  NUGET_PACKAGES_CACHE_KEY: "$CI_PROJECT_PATH_SLUG" # 通过引用预置变量指定缓存的Key,对于当前项目值为:demos-aspnetcore-cicd-demo

before_script: 
  - dotnet restore --packages $NUGET_PACKAGES_DIRECTORY # 还原nuget包到指定.nuget文件夹

cache: &global_cache # 定义变量用于后续引用
  key: $NUGET_PACKAGES_CACHE_KEY # 指定缓存的Key
  policy: pull-push # 默认配置,即在Job开始时尝试拉取,在结束时上传
  paths:
    - $NUGET_PACKAGES_DIRECTORY # 缓存.nuget文件夹
    - './*/obj/project.assets.json' # 该文件记录项目的所有依赖和还原位置,该文件是确保--no-restore参数可用的关键
  1. 修改build-job,指定--no-restore参数:
build-job:
  image: mcr.microsoft.com/dotnet/sdk:5.0 # 指定dotnet sdk 镜像
  stage: build # 指定所属阶段
  script:
    - dotnet build --no-restore # 执行构建脚本,但不还原Nuget包
    - echo "build passed"
  1. 修改unit-test-job,指定--no-restore参数:
unit-test-job:   
  image: mcr.microsoft.com/dotnet/sdk:5.0  # 指定dotnet sdk 镜像
  stage: test    # 指定所属阶段
  script:    
    - dotnet test --no-restore # 执行测试命令,但不还原Nuget包
    - echo "test passed"
  cache:
    <<: *global_cache # 继承Cache
    policy: pull # 覆盖cache策略为仅拉取
  1. 修改publish-job,指定--no-restore参数:
publish-job:
  image: mcr.microsoft.com/dotnet/sdk:5.0  # 指定dotnet sdk 镜像
  stage: deploy    # 指定所属阶段
  when: manual # 指定手动触发该Job
  script:
    - dotnet publish --no-restore -o publish # 执行发布命令
    - echo "publish passed"
  cache:
    <<: *global_cache # 继承Cache
    policy: pull # 覆盖cache策略为仅拉取    
  artifacts:
    paths:
      - publish/   

至此,完成了第一条流水线的配置和优化,后续将继续介绍如何通过GitLab CI/CD实现构建镜像并部署到Kubernetes。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,189评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,577评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,857评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,703评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,705评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,620评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,995评论 3 396
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,656评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,898评论 1 298
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,639评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,720评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,395评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,982评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,953评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,195评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,907评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,472评论 2 342

推荐阅读更多精彩内容