持续集成及Jenkins介绍及gitlab安装

持续集成及Jenkins介绍

目录
  • 一：持续集成和Jenkins介绍
    • 软件开发的生命周期
    • 软件开发的瀑布模型
    • 软举的敏捷开发
      • 什么是敏捷开发
      • 敏捷开发如何迭代？
      • 敏捷开发的优点
    • 什么是持续集成
      • 持续集成的流程
    • 持续集成的要素
    • 持续集成的好处
    • Jenkins 介绍
  • Jenkins 安装和持续集成环境配置
    • 持续集成流程说明
    • Gitlab 代码托管服务器 安装
      • Gitlab 简介
      • Gitlab安装
      • gitlab 主机（192.168.23.10)上：
      • gitlab 添加组，用户，项目
      • 添加组
      • 创建用户
      • 将用户添加到组中
      • 在组中创建项目，使用新用户登录，在用户组中创建项目

一：持续集成和Jenkins介绍

软件开发的生命周期

软件开发生命周期又叫做SDLC（Software Development Life Cycle），它是集合了计划、开发、测试和部署过程的集合

image-20220208112544163

  • 需求分析

这是生命周期的第一阶段，根据项目需求，团队执行一个可行性计划的分析。项目需求可能是公司内部 或者客户提出的。这阶段主要是对信息的收集，也有可能是对现有项目的改善和重新做一个新的项目。 还要分析项目的预算多长，可以从哪方面受益及布局，这也是项目创建的目标。

  • 设计

第二阶段就是设计阶段，系统架构和满意状态（就是要做成什么样子，有什么功能），和创建一个项目 计划。计划可以使用图表，布局设计或者文者的方式呈现。（如接口设计，处理高并发，业务层面的逻辑绑定，数据库建模等）

  • 实现

第三阶段就是实现阶段，项目经理创建和分配工作给开者，开发者根据任务和在设计阶段定义的目标进 行开发代码。依据项目的大小和复杂程度，可以需要数月或更长时间才能完成。

  • 测试

测试人员进行代码测试 ，包括功能测试、代码测试、压力测试等。

  • 进化

最后进阶段就是对产品不断的进化改进和维护阶段，根据用户的使用情况，可能需要对某功能进行修 改，bug修复，功能增加等。


软件开发的瀑布模型

瀑布模型是最著名和最常使用的软件开发模型。瀑布模型就是一系列的软件开发过程。它是由制造业繁衍出来的。一个高度化的结构流程在一个方向上流动，有点像生产线一样。在瀑布模型创建之初，没有其它开发的模型，有很多东西全靠开发人员去猜测，去开发。这样的模型仅适用于那些简单的软件开发，但是已经不适合现在的开发了。

image-20220208113118621

优势 劣势
简单易用和理解 各个阶段的划分完全固定，阶段之间产生大量的文档，极大地增加了工作量。
当前一阶段完成后，您只需要去关注后续阶段。 由于开发模型是线性的，用户只有等到整个过程的末期才能见到开发成果，从而增加了开发风险。
为项目提供了按阶段划分的检查节点 瀑布模型的突出缺点是不适应用户需求的变化。

由于瀑布模型的特点，当某一个环节工作量增大，就会导致下一个环节长期无法工作


软举的敏捷开发

什么是敏捷开发

敏捷开发（Agile Development） 的核心是迭代开发（Iterative Development） 与 增量开发

（Incremental Development） 。


  • 什么是迭代开发

对于大型软件项目，传统的开发方式是采用一个大周期（比如一年）进行开发，整个过程就是一次"大 开发"；迭代开发的方式则不一样，它将开发过程拆分成多个小周期，即一次"大开发"变成多次"小开 发"，每次小开发都是同样的流程，所以看上去就好像重复在做同样的步骤。


  • 什么是增量开发

软件的每个版本，都会新增一个用户可以感知的完整功能。也就是说，按照新增功能来划分迭代。


敏捷开发如何迭代？

虽然敏捷开发将软件开发分成多个迭代，但是也要求，每次迭代都是一个完整的软件开发周期，必须按 照软件工程的方法论，进行正规的流程管理。

image-20220208113734394


敏捷开发的优点

  • 早期交付

    • 敏捷开发的第一个好处，就是早期交付，从而大大降低成本。比如说可以先交付部分成果，回笼资金，降低资金压力。

  • 降低风险

    • 敏捷开发的第二个好处是，及时了解市场需求，降低产品不适用的风险。在交付部分成果后，可以获得市场反馈，如果反馈不良，则可以改进或者停止，能够大大降低风险和损失

    什么是持续集成

    持续集成（ Continuous integration ， 简称 CI ）指的是，频繁地（一天多次）将代码集成到主干。

    持续集成的目的，就是让产品可以快速迭代，同时还能保持高质量。它的核心措施是，代码集成到主干 之前，必须通过自动化测试。只要有一个测试用例失败，就不能集成。

    通过持续集成， 团队可以快速的从一个功能到另一个功能，简而言之，敏捷软件开发很大一部分都要归功于持续集成。


    持续集成的流程

    image-20220208114158845

  1. 提交::

    流程的第一步，是开发者向代码仓库提交代码。所有后面的步骤都始于本地代码的一次提交

    （commit）。

  2. 测试（第一轮）

    代码仓库对commit操作配置了钩子（hook），只要提交代码或者合并进主干，就会跑自动化测试。

  3. 构建:

    通过第一轮测试，代码就可以合并进主干，就算可以交付了。

    交付后，就先进行构建（build），再进入第二轮测试。所谓构建，指的是将源码转换为可以运行的实 际代码，比如安装依赖，配置各种资源（样式表、JS脚本、图片）等等。

  4. 测试（第二轮）:

    构建完成，就要进行第二轮测试。如果第一轮已经涵盖了所有测试内容，第二轮可以省略，当然，这时 构建步骤也要移到第一轮测试前面。

  5. 部署:

    过了第二轮测试，当前代码就是一个可以直接部署的版本（artifact）。将这个版本的所有文件打包（

    tar ?lename.tar * ）存档，发到生产服务器。

  6. 回滚:

    一旦当前版本发生问题，就要回滚到上一个版本的构建结果。最简单的做法就是修改一下符号链接，指 向上一个版本的目录。


持续集成的要素

  • 一个自动构建过程， 从检出代码、 编译构建、 运行测试、 结果记录、 测试统计等都是自动完成的， 无需人工干预。

  • 一个代码存储库，即需要版本控制软件来保障代码的可维护性，同时作为构建过程的素材库，一般 使用SVN或Git。

  • 一个持续集成服务器， Jenkins 就是一个配置简单和使用方便的持续集成服务器。

img


持续集成的好处

  1. 降低风险，由于持续集成不断去构建，编译和测试，可以很早期发现问题，所以修复的代价就少；
  2. 对系统健康持续检查，减少发布风险带来的问题；
  3. 减少重复性工作；
  4. 持续部署，提供可部署单元包；
  5. 持续交付可供使用的版本；
  6. 增强团队信心；

Jenkins 介绍

Jenkins 是一款流行的开源持续集成（Continuous Integration）工具，广泛用于项目开发，具有自动化构建、测试和部署等功能。官网： http://jenkins-ci.org/。

Jenkins的特征：

  • 开源的Java语言开发持续集成工具，支持持续集成，持续部署。

  • 易于安装部署配置：可通过yum安装,或下载war包以及通过docker容器等快速实现安装部署，可 方便web界面配置管理。

  • 消息通知及测试报告：集成RSS/E-mail通过RSS发布构建结果或当构建完成时通过e-mail通知，生成JUnit/TestNG测试报告。

  • 分布式构建：支持Jenkins能够让多台计算机一起构建/测试。

  • 文件识别：Jenkins能够跟踪哪次构建生成哪些jar，哪次构建使用哪个版本的jar等。

  • 丰富的插件支持：支持扩展插件，你可以开发适合自己团队使用的工具，如git，svn，maven，

docker等。


Jenkins 安装和持续集成环境配置


持续集成流程说明

image-20220208125316110

1）

  1. 首先，开发人员每天进行代码提交，提交到Git仓库
  2. 然后，Jenkins作为持续集成工具，使用Git工具到Git仓库拉取代码到集成服务器，再配合JDK， Maven等软件完成代码编译，代码测试与审查，测试，打包等工作，在这个过程中每一步出错，都重新 再执行一次整个流程。
  3. 最后，Jenkins把生成的jar或war包分发到测试服务器或者生产服务器，测试人员或用户就可以访问 应用。

服务器列表

名称 主机名 IP****地址 安装的软件
代码托管服务器 gitlab 192.168.23.10 Gitlab-12.4.2
持续集成服务器 jenkins 192.168.23.11 Jenkins-2.190.3，JDK1.8，Maven3.6.2，Git， SonarQube
应用测试服务器 tomcat 192.168.23.12 JDK1.8，Tomcat8.5

Gitlab 代码托管服务器 安装

Gitlab 简介

img

官网： https://about.gitlab.com/

GitLab 是一个用于仓库管理系统的开源项目，使用Git作为代码管理工具，并在此基础上搭建起来的

web服务。

GitLab和GitHub一样属于第三方基于Git开发的作品，免费且开源（基于MIT协议），与Github类似， 可以注册用户，任意提交你的代码，添加SSHKey等等。不同的是，GitLab*是可以部署到自己的服务器 上，数据库等一切信息都掌握在自己手上，适合团队内部协作开发，你总不可能把团队内部的智慧总放 在别人的服务器上吧？简单来说可把GitLab看作个人版的GitHub。


Gitlab安装


先修改三台主机的主机名

image-20220208010634354

image-20220208010646382

image-20220208010704216


gitlab 主机（192.168.23.10)上：

安装相关依赖

yum -y install policycoreutils openssh-server openssh-clients post?x

image-20220208011113792


启动ssh服务和 postfix邮件服务，并设置为开机自启

systemctl enable sshd postfix  --now

systemctl is-active sshd postfix

systemctl is-enabled sshd postfix

image-20220208011253503


开放ssh以及http服务，然后重载防火墙（如果是关闭防火墙，则不需要做次步骤）

firewall-cmd --add-service=ssh --permanent 
firewall-cmd --add-service=http --permanent
firewall-cmd --reload

image-20220208011544867


下载gitlab包，并安装

网址：

https://mirrors.tuna.tsinghua.edu.cn/gitlab-ce/yum/el6/gitlab-ce-12.4.2-ce.0.el6.x86_64.rpm

 rpm -ivh gitlab-ce-12.4.2-ce.0.el6.x86_64.rpm

image-20220208012648547

image-20220208012728326


修改gitlab配置

vim /etc/gitlab/gitlab.rb 
23// external_url 'http://192.168.23.10:82'

1112// nginx['listen_port'] = 82

image-20220208013021409

image-20220208013209833


重载配置，启动gitlab

gitlab-ctl reconfigure

image-20220208013458341

image-20220208013724546


gitlab-ctl restart

image-20220208013816474


把端口添加到防火墙（如果关闭了firewalld，则不需要做）

 firewall-cmd --zone=public --add-port=82/tcp --permanent

 firewall-cmd --reload

image-20220208014000080


gitlab 添加组，用户，项目

使用浏览器访问 gitlab 服务器ip:82 端口，配置root用户的密码

image-20220208014417911

使用root用户登录

image-20220208014635747


添加组

使用管理员 root 创建组，一个组里面可以有多个项目分支，可以将开发添加到组里面进行设置权限， 不同的组就是公司不同的开发项目或者服务模块，不同的组添加不同的开发即可实现对开发设置权限的 管理

image-20220208102209594

image-20220208102339580

image-20220208102512611

image-20220208102636241

创建用户

创建用户的时候，可以选择Regular或Admin类型。

image-20220208102702951

image-20220208102814726

image-20220208102940025

image-20220208102950664

创建用户后立即修改密码

image-20220208103049339

image-20220208103140068

image-20220208103159536

image-20220208103254446

将用户添加到组中

选择某个用户组，进行Members管理组的成员

image-20220208103441505

image-20220208103509557

image-20220208103542731

image-20220208103710120

image-20220208103822735

Gitlab用户在组里面有5种不同权限：

Guest：可以创建issue、发表评论，不能读写版本库 Reporter：可以克隆代码，不能提交，QA、PM 可以赋予这个权限 Developer：可以克隆代码、开发、提交、push，普通开发可以赋予这个权限Maintainer：可以创建项目、添加tag、保护分支、添加项目成员、编辑项目，核心开发可以赋予这个 权限 Owner：可以设置项目访问权限 - Visibility Level、删除项目、迁移项目、管理组成员，开发组组长可以赋予这个权限

image-20220208103927572

在组中创建项目，使用新用户登录，在用户组中创建项目

image-20220208104051071

image-20220208104124508

image-20220208104231464

image-20220208104324892

image-20220208104428238

image-20220208104456572

image-20220208104619743

image-20220208104656871

DevOps

相关

敏捷开发专家一席谈：云原生技术下的华为云DevOps实践之路

云原生项目实践DevOps(GitOps)+K8S+BPF+SRE，从0到1使用Golang开发生产级麻将游戏服务器

云原生项目实践DevOps(GitOps)+K8S+BPF+SRE，从0到1使用Golang开发生产级麻将游戏服务器

你还不了解DevOps? 看这篇就够了

从零开始devops-fastlane配置

从零开始devops-nginx静态资源服务器

DevOps 在公司项目中的实践落地

DevOps Master凤凰项目沙盘总结：高维度系统化思考

从零开始devops- Git的MergeRequest规范

再聊我们自研的那些Devops工具

DevOps - JFrog Artifactory

DevOps - API网关

标签