应用迁移

    项目是最小粒度的管理层次。在组织下创建项目,则创建的项目属于这个组织。

    关于Choerodon猪齿鱼中项目的详细信息,以及相关操作等可以参考项目管理

    1.使用“组织管理员”角色登录系统

    2.点击组织,例如“汉得研发”,进入到组织层的管理菜单。

    3.在组织层的管理菜单中,点击:“汉得研发” -> 左上角的菜单 -> “组织设置” -> “项目管理”。进入到项目管理与创建功能界面

    enter description here

    4.在“项目管理”界面,单击“创建项目”,在弹出的窗口中填写项目编码、项目名称。

    例如,

    • 项目编码:hand-rdc-halm
    • 项目名称:汉得资产云平台

    5.点击“创建”,即可创建完成。项目创建完成之后,用户就可以使用Choerodon猪齿鱼的系统功能,例如知识管理、敏捷管理、开发流水线、测试管理、部署流水线等。

    enter description here

    创建应用

    应用是满足用户某些需求的程序代码的集合,一个应用可以是一个单体应用,也可以是微服务系统的一个服务。服务端相关应用,例如Java、Python、C/C++/C#、Go、.NET等应用,以及前端相关应用,例如ReactJs、VueJs、AngularJs等等,理论上讲没有什么限制。

    1.切换到项目层,例如“汉得资产云平台”。

    2.在组织层的管理菜单中,点击:“汉得资产云平台” -> 左上角的菜单 -> “应用管理” -> “应用”,进入到应用创建功能界面。

    enter description here

    3.在创建应用的弹框中填写应用编码、应用名称和选择“应用模板”。

    例如,

    • 编码:halm-dev
    • 名称:资产云应用
    • 选择应用模板:MicroService

    关于Choerodon的应用模板,可以参考应用模板。如果是迁移原库的代码,则随便选择一个即可。

    4.创建完成应用之后,Choerodon会在Gitlab中创建先关的代码库。例如:https://code.choerodon.com.cn/hand-rdc-halm/halm-dev

    enter description here

    应用容器化配置

    Choerodon猪齿鱼秉承云原生的理念,基于平台的应用需要进行容器化改造才能够使用Choerodon进行开发和部署。在本节中将给大家介绍Choerodon容器化的一些概念、如何构建应用的基础镜像,以及为原代码库增加相关的配置使其满足Choerodon容器化要求。

    应用的容器化配置是整个迁移过程中最难的部分,在此需要熟悉、掌握Kubernetes、Helm等。

    在Choerodon猪齿鱼中,使用Helm管理Kubernetes包等,Helm之于Kubernetes好比yum之于RHEL,或者apt-get之于Ubuntu。Helm使用Charts管理应用,Charts就好像RPM一样,里面描述了应用及其依赖关系。

    所以, 在Choerodon的标准应用代码结构中一定要包含charts文件夹,如下截图,这是一个后端项目的标准结构。

    • templates为模板文件,将模板文件渲染成实际文件,然后发送给Kubernetes。
    • values.yaml为模板的预定义变量。
    • Chart.yaml包含 chart 的版本信息说明,您可以从模板中访问它。
    • deployment.yaml:创建 Kubernetes 部署的基本清单。
    • service.yaml:为您的部署创建服务端点的基本清单。
    • _helpers.tpl:放置模板助手的地方,您可以在整个 chart 中重复使用

    什么是应用基础镜像?先来看一张图,一般在应用基础镜像中预先安装了工具类、依赖包、系统基础一致性设置等应用程序构建、测试、运行等相关的基础依赖工具和系统配置。

    enter description here

    资产云应用为PHP项目,那么应用基础镜像中就应该为PHP运行环境,首先去DockerHub上搜索是否有官方提供的公共镜像,可以对官方提供的公共镜像做进一步定制,生成需要的镜像,也可以从一个基础的只有系统的镜像进行定制。

    1.编写Dockerfile定制基础镜像时,尽量将镜像大小往小的做,镜像层数往少的写,仅添加应用运行时必须的相关组件,不要添加不必要的东西进入。在项目根目录下新建名为Dockerfile.base文件,在文件中写入Dockerfile定义的信息,例如:

    2.在 项目根目录下执行命令进行应用基础镜像构建,构建好之后推送镜像到镜像仓库,例如registry.choerodon.com.cn/hand-rdc-halm仓库下(注意:用户也可以根据自身具体的需求,选择镜像库地址,例如DockerHub等),这个仓库在Choerodon创建项目时会自动创建:

    3.将构建好的镜像推送到镜像仓库中:

    1. docker login registry.choerodon.com.cn
    2. docker push -t registry.choerodon.com.cn/hand-rdc-halm/php:ubuntu-16.04

    1.Dockerfile

    在有应用基础镜像的基础上编写应用的Dockerfile那就很容易了,只需要将程序放入基础镜像特定的目录,设置好镜像运行前置处理和启动命令即可。

    本事例中,应用运行时需链接数据库,但数据库相关信息是运行时才会知道的,那么解决方式是将这些信息配置为环境变量,镜像运行时从环境变量中获取这些信息并替换到对应的配置文件中去。

    第一步:修改配置文件并编写启动脚本

    在项目根目录下新建auto_devops文件夹,将配置文件拷贝至该文件夹下,下面为配置文件中数据库配置片段,将会改变的值全部使用大写的字母进行替换,替换时需保证在此文件中唯一。

    1. 'dbconfig' =>
    2. array(
    3. 'db_host_name' => 'DB_HOST_NAME',
    4. 'db_host_instance' => 'SQLEXPRESS',
    5. 'db_user_name' => 'DB_USER_NAME',
    6. 'db_password' => 'DB_PASSWORD',
    7. 'db_name' => 'DB_NAME',
    8. 'db_type' => 'mysql',
    9. 'db_port' => 'DB_PORT',
    10. 'db_manager' => 'MysqliManager'
    11. ),

    然后在auto_devops文件夹新建docker-entrypoint.sh文件编写启动脚本,这个脚本将替换配置文件中大写的那些变量名。

    第二步:编写应用Dockerfile在项目根目录下新建名为Dockerfile的文件

    1. # 应用基础镜像
    2. FROM registry.choerodon.com.cn/hand-rdc-halm/php:ubuntu-16.04
    3. # 将程序复制到/var/www/目录中
    4. COPY . /var/www/
    5. # 将配置文件复制到对应目录中
    6. COPY ./auto_devops/config.php /var/www/config.php
    7. # 将替换环境变量的脚本复制到镜像中
    8. COPY ./auto_devops/docker-entrypoint.sh /docker-entrypoint.sh
    9. # 默认运行镜像时执行的命令
    10. ENTRYPOINT ["/bin/sh", "/docker-entrypoint.sh"]
    11. # 启动服务
    12. CMD ["/usr/bin/supervisord", "-c", "/etc/supervisor/supervisord.conf"]

    2.Helm Chart

    在编写Helm Chart之前你需要了解Kubernetes中的对象及其概念,本事例中运行应用只需定义一个deployment对象即可。

    第一步:创建目录

    在项目根目录下创建如下目录结构,首先创建一个名为chart的文件夹,再创建一个与应用名相同的文件夹,本事例为 Helm Chart,在halm-dev文件夹中再创建一个templates目录。

    1. └── halm-dev
    2. ├── Chart.yaml
    3. ├── templates
    4. ├── _helpers.tpl
    5. └── deployment.yaml
    6. └── values.yaml

    第二步:编写_helpers.tpl文件templates文件夹下将一些公共的lable或值定义到 _helpers.tpl文件中:

    1. {{/* vim: set filetype=mustache: */}}
    2. {{- /*
    3. service.labels.standard prints the standard service Helm labels.
    4. The standard labels are frequently used in metadata.
    5. */ -}}
    6. {{- define "service.labels.standard" -}}
    7. choerodon.io/release: {{ .Release.Name | quote }}

    第三步:编写deployment.yml文件templates文件夹下创建一个名为 deployment.yml的文件,内容如下:

    第四步:编写Chart.yaml文件在halm-dev文件夹中编写 Chart.yaml文件,这个文件中写明应用的的相关信息。

    1. # api版本
    2. apiVersion: v1
    3. # 应用版本
    4. appVersion: "1.0"
    5. # 应用描述
    6. description: A Helm chart for Kubernetes
    7. # 应用名称
    8. name: halm-dev
    9. # 应用chart版本
    10. version: 0.1.0

    第五步:编写文件在halm-dev文件夹中编写 values.yaml文件,这个文件中编写 templates文件夹中 deployment.yml文件会用到的变量及默认值。

    1. # Declare variables to be passed into your templates.
    2. replicaCount: 1
    3. image:
    4. repository: registry.choerodon.com.cn/hand-rdc-halm/halm-dev
    5. pullPolicy: Always
    6. env:
    7. SITE_URL: http://localhost:8081/
    8. DB_HOST_NAME:
    9. DB_USER_NAME:
    10. DB_PASSWORD:
    11. DB_NAME:
    12. DB_PORT: "3306"
    13. logs:
    14. parser: nginx
    15. resources:
    16. # We usually recommend not to specify default resources and to leave this as a conscious
    17. # choice for the user. This also increases chances charts run on environments with little
    18. # resources,such as Minikube. If you do want to specify resources,uncomment the following
    19. # lines,adjust them as necessary,and remove the curly braces after 'resources:'.
    20. limits:
    21. # cpu: 100m
    22. # memory: 2Gi
    23. requests:
    24. # cpu: 100m

    更多如何charts中详细的讲解,可以参考Choerodon官网文档 从yaml到helm。

    CI持续集成配置

    在上节“应用容器化配置”中,有提到Choerodon标准的应用源代码结构中必须包含charts文件件。同样,Choerodon使用Gitlab-CI作为CI工具,所以需要在应用源代码中加上.gitlab-ci.yml文件。

    在CI中主要的工作就是进行镜像构建并且生成Chart包,最后将Chart包上传至Choerodon,与Choerodon进行集成。

    在项目根目录下新建.gitlab-ci.yml文件,粘贴以下内容:

    1. image: registry.cn-hangzhou.aliyuncs.com/choerodon-tools/cibase:0.6.0
    2. # 设置阶段,这里只进行镜像构建和生成Chart包,所以定义为一个阶段即可
    3. stages:
    4. - docker-build
    5. docker-build:
    6. stage: docker-build
    7. # 阶段中需要执行的命令
    8. script:
    9. - docker_build
    10. - chart_build
    11. # 这里是最为关键的,定义了一个全局脚本,在每一个阶段运行前都将执行下面代码从Choerodon平台中获取相应变量及封装的shell函数。
    12. .auto_devops: &auto_devops |
    13. http_status_code=`curl -o .auto_devops.sh -s -m 10 --connect-timeout 10 -w %{http_code} "${CHOERODON_URL}/devops/ci?token=${Token}"`
    14. if [ "$http_status_code" != "200" ]; then
    15. cat .auto_devops.sh
    16. exit 1
    17. fi
    18. source .auto_devops.sh
    19. # 重写docker_build函数
    20. function docker_build(){
    21. docker build --pull -t ${DOCKER_REGISTRY}/${GROUP_NAME}/${PROJECT_NAME}:${CI_COMMIT_TAG} .
    22. docker push ${DOCKER_REGISTRY}/${GROUP_NAME}/${PROJECT_NAME}:${CI_COMMIT_TAG}
    23. }
    24. before_script:
    25. - *auto_devops

    经过了“应用容器化配置”和“CI持续集成配置”两步之后,将得到一个包含了charts和.gitlab-ci.yml文件的新的代码库(charts文件夹和.gitlab-ci.yml文件一定是放在代码库的根目录),现在就将代码库同步到Choerodon对应的代码库,替换生成的标准代码库。

    Git相关的命令如下:

    生成新的版本

    当在上一步“将原来代码库替换到Choerodon代码库”中提交代码到Choerodon的远程新库的时候,Choerodon会自动生成一个master分支上的开发版本,即“2018.8.27-234043-master”,这个版本是可以部署运行的,当然,往往生成的第一个版本会由于各种BUG等,需要经过反复地调试才可以。

    可以进入到Choerodon系统中查看生成的版本,系统路径:“汉得研发”(组织)->“<你的项目>”->应用管理->应用版本。如下图所示。

    enter description here

    创建一个环境

    有了可部署的版本之后,就可以把此版本部署到环境中去了。在步骤“应用系统环境搭建”中已经安装好了应用系统运行的Kubernetes集群环境,并且在“数据库迁移”步骤中已经安装部署好数据库。

    1.进入到的Choerodon猪齿鱼创建环境页面,系统路径:“汉得研发”(组织)->“<你的项目>”->部署流水线->环境流水线

    例如,

    • 环境编码:halm-dev
    • 环境名称:开发环境
    • 环境描述:开发环境enter description here

    3.保存时,系统会跳出来另一个对话框,如下图,需要将这段命令在步骤“应用系统环境搭建”中创建的Kubernetes环境中运行,以安装Choerodon Agent。这一步是必须要执行的,关于Choerodon Agent可以参考官网 Choerodon Agent

    4.命令是具体应用、具体环境而不同的,所以,以下是笔者的环境生产的命令,请不要复制执行。

    1. helm install --repo=http://chart.choerodon.com.cn/choerodon/c7ncd/ \
    2. --namespace=halm-dev \
    3. --name=halm-dev \
    4. --version=0.9.7 \
    5. --set config.connect=ws://devops.service.choerodon.com.cn/agent/ \
    6. --set config.token=a932598f-8945-449a-9dc7-7a2db489eff6 \
    7. --set config.envId=162 \
    8. --set rbac.create=true \
    9. choerodon-agent

    5.如果在Kubernetes中执行成功,则可以看到“开发环境”显示“运行中”,否则就是不成功。

    enter description here

    部署新生成的版本

    可部署版本就绪,环境就绪,现在就还要把可部署的版本部署到环境中。

    1.进入到的Choerodon猪齿鱼应用部署页面,系统路径:“汉得研发”(组织)->“<你的项目>”->部署流水线->应用部署

    2.选择应用及版本。

    例如,

    • 选择应用:资产云应用(halm-dev)
    • 选择版本:2018.8.27-234043-masterenter description here

    3.选择环境及修改配置信息。

    例如,

    • 选择环境:开发环境
    • 还有,下面的配置信息可以根据自身需求修改。

    4.选择部署模式。

    例如,

    • 选择部署模式:新建实例
    • 对于第一次部署,需要选择“新建实例”。enter description here

    5.确认信息及部署。

    6.最后,确认检查好信息之后,部署即可。可以在“实例”界面查看部署的情况。最终部署的实例名称为:“halm-dev-9fc8”。

    enter description here

    部署完成应用之后,还不能够被外部访问,需要创建网络和域名。现在先创建网络。

    1.进入到Choerodon猪齿鱼网络页面,系统路径:“汉得研发”(组织)->“<你的项目>”->部署流水线->网络

    2.单击“创建网络”,弹出创建网络界面。填写相关的字段信息。

    例如,

    • 环境:选择“开发环境”。
    • 目标对象:选择“选择实例”。
    • 应用名称:选择“资产云应用
    • 选择实例:选择“halm-dev-9fc8”,就是上一步部署生成的实例。
    • 网络配置:选择“ClusterIP”
    • 外部IP:NULL
    • 端口:80 ,镜像内部应用的端口
    • 网络名称:halm-dev-3491enter description here

    创建域名

    有了网络还要有域名才可以。

    1.进入到Choerodon猪齿鱼域名页面,系统路径:“汉得研发”(组织)->“<你的项目>”->部署流水线->域名

    2.单击“创建域名”,在弹出页面中填写相关信息。

    enter description here

    测试访问

    创建好域名之后,使用URL:handalm.hand-china.com 访问。

    更多资料