业务协同平台在秒云上部署

一、基础服务部署

1.程序说明

身份认证和权限管理服务，是基于微服务开发的程序，程序有：

序号	应用名称	服务类型	服务端口	容器端口	主机端口	应用
1	mysql57	集群IP	3306	3306	32100
2	redis	主机端口	6379	6379	32101
3	nacos	主机端口	8848	8848	32102	/nacos
4	uias-gateway	主机端口	19000	19000	32103
5	uias-authentication-service	集群IP	19001	19001	n/a
6	uias-authorization-service	集群IP	19002	19002	n/a
7	uias-log-service	集群IP	19004	19004	n/a
8	uias-manager-service	集群IP	19005	19005	n/a
9	uias-web	主机端口	80	80	32104	/
10	prometheus	9090
11	mysql5.7	集群IP	3306	3306	32200
12	bcpf	主机端口	8080	8080	32201	/bcpf_front

2. nacos介绍和使用

2.1 nacos简单介

Nacos 致力于帮助您发现、配置和管理微服务。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据及流量管理。nacos关键特征包括：

服务发现和服务健康监测
动态配置服务
动态 DNS 服务
服务及其元数据管理详细请参考：https://nacos.io/zh-cn/docs/what-is-nacos.html

2.2 nacos使用

1.部署好服务并登录nacos（nacos/nacos） 2.创建命名空间：uisa 以后可能会放到public的命名空间中，这样不再需要创建命名空间。注意：命名空间ID（不填则自动生成）：此项不能采用自动生成

2.3.导入nacos配置文件

配置管理/配置列表，选择命名空间:uias，点‘导入配置’按钮例如：E:\SVN_PublicPlatForm\trunk\0720200015-业务协同平台\02.受控库\060.发布区\BCPF2.0.20.0831(全)\docker_install\conf\nacos_config_uias_prod_1.0.0.zip 导入配置说明：

终止导入：一在初始安装时使用此项；
跳过导入：当有新版本配置文件时，此项能保持旧配置文件内容不变，增加配置文件中新内容项。
覆盖导入：以当前导入的配置文件为准，覆盖原旧的配置文件。

2.4.nacos服务管理

服务列表：查询并显示部署成功的服务，未成功的未此显示；

2.5.部署应用程序配置文件说明

部署服务在修改配置文件时，各服务之间的相互调用可以通过采用K8S程序的服务名，秒云中可以在：

域视角&amp;项目视角/default/服务services列表中，找到对应的服务名，放进配置文件中。

或者：

域视角&amp;项目视角/default/应用applications中，选择一服务进入修改页面，“服务与访问”页面中的`服务名称`,把服务名称复制并放入到 部署服务的配置文件中。

3.MySQL部署

可以部署在容器中，也可以部署在VM上，但在生产环境中，为了获取更好的数据库性能，建议数据库不在容器中运行。如果对于读性能要求不高，倒是可以一试。

3.1 拉取镜像配置后，环境参数如下：


MYSQL_VERSION	5.7.29-1debian9
MYSQL_MAJOR	5.7
GOSU_VERSION	1.7
PATH	/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin

3.2 环境变量中添加mysql连接信息


MYSQL_ROOT_PASSWORD	310012
MYSQL_DATABASE	nacos_dev
MYSQL_USER	nacos
MYSQL_PASSWORD	nacos
TZ	Asia/Shanghai

3.3 容器端口从镜像拉取

3.4 存储卷


/opt/xtpt-data-volumes/data_mysql/init	/docker-entrypoint-initdb.d
添加至configmap中	/etc/my.cnf
/xtpt_volumes/data_mysql/mysql	/var/lib/mysql

3.5 mysql初始数据

/var/lib/mysql此目录初始数据来自一键部署中/opt/data/mysql/ 总文件大小约1.2G大小

3.6 执行数据库脚本nacos-mysql.sql

连接nacos_dev数据库，执行脚本nacos-mysql.sql。

4.redis部署

应用名：redis-32101 服务名：redis-32101-deploy-0-svc-0

4.1 拉取镜像配置后，环境参数如下：



REDIS_DOWNLOAD_SHA	61db74eabf6801f057fd24b590232f2f337d422280fd19486eca03be87d3a82b
REDIS_DOWNLOAD_URL	http://download.redis.io/releases/redis-5.0.7.tar.gz
REDIS_VERSION	5.0.7
GOSU_VERSION	1.11
PATH	/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin

4.2 容器端口

从镜像拉取

4.3 存储卷


redis.conf添加至configmap中	/etc/redis/redis.conf
/xtpt_volumes/redis/data	/data

4.4 服务与访问

服务类型：主机端口服务端口：6379------6379-----32101

5 nacos部署

5.1 拉取镜像配置后，环境参数如下：


TIME_ZONE	Asia/Shanghai
TOMCAT_ACCESSLOG_ENABLED	false
JVM_MMS	320m
JVM_MS	128m
JVM_XMN	1g
JVM_XMX	2g
JVM_XMS	2g
JAVA	/usr/lib/jvm/java-1.8.0-openjdk/bin/java
NACOS_USER	nacos
JAVA_HOME	/usr/lib/jvm/java-1.8.0-openjdk
FUNCTION_MODE	all
CLUSTER_CONF	/home/nacos/conf/cluster.conf
CLASSPATH	.:/home/nacos/conf:
BASE_DIR	/home/nacos
PREFER_HOST_MODE	hostname
MODE	standalone
PATH	/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin
SPRING_DATASOURCE_PLATFORM	mysql

说明：NACOS_DEBUG的value变量值n，不符合yml格式要求，会导致K8S容器无法启动，删除此项。

5.2 环境变量中添加参数


MYSQL_SERVICE_HOST	172.16.7.69
MYSQL_SERVICE_DB_NAME	nacos_dev
MYSQL_SERVICE_PORT	23306
MYSQL_SERVICE_USER	nacos
MYSQL_SERVICE_PASSWORD	nacos

上述配置由于配置单机mysql版本，来源standalone-mysql.yaml，把其中MASTER删去。说明：nacos单机机使用有使用本地数据库和mysql数据库两种模式。

5.3 容器端口

从镜像拉到

5.4 存储卷


/xtpt_volumes/uias-logs/nacos	/home/nacos/logs

5.5 配置文件

N/A

5.6 服务与访问

服务类型：主机端口服务端口：8848---->32102 web应用：/nacos

二、其它服务

6.prometheus部署 (暂时不用部署)

6.1 拉取镜像配置后，环境参数如下：


PATH	/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin

6.2 容器端口

从镜像拉到

6.3 存储卷

N/A

6.4 配置文件

N/A

6.5服务与访问

主机端口，9090

7.uias-gateway部署

7.1 拉取镜像配置后，环境变量中添加如下参数：


TZ	Asia/Shanghai

7.2 容器端口

镜像拉取：N/A

7.3 存储卷


/xtpt_volumes/uias-logs	/opt/uias-gateway/logs
配置文件添加configmap中	/opt/uias-gateway/config/bootstrap.yml

7.4 配置文件

添加配置bootstrap.yml

7.5 服务与访问

服务类型：主机IP 服务端口: 19000-----19000-----32103 web应用： n/a

8.uias-manager-service部署

8.1 拉取镜像配置后，环境变量中添加如下参数：


TZ	Asia/Shanghai
REGISTER_HOST	172.16.7.69
REGISTER_PORT	8848

8.2 容器端口

镜像拉取：N/A

8.3 存储卷


/xtpt_volumes/uias-logs	/opt/uias-manager-service/logs
配置文件添加configmap中	/opt/uias-manager-service/config/bootstrap.yml

8.4 配置文件

添加配置bootstrap.yml

8.5 服务与访问

服务类型：集群IP 服务端口: 19005------19005 web应用：n/a

9.uias-log-service部署

8.1 拉取镜像配置后，环境变量中添加如下参数：


TZ	Asia/Shanghai

9.2 容器端口

镜像拉取：N/A

9.3 存储卷


/xtpt_volumes/uias-logs	/opt/uias-log-service/logs
配置文件添加configmap中	/opt/uias-log-service/config/bootstrap.yml

9.4 配置文件

添加配置bootstrap.yml

9.5 服务与访问

服务类型：集群IP 服务端口：19004-19004 web应用：n/a

10.uias-authentication-service部署

10.1 拉取镜像配置后，环境变量中添加如下参数：


TZ	Asia/Shanghai

10.2 容器端口

镜像拉取：N/A

10.3 存储卷


/xtpt_volumes/uias-logs	/opt/uias-authentication-service/logs
配置文件添加configmap中	/opt/uias-authentication-service/config/bootstrap.yml

10.4 配置文件

添加配置bootstrap.yml

10.5 服务与访问

服务类型：集群IP 服务端口: 19001------19001 web应用：n/a

11.uias-authorization-service部署

11.1 拉取镜像配置后，环境变量中添加如下参数：


TZ	Asia/Shanghai

11.2 容器端口

镜像拉取：N/A

11.3 存储卷


/xtpt_volumes/uias-logs	/opt/uias-authorization-service/logs
配置文件添加configmap中	/opt/uias-authorization-service/config/bootstrap.yml

11.4 配置文件

添加配置bootstrap.yml

11.5 服务与访问

服务类型：集群IP 服务端口：19002------19002 web应用：n/a

12.uias-web部署

12.1 拉取镜像配置后，环境变量中添加如下参数：


TZ	Asia/Shanghai

12.2 容器端口

镜像拉取：N/A

12.3 存储卷


/xtpt_volumes/uias-logs	/var/log/nginx
配置文件添加configmap中	/etc/nginx/conf.d/default.conf

说明：配置文件E:\SVN_PublicPlatForm\trunk\0720200015-业务协同平台\02.受控库\060.发布区\BCPF2.0.20.0831(全)\docker_install\conf\nginx.conf 需改名为：default.conf

12.4 配置文件

添加配置default.conf

12.5 服务与访问

服务类型：主机端口服务端口:80------80------32104 web应用：/

13.bcpf部署

13.1 拉取镜像配置后，环境变量中添加如下参数：


TZ	Asia/Shanghai

13.2 容器端口

镜像拉取：N/A 配置文件端口=服务端口

13.3 存储卷


/xtpt_volumes/bcpf/logs	/home/bcpf_logs
配置文件添加configmap中	/opt/tomcat/webapps/bcpf_back/WEB-INF/classes/application.yml

web应用: /bcpf_front

13.4 配置文件

添加配置文件application.yml

13.5 服务与访问

服务类型：主机端口服务端口:8080------8080------32201 web应用：/bcpf_front

三、其它

1.NFS文件共享服务器

服务端：172.16.3.14

[root@sxf-miaoyum-node7 xtptvol]# cat /etc/exports
/data_volumes/zyzst_volumes       192.168.30.120(rw,sync,no_subtree_check,no_root_squash)
/data_volumes/zyzst_volumes       192.168.30.121(rw,sync,no_subtree_check,no_root_squash)
/data_volumes/zyzst_volumes       192.168.30.122(rw,sync,no_subtree_check,no_root_squash)

客户端： mount -t nfs 172.16.3.14:/data_volumes/zyzst_volumes/xtpt_volumes /xtpt_volumes -o nolock,nfsvers=3,vers=3 说明： https://www.jianshu.com/p/238b2337e855 与NFS的配置有关，NFS默认是squash_all模式，但是要想使用NFS目录，将目录映射到docker容器中，必须要配置成no_root_squash模式才行，否则root用户(因为这次mysql是以root运行)无权限使用nfs的volume来映射docker容器中的目录！！！

miaoyun+Rancher+K8S学习与实践

业务协同平台在秒云上部署

一、基础服务部署

1.程序说明

2. nacos介绍和使用

2.1 nacos简单介

2.2 nacos使用

2.3.导入nacos配置文件

2.4.nacos服务管理

2.5.部署应用程序配置文件说明

3.MySQL部署

3.1 拉取镜像配置后，环境参数如下：

3.2 环境变量中添加mysql连接信息

3.3 容器端口从镜像拉取

3.4 存储卷

3.5 mysql初始数据

3.6 执行数据库脚本nacos-mysql.sql

4.redis部署

4.1 拉取镜像配置后，环境参数如下：

4.2 容器端口

4.3 存储卷

4.4 服务与访问

5 nacos部署

5.1 拉取镜像配置后，环境参数如下：

5.2 环境变量中添加参数

5.3 容器端口

5.4 存储卷

5.5 配置文件

5.6 服务与访问

二、其它服务

6.prometheus部署 (暂时不用部署)

6.1 拉取镜像配置后，环境参数如下：

6.2 容器端口

6.3 存储卷

6.4 配置文件

6.5服务与访问

7.uias-gateway部署

7.1 拉取镜像配置后，环境变量中添加如下参数：

7.2 容器端口

7.3 存储卷

7.4 配置文件

7.5 服务与访问

8.uias-manager-service部署

8.1 拉取镜像配置后，环境变量中添加如下参数：

8.2 容器端口

8.3 存储卷

8.4 配置文件

8.5 服务与访问

9.uias-log-service部署

8.1 拉取镜像配置后，环境变量中添加如下参数：

9.2 容器端口

9.3 存储卷

9.4 配置文件

9.5 服务与访问

10.uias-authentication-service部署

10.1 拉取镜像配置后，环境变量中添加如下参数：

10.2 容器端口

10.3 存储卷

10.4 配置文件

10.5 服务与访问

11.uias-authorization-service部署

11.1 拉取镜像配置后，环境变量中添加如下参数：

11.2 容器端口

11.3 存储卷

11.4 配置文件

11.5 服务与访问

12.uias-web部署

12.1 拉取镜像配置后，环境变量中添加如下参数：

12.2 容器端口

12.3 存储卷

12.4 配置文件

12.5 服务与访问

13.bcpf部署

13.1 拉取镜像配置后，环境变量中添加如下参数：

13.2 容器端口

13.3 存储卷

13.4 配置文件

13.5 服务与访问

三、其它

1.NFS文件共享服务器