• [知识分享] CCE容器业务如何配置访问外部静态资源
    背景:       容器业务中需要访问到某些静态文件,如鉴权文件、图片、前端静态资源等,直接将静态文件打包至容器中会导致容器臃肿,尤其是多负载需要共享这些资源时,每个容器中都需要配置这些文件,从而降低整体业务迭代更新速度。那CCE中有没有方法可以保持容器轻量化的同时,保证容器业务也能正常运行呢?解决方式:方案一:配置存储类型为HostPath模式       这种方式是一种常见的处理方案,其原理就是将这些静态文件配置在宿主机的某个目录,然后通过k8s中HostPath模式,将宿主机的路径挂载到容器的某个具体的目录下,实现两个目录间资源文件的共享。CCE中也支持这种配置方式,具体配置方式是:1)远程登录CCE Node节点,将静态文件上传至虚拟机的某个文件目录,如/tmp/front。2)起负载,并配置文件的挂载路径,如挂载至容器的/mnt/test目录3)配置亲和性。因为静态资源上传时只上传到了容器的部分节点,需要保证负载启动时运行在静态文件上传的那个宿主机节点,因此需要配置负载和节点的亲和性策略。4)配置完成后,启动容器,即可在容器中访问到这些文件。方案二:配置云端持久化存储       持久化存储是一种共享存储的概念,不仅能实现容器和宿主机之间文件数据的共享,而且能更加完整的保存应用运行的状态数据,便于应用恢复。云端通过插件机制完成共享存储的对接,以对象存储卷为例,看看云端持久化存储如何进行配置。1)首先需要创建对象存储卷。2)将静态文件上传至OBS对象存储桶。文件较大时建议通过OBS Broswer+进行上传。3)上传完成后,在CCE负载中配置挂载持久化存储。在负载中选择更新升级》高级设置》数据存储》云存储,点击天际云存储,选择对象存储,输入挂载至容器中的路径,如/mnt/test4)挂载完成后,点击提交,即可在容器中访问到这些静态文件。两种方案对比:方案一:优点是文件读取的性能较高,配置方式简单;缺点是需要设置节点亲和性;方案二:优点是pod的创建不依赖于某一个固定节点,文件配置、修改都较方便;缺点是通过插件对接了后端的存储服务,存在网络IO的消耗,存在性能问题。
  • [互动交流] CCE最佳实践-游戏容器化改造提供的镜像有问题,烦请尽快更新镜像,急求
    CCE最佳实践-游戏容器化改造提供的镜像有问题,烦请尽快更新镜像,急求提供镜像的联系人
  • [知识分享] CCE ELB ingress PK Nginx ingress 孰胜孰负?
    >**摘要:Ingress可以基于七层的HTTP和HTTPS协议转发,可以通过域名和路径做到更细粒度的划分,本文以华为云CCE ingress 的两种实现方式进行实操,简述两种方式的优缺点。** ------------ # 目录: > 1 华为云CCE ingress实现方式 >> 1.1 ELB ingress 工作原理 >> 1.2 Nginx ingress 工作原理 >> 1.3 ingress 访问类型 >> 1.4 验证方式 > 2 Nginx ingress 方式创建ingress >> 2.1 新建无状态工作负载 Tomcat1 >> 2.2 新建无状态工作负载 Tomcat2 >> 2.3 创建ingress(IP访问) >> 2.4 创建ingress(域名访问),设置转发规则实现不同 URL 访问不同服务 > 3 ELB ingress 方式创建ingress >> 3.1 创建无状态工作负载 Tomcat3 >> 3.2 新建无状态工作负载 Tomcat4 >> 3.3 创建ingress(IP访问) >> 3.4 创建ingress(域名访问),设置转发规则实现不同 URL 访问不同服务 > 4 ELB ingress 与 Nginx ingress 的优缺点 >> 4.1 Nginx ingress优缺点 >> 4.2 ELB ingress优缺点 ## 1 华为云CCE ingress实现方式 CCE支持两种Ingress Controller类型,ELB Ingress Controller由华为云自研,基于弹性负载均衡服务(ELB)实现流量转发;Nginx Ingress Controller使用Kubernetes社区维护的模板与镜像,通过Nginx组件完成流量转发。 ### 1.1 ELB ingress 工作原理 ![02.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/11/095124vcy05hyic1slrepx.png) ### 1.2 Nginx ingress 工作原理 ![01.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/11/095136rxdhyeqvlwrrbtav.png) ### 1.3 ingress 访问类型 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/14/093201jlfd3fvvg2lndzqh.png) ### 1.4 验证方式 **当前文章采用 ingress 的两种方式进行实操验证:** Nginx ingress + 负载均衡路由 + 节点访问(NodePort) →见第2章节 ELB ingress + ENI负载均衡路由 + 集群内访问(ClusterIP) →见第3章节 ## 2 Nginx ingress 方式创建ingress ### 2.1 新建无状态工作负载 Tomcat1 - 无状态工作负载-step1-工作负载基本信息 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/11035258bv3h2a41pv6jjm.png) - 无状态工作负载-step2-容器设置:开源镜像中心-tomcat ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/110610rxo4w2z1360gx6uj.png) - 无状态工作负载-step3-工作负载访问设置:节点访问 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/111128paqams8psd1ly3dg.png) - 无状态工作负载-step3-高级设置:高级设置保持默认,点击创建 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/111418wygf4dk3olwhmc6b.png) - 进入容器,设置访问界面,内容为:It is a test! ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/115206dhrgcxtdyhkjktog.png) ### 2.2 新建无状态工作负载 Tomcat2 - 按照同样的步骤新建的tomcat负载 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/1414328kkihscdgzouevcb.png) - 进入容器,设置访问界面,内容为:Test for ingress! ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/141714lhyquxptwl8eyafp.png) ### 2.3 创建ingress(IP访问) - 创建前提:安装nginx-ingress插件 安装步骤参考:https://support.huaweicloud.com/usermanual-cce/cce_01_0034.html - 进入华为云CCE控制台,进入资源管理下的网络管理界面,点击ingress ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/143027fheqs5mfmmuwxytk.png) - 添加ingress,开启“对接nginx”选项,设置转发规则如下 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/145747usdpn4itna5rc4vy.png) - 创建成功后,查看ingress ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/150042vwflyg9eus54f1bq.png) - 访问服务,进行验证 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/110130bhcovjnxr7xvi9qi.png) ### 2.4 创建ingress(域名访问),设置转发规则实现不同 URL 访问不同服务 **说明:2.3章节的验证为IP直接访问,当前章节以域名访问进行验证** - DNS新建两个域名并解析到 1.1.1.1 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/102437ss2wsycpidfhdu8k.png) **DNS配置参考:** https://support.huaweicloud.com/qs-dns/dns_qs_0002.html - 新建ingress,增加转发规则,转发规则的域名设置为上一步新建的两个域名 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/101218u2i904irzm47kvzj.png) - 查看ingress ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/103315me7cjm9vurjrhuzy.png) **注:由上图可知,增加后的ingress使用的是同一个ELB的IP进行服务访问** - 修改DNS的解析到ingress的访问IP ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/103634pr97mqcls3wzxj9k.png) - 访问服务,进行验证 通过域名 ingress1.xxxxxxx 只能访问到 **Test for ingress!** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/152144nmiaavajxjblfb0m.png) 通过域名 ingress2.xxxxxxx 只能访问到 **It is a test!** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/152309tnhurqd5soifsnug.png) ## 3 ELB ingress 方式创建ingress ### 3.1 创建无状态工作负载 Tomcat3 - 无状态工作负载-step1-工作负载基本信息,选择绑定弹性网卡 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/185925fhl7ioqszacpwn3v.png) - 无状态工作负载-step2-容器设置:开源镜像中心-tomcat ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/110610rxo4w2z1360gx6uj.png) - 无状态工作负载-step3-工作负载访问设置:集群内访问 ( ClusterIP ) ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/190437orgn3j2h9wqvxtzo.png) - 无状态工作负载-step3-高级设置:高级设置保持默认,点击创建 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/190528zq3nylpenc4vm5ap.png) - 进入容器,设置访问界面,内容为:It is a test ENI! ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/191009hsi5cdtjxg3u6esr.png) ### 3.2 新建无状态工作负载 Tomcat4 - 按照同样的步骤新建的tomcat负载 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/191227azumehvp8rsejsnh.png) - 进入容器,设置访问界面,内容为:Test for ingress ENI! ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/191458ldfox8iqwpl3qitt.png) ### 3.3 创建ingress(IP访问) - 进入华为云CCE控制台,进入资源管理下的网络管理界面,点击ingress ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/143027fheqs5mfmmuwxytk.png) - 添加ingress,选择ENI负载均衡路由,设置转发规则如下 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/10/192407nb0l3an1q01zs4gt.png)![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/11/173510eu19jo2hfld5aklu.png) - 创建成功后,查看ingress ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/105639ybvb32viaxejwxxd.png) - 访问服务,进行验证 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/105847apgwfraiw9j4e7bo.png) ### 3.4 创建ingress(域名访问),设置转发规则实现不同 URL 访问不同服务 **说明:3.3章节的验证为IP直接访问,当前章节以域名访问进行验证** - DNS新建两个域名并解析到 1.1.1.1 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/110546ocspkjucruzu425w.png) **DNS配置参考:** https://support.huaweicloud.com/qs-dns/dns_qs_0002.html - 新建ingress,增加转发规则,转发规则的域名设置为上一步新建的两个域名 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/1113051iz87mhjzrwd99hb.png)![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/111336wcbzytnwfdsezke3.png) - 查看ingress ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/111448lqior2tpfcwvz0wu.png) **注:由以上步骤可知,增加ingress时可以选择新建ELB,使不同的ELB的转发不同的服务** - 修改DNS的解析到ingress的访问IP ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/13/111802jbu4wj27gz1ukqxm.png) - 访问服务,进行验证 通过域名 ingress3.xxxxxxx 只能访问到 **It is a test ENI!** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/12/172134zrnywrlizaamtfqm.png) 通过域名 ingress4.xxxxxxx 只能访问到 **Test for ingress ENI!** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/12/172306khyft5aj7z5sswxz.png) **说明:当前仅为演示操作,实际项目中可以根据服务的需要创建多个ingress实现服务转发。(一个ingress对应一个独享型 ELB)** ## 4 ELB ingress 与 Nginx ingress 的优缺点 ### 4.1 Nginx ingress优缺点 - 优点: 1、可自定义配置参数,详情参考:https://kubernetes.github.io/ingress-nginx/user-guide/nginx-configuration/annotations/ 2、转发规则配置service同时支持集群内访问(ClusterIP)和节点访问(NodePort) 3、可以设置路由重定向 - 缺点 1、需要安装nginx-ingress 插件,占用node资源 2、需要自行升级,维护 2、性能依赖于pod资源配置 3、多个ingress使用同一个ELB(即nginx-ingress暴露服务的ELB),性能受ELB限制 ### 4.2 ELB ingress优缺点 - 优点: 1、不需要进行插件安装,华为云直接提供,免维护,免升级 2、多个ingress可以使用多个ELB,高性能 3、ingress controller部署在master节点,不占用集群node资源 - 缺点 1、转发规则配置service 仅支持集群内访问(ClusterIP)或节点访问(NodePort) 2、不支持路由重定向
  • [问题求助] CCE创建工作负载时,环境必须是全新的吗,上面安装了其他组件创建不成功
    【功能模块】CCE创建工作负载不成功【操作步骤&问题现象】1、环境已经安装其他组件2、创建工作负载,实例异常报错:重新拉取镜像失败已经排除内存大小的原因【截图信息】【日志信息】(可选,上传日志内容或者附件)
  • [知识分享] CCE proxysql+mysql 实现MySQL主从读写分离
    >**摘要:本文基于华为云CCE部署 Proxysql + Mysql,实现数据库主从读写分离,部署过程涉及到数据库的持久化存储、数据库配置文件的Configmap挂载、CCE环境变量设置、CCE的服务(ClusterIP,负载均衡)设置。详细内容可阅读文章了解** # 目录 > 1.部署架构图 > 2.组件简介 > 3.部署前提 > 4.部署MySQL主从 >> 4.1 通过配置项configmap创建MySQL master的配置文件 >> 4.2 通过配置项configmap创建MySQL slave的配置文件 >> 4.3 创建MySQL master工作负载 >> 4.4 创建MySQL slave工作负载 >> 4.5 MySQL master配置 > 5.部署proxySQL >> 5.1 通过配置项configmap创建proxysql的配置文件 >> 5.2 创建proxySQL 工作负载 >> 5.3 proxySQL配置数据库读写分离 >> 5.4 proxySQL另一实例配置 > 6.验证 >> 6.1 验证MySQL读写分离 >> 6.2 验证proxysql 负载均衡 > 7.FAQ >> 7.1 通过负载均衡数据库后,SQL语句执行报错 >> 7.2 数据库连接报 1251 错误 >> 7.3 ELB 负载均衡后连接失败 ## 1.部署架构图 ![部署架构图.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/27/094936myiwnsv6dtwcffmp.png) ## 2.组件简介 **MySQL**:关系型数据库,按照数据结构来组织、存储和管理数据的仓库 **proxySQL**:proxySQL是灵活强大的MySQL代理层, 是一个能实实在在用在生产环境的MySQL中间件,可以实现读写分离,支持 Query 路由功能,支持动态指定某个 SQL 进行 cache,支持动态加载配置、故障切换和一些 SQL的过滤功能。默认管理连接端口6032,数据库连接端口 3306。 ## 3. 部署前提 - 具备可使用的CCE集群以及CCE节点 - CCE购买参考:https://support.huaweicloud.com/usermanual-cce/cce_01_0028.html ## 4. 部署MySQL主从 ### 4.1 通过配置项configmap创建MySQL master的配置文件 - MySQL主my.cnf文件 - CCE控制台,进入配置中心下的配置项ConfigMap,点击创建配置项,如下图所示 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/190127w1kmrgxzdo5a2t9s.png) - my.cnf mysql-master配置内容如下: ```shell [mysqld] pid-file=/var/run/mysqld/mysqld.pid socket=/var/run/mysqld/mysqld.sock datadir=/var/lib/mysql secure-file-priv= NULL server-id=101 ##用于高可用区分服务的ID,MySQL主从ID不一致即可 log-bin=master-binlog ``` ### 4.2 通过配置项configmap创建MySQL slave的配置文件 - MySQL主my.cnf文件 - CCE控制台,进入配置中心下的配置项ConfigMap,点击创建配置项,如下图所示 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/191149iadp7anvbyfcly6i.png) - my.cnf mysql-slave配置内容如下: ```shell [mysqld] pid-file=/var/run/mysqld/mysqld.pid socket=/var/run/mysqld/mysqld.sock datadir=/var/lib/mysql secure-file-priv= NULL server-id=102 ##用于高可用区分服务的ID,MySQL主从ID不一致即可 log-bin=master-binlog ``` - 说明:配置文件内的其他参数可自行设置,当前仅为演示,未进行其他配置。 ### 4.3 创建MySQL master工作负载 - 进入华为云CCE控制台,工作负载下的有状态工作负载界面,点击创建有状态工作负载 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/1915430noeucaifvpvqqb1.png) - 创建MySQL master负载-工作负载基本信息 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/19180224eqsuvpspq4jsgm.png) - 创建MySQL master负载-容器设置-step1-开源镜像中心:MySQL 8.0 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/192057jgzuivr73ain1a6r.png) - 创建MySQL master负载-容器设置-step2-环境变量:设置MySQL密码 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/192243vlex7wfvmfidjgvr.png) - 创建MySQL master负载-容器设置-step3-数据存储:mysql-master-cnf挂载 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/17/1455134djzm8gdhtvvmpgh.png) - 创建MySQL master负载-容器设置-step4-数据存储:挂载SFS存储MySQL数据 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/193230fgpzuvtf39txk0vs.png) - 创建MySQL master负载-工作负载访问设置-实例间发现服务:访问端口3306 - 创建MySQL master负载-工作负载访问设置-服务:节点访问,节点模式,访问端口3306,访问端口自动生成 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/19373203snpsxkzedahrrd.png) - 创建MySQL master负载-高级设置保持默认即可,点击创建 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/1941349jgmk1ucgzbfl3id.png) ### 4.4 创建MySQL slave工作负载 - 进入华为云CCE控制台,工作负载下的有状态工作负载界面,点击创建有状态工作负载 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/1915430noeucaifvpvqqb1.png) - 创建MySQL slave负载-工作负载基本信息 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/194841zp1ulzuw0nb4gafg.png) - 创建MySQL slave负载-容器设置-step1-开源镜像中心:MySQL 8.0 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/192057jgzuivr73ain1a6r.png) - 创建MySQL slave负载-容器设置-step2-环境变量:设置MySQL密码 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/192243vlex7wfvmfidjgvr.png) - 创建MySQL slave负载-容器设置-step3-数据存储:mysql-slave-cnf挂载 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/17/145606msiofmx76xxwu6pi.png) - 创建MySQL slave负载-容器设置-step4-数据存储:挂载SFS存储MySQL数据 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/193230fgpzuvtf39txk0vs.png) - 创建MySQL slave负载-工作负载访问设置-实例间发现服务:访问端口3306 - 创建MySQL slave负载-工作负载访问设置-服务:节点访问,节点模式,访问端口3306,访问端口自动生成 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/30/1116283eob8kvwl9napvdg.png) - 创建MySQL slave负载-高级设置:设置与MySQL master负载的反亲和性 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/195501mmk3v2xjxbi2aszc.png) - 创建负载 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/195631qvj4a54jsrp5rcjn.png) ### 4.5 MySQL master配置 - 登录MySQL master数据库,查看配置项是否生效 ```sql show variables like '%server%'; show variables like '%log_bin%'; ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/200750aiejouy4e64sv0y8.png) - 新建主库的复制账号并授权 ```sql CREATE USER 'backup'@'%' IDENTIFIED BY 'backupmima'; ## 8.0数据库请使用 CREATE USER 'backup'@'%' IDENTIFIED WITH mysql_native_password BY 'backupmima'; GRANT REPLICATION SLAVE ON *.* TO 'backup'@'%'; SHOW GRANTS FOR 'backup'@'%'; ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/201919ufpqbjr775flckt9.png) - 主数据库 master status ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/2035376k9rmw3nbhq8kmnt.png) - 登录MySQL slave数据库,查看配置项是否生效 ```sql show variables like '%server%'; show variables like '%log_bin%'; ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/090248wqtzsilezjguoa4y.png) - MySQL slave增加MySQL master连接配置信息。 ```sql CHANGE master to master_host='mysql-master.default.svc.cluster.local', master_user='backup', master_password='backupmima', master_port=3306, master_log_file='master-binlog.0000003', master_log_pos=1186, master_connect_retry=30; ``` **说明** master_host='mysql-master.default.svc.cluster.local' 为MySQL master服务集群内网IP ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/102643lwxxpzejdcc6ugxh.png) master_user='backup',master_password='backupmima' 为复制数据库的账号和密码 master_log_file='master-binlog.0000003', 为MySQL master的binlog文件 master_log_pos=1186, 为MySQL master的Posistion值 master_connect_retry=30 主节点宕机,从服务器的尝试连接时间 - MySQL slave开启设置复制 ```sql start slave; show slave status \G; ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/103436jzzbg5ppgzics0gn.png) - 测试数据复制 登录MySQL master执行以下命令: ```sql CREATE databases test; USE test; CREATE table test(name char(10),age int(3)); ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/104901ayenkaf4wtykwrdp.png) 登录MySQL slave执行以下命令: ```sql SHOW databases; USE test; SHOW tables; ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/105145rwro4ess0zvrstws.png) ## 5. 部署proxySQL ### 5.1 通过配置项configmap创建proxysql的配置文件 - proxysql proxysql.cnf文件 - CCE控制台,进入配置中心下的配置项ConfigMap,点击创建配置项,如下图所示 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/26/162238wylb99u9y6gkmhrz.png) - proxysql.cnf 配置内容如下: ```shell datadir="/var/lib/proxysql" admin_variables = { admin_credentials="admin:admin" mysql_ifaces="0.0.0.0:6032" refresh_interval=2000 cluster_username="admin" cluster_password="admin" cluster_check_interval_ms=200 cluster_check_status_frequency=100 cluster_mysql_query_rules_save_to_disk=true cluster_mysql_servers_save_to_disk=true cluster_mysql_users_save_to_disk=true cluster_proxysql_servers_save_to_disk=true cluster_mysql_query_rules_diffs_before_sync=1 cluster_mysql_servers_diffs_before_sync=1 cluster_mysql_users_diffs_before_sync=1 cluster_proxysql_servers_diffs_before_sync=1 } mysql_variables= { monitor_password="monitor" monitor_galera_healthcheck_interval=1000 threads=2 max_connections=2048 default_query_delay=0 default_query_timeout=10000 poll_timeout=2000 interfaces="0.0.0.0:3306;0.0.0.0:33062" default_schema="information_schema" stacksize=1048576 connect_timeout_server=10000 monitor_history=60000 monitor_connect_interval=20000 monitor_ping_interval=10000 ping_timeout_server=200 commands_stats=true sessions_sort=true have_ssl=false ssl_p2s_ca="" ssl_p2s_cert="" ssl_p2s_key="" ssl_p2s_cipher="ECDHE-RSA-AES128-GCM-SHA256" } ``` ### 5.2 创建proxySQL 工作负载 - 进入华为云CCE控制台,工作负载下的有状态工作负载界面,点击创建有状态工作负载 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/23/1915430noeucaifvpvqqb1.png) - 创建proxysql负载-工作负载基本信息 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/11080086amfqno5mercjpu.png) - 创建proxysql负载-容器设置-step1-我的镜像:proxysql:V2.0 **说明** 镜像来源 https://registry.hub.docker.com/r/percona/proxysql 推送到华为云镜像仓库 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/1129168qee04mcz6rhn5na.png) - 创建proxysql负载-容器设置-step2-数据存储:挂载Configmap 配置文件 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202201/17/150217dfjxdclbkeqgw6lx.png) - 创建proxysql负载-容器设置-step2-数据存储:挂载SFS存储proxysql数据 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/111917qosglhsbfjqdne9t.png) - 创建proxysql负载-工作负载访问设置-实例间发现服务:访问端口3306 - 创建proxysql负载-工作负载访问设置-服务:负载均衡,节点级别,容器端口3306、访问端口3306 **说明**:负载均衡配置完成后,服务器安全组需要开放 100.125.0.0/16 网段的安全组入方向规则 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/25/0925089keqqfz7gylxqsah.png) - 创建proxysql负载-高级设置保持默认即可,点击创建 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/113148zcohbogbgbxriiwe.png) ### 5.3 proxySQL配置数据库读写分离 - 5.3.1 MySQL master创建用于proxysql连接的用户(用户数据会同步到从库) ```sql CREATE USER 'proxysql'@'%' IDENTIFIED with mysql_native_password BY 'proxysqlmima'; GRANT ALL ON *.* TO 'proxysql'@'%'; flush privilrges; ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/143605jaemctvoc5opepwt.png) - 5.3.2 MySQL master创建用于proxysql健康监测的用户(用户数据会同步到从库) ```sql CREATE USER 'monitor'@'%' IDENTIFIED with mysql_native_password BY 'monitormima'; GRANT SELECT ON *.* TO 'monitor'@'%'; flush privilrges; ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/1446328z3xdhx1r70jhwzw.png) ------------ - 5.3.3 登录proxysql 配置mysql_server 信息 **说明**:分别插入mysql的节点信息,10表示master(写),20表示slave(读) ```sql mysql -h 127.0.0.1 -P 6032 -u admin -p insert into mysql_servers(hostgroup_id,hostname,port,weight,comment) values(10,'mysql-master.default.svc.cluster.local',3306,1,'master'); insert into mysql_servers(hostgroup_id,hostname,port,weight,comment) values(20,'mysql-slave.default.svc.cluster.local',3306,1,'slave'); ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/154516tvzmtgyx7fcwrhqp.png) **字段说明**: hostgroup_id:一个组ID,组内可包含多个MySQL地址 hostname:MySQL访问地址 port:访问端口 weight:访问权重 comment:文本,用于备注节点信息 **生效配置并把配置保存到磁盘** ```sql load mysql servers to runtime; save mysql servers to disk; ``` ------------ - 5.3.4 登录proxysql 配置mysql_users 信息 **说明**:proxysql 通过6032链接管理接口,默认账号密码为 admin/admin ```sql mysql -h 127.0.0.1 -P 6032 -u admin -p insert into mysql_users(username,password,default_hostgroup,transaction_persistent)values('proxysql','proxysqlmima',10,1); ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/160043cikqzw5ajpzhcosl.png) **字段说明** sername、password:proxysql连接MySQL的用户和密码 default_hostgroup:没有匹配到规则的SQL直接访问这个ID内的数据库 transaction_persistent:一个事务内的多条 SQL,只会路由到一个主机组中 **生效配置并把配置保存到磁盘** ```sql load mysql users to runtime; save mysql users to disk; ``` ------------ - 5.3.5 登录proxysql 配置MySQL路由规则 ```sql insert into mysql_query_rules(rule_id,active,match_digest,destination_hostgroup,apply) values(1,1,'^SELECT.*FOR UPDATE$',10,1); insert into mysql_query_rules(rule_id,active,match_digest,destination_hostgroup,apply) values(2,1,'^SELECT',20,1); insert into mysql_query_rules(rule_id,active,match_digest,destination_hostgroup,apply) values(3,1,'^SHOW',20,1); ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/164403ynkzyf7ovzeavsdo.png)![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/164432qj4je5xxqw7lkd7z.png) **字段说明** rule_id:规则ID active:设置为1时,为启用规则 match_digest:SQL匹配的规则 destination_hostgroup:将匹配的规则路由到这个主机组 apply:设置为1时,在匹配和处理此规则后,将不再评估进一步的查询 ```sql load mysql query rules to runtime; save mysql query rules to disk; ``` -------- - 5.3.6 配置数据库健康监测账号 ```sql set mysql-monitor_username='monitor'; set mysql-monitor_password='monitormima'; ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/1721094xqmf6aiwh6imub8.png) **生效配置并把配置保存到磁盘**. ```sql load mysql variables to runtime; save mysql variables to disk; ``` ### 5.4 proxySQL另一实例配置 **按照同样的方法进行另一实例proxysql的配置** **说明**:也可通过proxySQL集群的方式进行部署。实现各个proxysql之间的数据同步 ## 6. 验证 ### 6.1 验证MySQL读写分离 - proxysql连接数据并执行以下命令 ```sql mysql -h 127.0.0.1 -P 3306 -u proxysql -p ##使用proxysql 连接数据库 show databases; use test; show tables; DESC test; insert into test(name,age) values('caichunfu',10); ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/173602du1lbphz5iuucl8e.png) - proxysql 连接管理接口,查看路由记录; stats_mysql_query_digest:通过ProxySQL路由出去的各类查询相关统计数据 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/174711em4itjujdgssvo9e.png) ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/24/175845kyrwxg0udnh8rblq.png) ### 6.2 验证proxysql 负载均衡 - 查看Proxysql的访问方式 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/25/1714581oly4iuhjevemgmq.png) 访问方式为 124.71.75.74:3306 - 使用navicat 连接查看数据库 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/25/171723nfwggjsbe11z53wo.png) - 验证负载均衡能力-step1 连接进入数据 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/25/172028ljypx3incnc3ijcz.png) - 验证负载均衡能力-step2 轮流删除实例,验证Proxysql负载均衡能力 **删除一个实例** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/25/175251wavx7qbia0ephehi.png) **验证** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/25/1756085fjlbo2ytbrmppus.png) **删除另一个实例** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/25/175717qdfwdhlh9aaggqfe.png) **验证** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/25/1756085fjlbo2ytbrmppus.png) ## 7 FAQ ### 7.1 通过负载均衡数据库后,SQL语句执行报错。 [Error] 9006 - ProxySQL Error: connection is locked to ...... 解决办法:登录proxysql管理端,执行以下命令 ```sql set mysql-set_query_lock_on_hostgroup=0; load mysql variables to runtime; save mysql variables to disk; ``` ### 7.2 数据库连接报 1251 错误 [Error] 1251 Client does not.... 解决办法:MySQL8.0的密码加密规则修改为mysql_native_password ```sql ALTER USER 'proxysql'@'%' IDENTIFIED WITH mysql_native_password BY 'proxysqlmima'; #修改加密规则 ALTER USER 'proxysql'@'%' IDENTIFIED BY 'proxysqlmima' PASSWORD EXPIRE NEVER; #更新一下用户的密码 FLUSH PRIVILEGES; ``` ### 7.3 ELB 负载均衡后连接失败 解决办法:安全组入方向放通 100.125.0.0/16 网段的安全组
  • [知识分享] 如何在CCE容器中实现多Pod共享配置文件,请看这里
    场景:容器中需要通过配置文件启动,如将配置文件放在CCE的宿主机节点上,问题可以解决,但是不利于配置文件的修改。同时由于起负载时不确定负载具体会创建在哪个节点上,导致需要在多个节点上加载此配置项。解决方案:那CCE是如何通过configMap来解决配置文件挂载的呢?以nginx容器为例,默认的配置文件为nginx.conf,路径是/etc/nginx。首先,在CCE中定义配置项ConfigMap。在CCE 控制台中选择配置中心,点击创建配置项ConfigMap。其中键为nginx的配置文件名称nginx.conf,值定义为nginx.conf中的具体内容,如下图所示。其次,引用此配置项。创建depolyment,选择nginx容器。在挂载中选择数据存储,点击添加本地磁盘,选择配置项存储类型,确认上面创建好的配置项内容。最后,配置挂载路径。配置项挂载时,如直接挂载到容器的某个具体目录会将容器中此目录所有的内容覆盖掉,导致实际起负载时由于配置项中的文件缺失产生报错。因此需要指定替换容器中的具体配置文件。Nginx容器中,具体需要如下指定:挂载路径配置为nginx容器nginx.conf所在的目录文件/etc/nginx/nginx.conf。此时如直接启动容器,则会报错,提示如下。从报错中可以看出虽然我们在挂载时指定了挂载到一个具体的文件,但是似乎没有生效,识别的挂载路径仍然是一个目录。那如何指定到具体的配置文件呢?挂载时添加子路径,否则不会识别挂载路径下的具体文件。因此需要在挂载时额外配置子路径为文件名nginx.conf,重启容器后启动正常。正确配置如下。重启容器后,即可实现nginx配置文件的挂载。多个Pod实例启动,仍然是共享一份配置文件,无需关注底层Pod实例运行在哪一个Node节点,对于后续运维更为便利。
  • [问题求助] 【ABC】【文件预览功能】文件预览提示‘unauthorized access’
    【功能模块】项目:院区医疗标准版项目租户:Hi-chinasoft2021测试组件:testFilePreview测试高级页面:TestView文件预览功能【操作步骤&问题现象】1、引用FilePreview库,组件调用FilePreview.preview('https://studio.e.huawei.com/u-route/baas/sys/v1.1/connectors/objectstorageproxy/SmartCampus__FileOperator/viewobject?object=/ubains/ubains1639103056814测试sizes.docx', '#testFilePreview')2、文件地址可以直接访问下载;3、IOC页面访问提示‘unauthorized access’4、参数:filePath: https://studio.e.huawei.com/u-route/baas/sys/v1.1/connectors/objectstorageproxy/SmartCampus__FileOperator/viewobject?object=/ubains/ubains1639103056814测试sizes.docx5、电话:18182440291【截图信息】【日志信息】(可选,上传日志内容或者附件)
  • [干货汇总] 一文搞定传统、容器、CCE云上部署应用
    > **摘要:基于一个前后端分离的应用,从传统部署、容器化部署,华为云CCE部署以及华为云CCE helm 模板部署进行实操,体验传统部署到华为云CCE部署的变化,详细内容可阅读文章了解** # 目录 > 1、验证进程 > 2、传统化部署 >> 2.1、数据库部署 >> 2.2、前端部署 >> 2.3、后端部署 >> 2.4、系统验证 > 3、容器化部署 >> 3.1、前端容器制作及部署 >> 3.2、后端容器制作及部署 >> 3.3、系统验证 > 4、华为云CCE部署 >> 4.1、镜像上传华为云SWR >> 4.2、华为云CCE部署镜像 >>> 4.2.1、购买华为云CCE >>> 4.2.2、创建MySQL工作负载 >>> 4.2.3、创建Javajob工作负载 >>> 4.2.4、创建front工作负载 >> 4.3、系统验证 > 5、CCE helm模板部署 >> 5.1、获取配置文件以及负载的yaml文件 >> 5.2、基于服务器安装helm >> 5.3、基于helm chart模型打包 >> 5.4、上传至华为云CCE >> 5.5、一键部署到华为云CCE >> 5.6、系统验证 --- # 1、验证进程 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/26/114146og1vnlld8qisdidk.png) --- # 2、传统化部署 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/26/153620vjyqqmkmsur49uh4.png) ## 2.1、数据库部署 - 数据库部署参考:https://www.runoob.com/mysql/mysql-install.html - 后端业务数据存储在 MySQL ,暴露端口为3306;(实际项目中,数据库请使用部署系统所系的数据库,当前仅为演示。) - 数据库初始化脚本:initdb.sql - 数据库密码使用:!1Zezhang(实际项目中,数据库密码请自行设置,当前仅为演示。) - 数据库部署完成后,使用Navicat连接数据库,导入initdb.sql文件初始化数据库,编码格式选择gbk。 ## 2.2、前端部署 - 前端是vue的项目,通过webpack打包成dist文件夹。再通过nginx做代理,把静态资源暴露在前端服务器80端口上 - 获取前端静态资源:dist.zip - 静态资源解压到 /root/ - yum 安装 nginx。并配置nginx.conf 文件,参考配置如下; ```shell user root; //nginx 启动用户 worker_processes auto; error_log /var/log/nginx/error.log; pid /run/nginx.pid # Load dynamic modules. See /usr/share/doc/nginx/README.dynamic. include /usr/share/nginx/modules/*.conf; events { worker_connections 1024; } http { log_format main '$remote_addr - $remote_user [$time_local] "$request" ' '$status $body_bytes_sent "$http_referer" ' '"$http_user_agent" "$http_x_forwarded_for"'; access_log /var/log/nginx/access.log main; sendfile on; tcp_nopush on; tcp_nodelay on; keepalive_timeout 65; types_hash_max_size 4096; include /etc/nginx/mime.types; default_type application/octet-stream; # Load modular configuration files from the /etc/nginx/conf.d directory. # See http://nginx.org/en/docs/ngx_core_module.html#include # for more information. include /etc/nginx/conf.d/*.conf; server { listen 80; //前端访问端口 listen [::]:80; server_name _; root /usr/share/nginx/html; # Load configuration files for the default server block. include /etc/nginx/default.d/*.conf; location / { //前端静态资源配置 root /root/dist; index index.html; } error_page 404 /404.html; location = /404.html { } error_page 500 502 503 504 /50x.html; location = /50x.html { } } ``` - service nginx start 启动前端并进行访问。 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/26/15470293q118b6euezctbp.png) ## 2.3、后端部署 - 后端是springboot项目,编译成一个jar包,服务默认端口为8081,启动服务需要Java环境,需要提前安装jdk。 - 获取jar包:score-system-1.0-SNAPSHOT.jar - 启动命令 ```shell nohup java -jar score-system-1.0-SNAPSHOT.jar --spring.profiles.active=dev --MYSQLADDR=localhost & ``` - 访问:curl localhost:8081 获取返回信息 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/095835duqzx9v7axwnnmiz.png) ## 2.4、系统验证 - 访问前端界面并设置后端服务地址 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/101227b9u0h1gypoepbpb0.png) - 登录系统 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/101346izcr9dintfpebm5v.png) --- # 3、容器化部署 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/101949hlgttvj9p3usdtjl.png) ## 3.1、前端容器制作及部署 - 新建文件夹存放构建镜像需要的静态资源、配置文件、dockfile等 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/103810a3dm6cahgdwpoghp.png) - dockerfile 内容如下: ```shell FROM centos RUN yum intsall nginx -y COPY nginx.conf /etc/nginx/nginx.conf COPY dist /root/dist ENTRYPOINT ["nginx","-g","daemon off ;"] ``` - 构建镜像,在当前目录下执行以下命令 ```shell docker build -t front:v1 . //构建镜像 ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/11432765ca1s1je1l0ordu.png) ```shell docker images //查看镜像 ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/114456u0al7ppntczqnece.png) - 运行镜像 ```shell docker run -it --name front -p 80:80 -d front:v1 ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/114834yydi0zulrlqs0bbm.png) ## 3.2、后端容器制作及部署 - 新建文件夹存放构建镜像需要的jar包、配置文件、dockfile等 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/115653gd40fb3rimtytgwe.png) - dockerfile 内容如下: ```shell FROM centos RUN yum intsall java-1.8.0-openjdk -y COPY score-system-1.0-SNAPSHOT.jar /root/ CMD java -jar /root/score-system-1.0-SNAPSHOT.jar --spring.profiles.active=dev ``` - 构建镜像,在当前目录下执行以下命令 ```shell docker build -t javajob:v1 . //构建镜像 ``` ```shell docker images //查看镜像 ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/142635sgge3jxnpapq0vxl.png) - 运行镜像 ```shell docker run -e MYSQLADDR='实际部署数据库的主机IP' -it --name javajob -p 8080:8081 -d javajob:v1 ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/143027lbkcmyromq2uw0br.png) ## 3.3、系统验证 - 访问前端界面并设置后端服务地址 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/143500byzw2pvungiwgmay.png) - 登录系统 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/143745ltk5opxv5n4ebrpf.png) --- # 4、华为云CCE部署 ## 4.1、镜像上传华为云SWR ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/194450k1u2jmw1jtfh5bzg.png) - 镜像上传-step1 连接华为云镜像服务 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/145313jfqkxabxns7bjfgd.png) - 镜像上传-step2 本地镜像重新打标签 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/145619i9tabk0lvoo6w0ac.png) - 镜像上传-step3 本地镜像上传 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/1458591kyb4pg3jhesuweb.png) - 参考:https://support.huaweicloud.com/usermanual-swr/swr_01_0011.html - 查看swr中的镜像 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/150500qd4s6aa8ocwzfgrn.png) ## 4.2、华为云CCE部署镜像 ### 4.2.1、购买华为云CCE ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/151336nnotvqxbtdbehxjy.png) - 参考链接:[https://support.huaweicloud.com/usermanual-cce/cce_01_0028.html](https://support.huaweicloud.com/usermanual-cce/cce_01_0028.html) ### 4.2.2、创建MySQL工作负载 - 设置数据库配置项 configmap(初始化脚本) ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/153535t0vrnxbqnjkxgxgn.png) - 设置数据库秘钥 Secert ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/1540138rdsm7ieiib1vunr.png) - 创建有状态工作负载MySQL-step1-工作负载信息 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/154235saczzipyglni8qam.png) - 创建有状态工作负载MySQL-step2-容器设置 1.开源镜像站选择MySQL 版本号为 8.0 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/154425esmcsetdwg6rcnkx.png) 2.环境变量导入设置好的Secret ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/154730kt7nvs6dpdnozc0u.png) 3.configmap挂载到容器目录/docker-entrypoint-initdb.d ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/154920iwuisvtdgde3qqsk.png) 4.设置容器数据挂载sfs,使数据持久化 a.CCE控制台-资源管理-存储管理-创建文件存储卷 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/16/203430wekymhfschni2lpk.png) b.数据存储选择云存储-文件存储-选择新建的sfs-添加路径如下 docker-data/mysql 用于挂载MySQL数据(容器路径 /var/lib/mysql) daocker-data-log/mysql 用于挂载MySQL日志(容器路径 /var/log/mysql) ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/16/203130cswwfkfa4nwgfsck.png) c.服务器查看挂载信息 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202112/16/203914rogsp0tlmpxs204t.png) - 创建有状态工作负载MySQL-step3-工作负载访问设置 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/155603vcrjsyhs9ehmwhsi.png) - 创建有状态工作负载MySQL-step4-高级设置默认即可,点击创建 ### 4.2.3、创建Javajob工作负载 - 创建无状态工作负载Javajob-step1-工作负载基本信息 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/1613232invu9oev1ig79oc.png) - 创建无状态工作负载Javajob-step2-容器设置 1.选择我的镜像 test-java 版本号V1 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/161559vdbtzbhfpeddufz0.png) 2.环境变量设置 MYSQLADDR ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/1608405u3lhimch0nkrxll.png) ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/161936ukbnnbi9kdwelmhn.png) - 创建无状态工作负载Javajob-step3-工作负载访问设置 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/27/1621085uj5hcbuenqkznuw.png) - 创建无状态工作负载Javajob-step4-高级设置默认即可,点击创建 - 查看javajob负载并访问服务 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/141322qwzo34avdpz2a8ll.png) ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/141349jxnw7imq3dyglrwi.png) ### 4.2.4、创建front工作负载 - 创建无状态工作负载front-step1-工作负载基本信息 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/141618fa0lsiqqnbboha1b.png) - 创建无状态工作负载front-step2-容器设置 1.选择我的镜像 test-front 版本号V1 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/141831xcou7jgjg5arvn4h.png) - 创建无状态工作负载front-step3-工作负载访问设置 ***由于当前负载起了两个实例,可以通过负载均衡方式进行访问*** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/142305ulgirv54rqrmyilx.png) ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/144012cdfviuoazi9uambp.png) - 创建无状态工作负载front-step4-高级设置默认即可,点击创建 - 查看front负载并访问服务 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/142841riyzs4bv4ncafygp.png) ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/143537ksef0rlpe83mkf7k.png) ## 4.3、系统验证 - 访问前端界面并设置后端服务地址 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/144331off7udyiturljb1t.png) - 登录系统 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/144435wgoa6rvtswjde4ok.png) --- # 5、CCE helm模板部署 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/1942448wsmau2eyyzikpn7.png) ## 5.1、获取配置文件以及负载的yaml文件 - 负载yaml文件获取 1、点击编辑yaml文件并下载获取 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/144850ejtlldznfbxmwlqw.png) - 获取配置项configmap配置项yaml文件 1、点击编辑yaml文件并下载获取 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/145305w88iuf7wnuozhkfr.png) - 获取秘钥Secrect配置项yaml文件 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/145428e1wg19cnhpzmqsb3.png) - yaml 文件汇总 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/145820atforhb1cfvs0kyt.png) - 避免后续冲突删除掉yaml文件中的 resourceVersion 字段 ## 5.2、基于服务器安装helm - 下载代码包 ```shell wget https://get.helm.sh/helm-v3.0.2-linux-amd64.tar.gz ``` - 解压安装包 ```shell tar –zxvf helm-v3.0.2-linux-amd64.tar.gz ```shell - 复制helm文件到bin目录 ```shell cp linux-amd64/helm /usr/local/bin/ ``` - helm version查看 ```shell helm version ``` ## 5.3、基于helm chart模型打包 - helm创建chart模型 ```shell helm create score-chart ``` - yaml 文件上传到 score-chart/templates ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/165727ry19hwhjnzt4q3vw.png) - helm 打包模型 ```shell helm package socre-chart ``` ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/152901abnbl36ueew0xqs9.png) ## 5.4、上传至华为云CCE - 将打包好的文件上传华为云CCE ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/153229jfkdzyfp8p4vuu0u.png) ## 5.5、一键部署到华为云CCE **注意:安装前请删除工作负载、service、Configmap、Secret** - 点击模板中的安装按钮进入到配置界面 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/153449uitauy0di2jankvj.png) - 配置完成点击自定义安装,提交 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/153844torslzkocsbqi86i.png) ## 5.6、系统验证 - 访问前端界面并设置后端服务地址 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/1600481axlnu6wzqjh282c.png) - 登录系统 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/29/144435wgoa6rvtswjde4ok.png)
  • [沃土-方案构建经验分...] CCE云服务-咨询—docker 容器中运行redis无法启动:ignore-warnings ARM64-COW-BUG报错
    【故障现象】docker 容器中运行redis无法启动,详情截图如下:【故障诊断】根据redis的日志信息提示,初步判断是配置文件的问题。【故障原因】配置文件中的内容导致redis无法启动。【解决方案】Redis will now exit to prevent data corruption. Note that it is possible to suppress this warning by setting the following config: ignore-warnings ARM64-COW-BUG。根据信息提示,即在 redis.conf 中取消这最后一条注释: ignore-warnings ARM64-COW-BUG ,再重启redis服务即可。
  • [沃土-方案构建经验分...] CCE-docker镜像拉取失败
    **一、现象描述** 1、CCE控制台创建无状态工作负载,一个负载同时创建两个实例,在创建过程中,一个创建成功,一个创建失败。创建失败的报错信息为镜像拉取失败,具体报错如下所示: Failed to pull image “swr.cn-north-4.myhuaweicloud.com/tansj/hw_cns_bmfw_web:v50”: [rpc error: code = Unknown desc = Error response from daemon: Get https://swr.cn-north-4.myhuaweicloud.com/v2/: dial tcp: lookup swr.cn-north-4.myhuaweicloud.com on [::1]:53: read udp [::1]:58207->[::1]:53: read: connection refused, rpc error: code = Unknown desc = Error response from daemon: Get https://swr.cn-north-4.myhuaweicloud.com/v2/: dial tcp: lookup swr.cn-north-4.myhuaweicloud.com on [::1]:53: read udp [::1]:47536->[::1]:53: read: connection refused] **二、问题分析** 1、根据具体的报错可知,镜像拉取过程中,在访问华为云的SWR时连接被拒绝。初步分析为服务器访问华为云SWR时被拒绝。 2、登录镜像拉取失败的服务器执行以下命令: curl https://swr.cn-north-4.myhuaweicloud.com/v2/ ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/23/151932lwey26wq9dxfoflu.png) Cloud not resolve host swr.cn-north-4.myhuaweicloud.com ,根据报错可知当前服务器没办法正常解析域名 尝试curl其他网站,如curl www.baidu.com,还是出现同样的问题。 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/23/151957if98svutoeqbaw1n.png) 3、查看当前服务器的resolv.conf 文件。 cat /etc/resolv.conf ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/23/152019ie7jpwjk8p7pobke.png) 根据以上文件配置内容可知,当前服务器没有配置DNS服务器的地址,导致解析出现问题。 **三、解决方案** 1、查询北京四DNS服务器的内网地址 https://support.huaweicloud.com/dns_faq/dns_faq_002.html ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/23/152046cdt0rsma2jbo1rff.png) 2、resolv.conf 文件配置上nameserver nameserver 100.125.1.250 nameserver 100.125.129.250 3、重新curl https://swr.cn-north-4.myhuaweicloud.com/v2/ ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/23/152102ipqiv6kcxgyuxcqk.png) 4、CCE控制台重新创建负载,如图可见两个实例创建成功 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/202111/23/152113q3edupjkua8hrerv.png)
  • [热门活动] 【CCE全民体验赚码豆】参与云容器引擎CCE 体验问卷反馈有机会得2000码豆!!!
    填CCE体验问卷得2000码豆,有机会换大奖!! 超多码豆等你来拿,赶快参与呀!各位亲爱的华为云er:欢迎参加限时活动:填写云容器引擎 CCE产品调研问卷,反馈您的使用体验及建议,即有机会获得2000码豆,可以兑换海量奖品,先到先得,赶快行动起来吧!参与方式: 点击进入此页面:https://www.huaweicloud.com/product/cce.html详细步骤如下:步骤一:注册/登录(已注册用户可跳过此步骤)步骤二:实名认证(已经实名认证得可跳过此步骤)点击实名认证(后续操作一步步按提示走,建议选择红框框出来的,比较便捷) 步骤三:认证通过后,登录进入页面:https://console.huaweicloud.com/cce2.0?from=bbs已购买CCE集群的用户,将会进入服务总览页面,点击 云容器引擎使用体验调研 参与问卷反馈即可:新用户如果没有购买任何集群,则会自动进入如下页面,点击 云容器引擎使用体验调研 参与问卷反馈即可:步骤四:评价并点击提交:点击如图所示的服务概览页面链接,或者评价小笑脸,在弹出的评价页面评价后提交步骤五:提交后就坐等码豆入账啦,一般码豆会在评价后的7个工作日内到账 如此简单!超多码豆等您来拿,期待您的满意评价,赶快参与吧~~~~~
  • [互动交流] OBS C SDK创建空文件AccessDenied
    参考文档和demo源码实现了自己的obs文件创建、删除、上传、下载等函数,但是发现创建空文件经常会报AccessDenied错误,有时重试一次就可以成功,有时要延时三五秒以后重试才能成功。这个现象仅在创建空文件的时候才有,上传一个长度不为0的文件是正常的,两者都是调用SDK API中的put_object方法。有专家大神可以指导一下吗?
  • [公告] HDG杭州站报名| 分享华为CCE容器云、CloudOpera IES和视频UI开放架构实践
    各位小伙伴,楼主忍不住要呼喊一嗓子:2016华为开发者汇HDG-杭州站报名开始啦,干货、红包、福利、茶歇免费得~先报先过啊!!下面是活动详情介绍,报名请留意帖子最后报名入口在这骄阳似火的7月,除了即将到来的G20峰会,还有什么能让杭州人心潮澎湃呢?当然是7月30日的HDG 华为开发者汇 杭州站!一个属于开发者们的盛会,还在等什么,赶紧燥起来!【活动简介】HDG华为开发者汇是华为开发者社区在2016年的系列线下沙龙,将在北京、上海、深圳及各个城市定期举办。通过HDG,我们将面向广大开发者分享华为内部、合作伙伴以及社区成员的技术干货,带领大牛们贴近开发者社区,营造自由、开放、分享的技术交流平台。活动时间:2016年7月30日 (星期六) 10:00—16:30活动地点:浙江省西湖区教工路88号立元大厦3楼沃创空间沃创咖啡厅观众名额:100人现场提供:入门礼、午餐、茶歇现场抽奖:华为小口哨蓝牙耳机、华为荣耀无线路由器、华为zero荣耀手环等入场费用:免费(报名审核需通过)【演讲嘉宾及议题】赵纯利CloudOpera IES总体架构以及北向开放能力议题简介:本课程介绍华为CloudOpera IES产品的整体解决方案,包括其产品定义与独特价值。展示了第三方开发者利用IES北向API来开发创新APP的一般流程,还给出了一个APP开发实例,以及用于开发测试的远程实验室环境。程厚斌CloudOpera IES南向开放框架与能力议题简介:本课程介绍华为CloudOpera IES产品的南向开放架构与开放能力,包括对接第三方VIM、VNFM、SDN控制器的API接口。课程介绍了第三方厂商或开发者4个步骤完成南向插件开发,把自己的系统集成进入华为IES的流程,还给出了一个南向插件开发实例。黄玉奇华为CCE在混合云、大规模集群场景下的技术探索议题简介:1. kubernetes背景介绍和现状;2. 华为CCE的混合云、大规模集群场景;3. 集群联邦如何支持上述场景;4. 深入介绍集群联邦实现细节,技术挑战及最新动态。钟成Kubernetes的核心设计实现议题简介:主要探讨Kubernetes系统中关于数据一致性等设计,代码的阅读方式,和开源社区的组织行为。彭浩华为视频业务UI开放架构实践议题简介:主要介绍了多屏的开放架构实践和技术应用总结。面对多种屏和多操作系统的挑战,华为采用Angular2.0、Node JS等技术、构件纵向分层、横向特性隔离的架构,提供丰富控件和SDK,能够快速适配全球各地视频业务的要求。【活动流程】活动报名入口:HDG-杭州站
  • [互动交流] 急急急,OBS上传附件报 403,Forbidden,错误代码AccessDenied,如何解决?请大神指导!!!
    错误代码如下:
  • [ARM原生] Could not access kvm kernel: no such file or directory,安卓虚拟机无法启动
    下载了文档 https://support.huaweicloud.com/dpmg-kunpengcps/kunpengandroid_03_0002.html#section4 中的【鲲鹏920编译环境:android-sdk-linux_920.tar.gz】,并按照文档配置好了环境变量。按照文档 https://support.huaweicloud.com/dpmg-kunpengcps/kunpengandroid_03_0013.html 在鲲鹏 KC1 ECS 上下载了运行 AVD。所运行的命令为 emulator -avd test -no-window -cores 2 -writable-system -gpu mesa -qemu --enable-kvm -m 1024 -vnc :2运行结果提示 could not access kvm kernel: no such file or directory,安卓虚拟机无法启动。 
总条数:507 到第 页
上滑加载中