• [技术干货] GDE中英文菜单基线,找不到菜单责任人时,过来查一下归属(1)
    目  录1 FusionStage 8.0菜单2 ADC运行态菜单3 ADC开发态菜单3.1 开发态-通用菜单3.2 开发态-工作流菜单3.3 开发态-网络自动化菜单3.4 开发态-接口集成菜单3.5 开发态-SDD菜单4 统一Portal菜单5 RPA运行态菜单1 FusionStage 8.0菜单中文英文“应用上线 > TOSCA堆栈部署”Application Publishing > TOSCA Stack Deploy“应用上线 > K8S应用部署”Application Publishing > K8S Application Deploy“项目中心 > 项目列表”Project Center > Project List“项目中心 > 配额审批”Project Center > Quota Approval“资源管理 > 节点管理”Resource > Node Management“资源管理 > 容器存储”Resource > Container Storage“资源管理 > 容器存储 > PVC管理”Resource > Container Storage > PVC Management“资源管理 > 容器存储 > PV管理”Resource > Container Storage > PV Management“资源管理 > 容器存储 > Volume管理”Resource > Container Storage > Volume Management“资源管理 > 容器存储 > StorageClass管理”Resource Management > Container Storage > StorageClass Management“应用开发 > Helm应用模板”Application Developing > Helm Application Template“应用开发 > TOSCA堆栈模板”Application Developing > TOSCA Stack Template“应用开发 > 微服务”Application Developing > Microservice“应用上线 > Helm应用部署”Application Publishing > Helm Application Deploy“应用上线 > 配置中心”Application Publishing > Configuration Center“应用上线 > 配置中心 > 配置项”Application Publishing > Configuration Center > ConfigMap“应用上线 > 配置中心 > 密钥”Application Publishing > Configuration Center > Secret“应用上线 > 配置中心 > Secret”Application Publishing > Configuration Center > Secret“应用运维 > 总览 > 运维概览”Application Operations > Overview > O&M“应用运维 > 运维巡检”Application Operations > O&M Inspection“应用运维 > 运维视图管理”Application Operations > O&M View Management“应用运维 > 运维视图管理 > 仪表盘”Application Operations > O&M View Management > Dashboard“应用运维 > 运维视图管理 > 指标监控”Application Operations > O&M View Management > Metric Monitoring“应用运维 > 监控”Application Operations > Monitoring“应用运维 > 监控 > 应用组监控”Application Operations > Monitoring > Application Group Monitoring“应用运维 > 监控 > 应用监控”Application Operations > Monitoring > Application Monitoring“应用运维 > 监控 > 节点监控”Application Operations > Monitoring > Node Monitoring“应用运维 > 监控 > 服务监控”Application Operations > Monitoring > Service Monitoring“应用运维 > 监控 > 数据库监控”Application Operations > Monitoring > Database Monitoring“应用运维 > 告警”Application Operations > Alarm“应用运维 > 告警 > 告警中心”Application Operations > Alarm > Alarm Center“应用运维 > 告警 > 维护经验”Application Operations > Alarm > Handling Experience“应用运维 > 告警 > 阈值规则”Application Operations > Alarm > Threshold Rules“应用运维 > 告警 > 告警屏蔽规则”Application Operations > Alarm > Alarm Masking Rules“应用运维 > 告警 > 远程通知规则”Application Operations > Alarm > Remote Notification Rules“应用运维 > 告警 > 通知内容模板”Application Operations > Alarm > Notification Content Template“应用运维 > 日志管理”Application Operations > Log Management“应用运维 > 日志管理 > 日志查看”Application Operations > Log Management > Log Viewing“应用运维 > 日志管理 > 日志搜索”Application Operations > Log Management > Log Search“应用运维 > 日志管理 > 日志收集”Application Operations > Log Management > Log Collection“应用运维 > 日志管理 > 日志下载”Application Operations > Log Management > Log Download“应用运维 > 日志管理 > 日志转储”Application Operations > Log Management > Log Dumping“应用运维 > 故障分析”Application Operations > Fault Analysis“应用运维 > 运维配置”Application Operations > Operation Configuration“应用运维 > 运维配置 > 采集配置”Application Operations > Operation Configuration > Collection Configuration“应用运维 > 运维配置 > 转发配置”Application Operations > Operation Configuration > Forwarding Configurations“应用运维 > 运维配置 > 远程通知”Application Operations > Operation Configuration > Remote Notification“应用运维 > 采集管理”Application Operations > Agent Management“应用运维 > 运维数据采集”Application Operations > O&M Datacollect“应用运维 > IBMS信息收集”Application Operations > IBMSCollect“云市场 > 软件中心”Marketplace > Software Center“云市场 > 软件中心 > 镜像仓库”Marketplace > Software Center > Image Repository“云市场 > 软件中心 > 软件仓库”Marketplace > Software Center > Software Repository“云市场 > 软件中心 > 仓库空间管理”Marketplace > Software Center > Repository Space Management“云市场 > 镜像构建”Marketplace > Image Building“云市场 > 镜像构建 > 构建任务”Marketplace > Image Building > Task Building“云市场 > 镜像构建 > 源码托管”Marketplace > Image Building > Source Code Hosting“云市场 > 云服务”Marketplace > Cloud Service“备份恢复 > 配置 > 配置备份参数”Backup & Restore > Configure > Configure Backup Parameters“备份恢复 > 配置 > 配置定时备份任务”Backup & Restore > Configure > Configure Scheduled Backup Tasks“备份恢复 > 数据备份 > 备份产品数据”Backup & Restore > Data Backup > Backup Product Data“备份恢复 > 数据备份 > 备份产品应用程序”Backup & Restore > Data Backup > Backup Product Applications“备份恢复 > 数据恢复 > 恢复产品数据”Backup & Restore > Data Restoration > Restore Product Data“备份恢复 > 数据恢复 > 恢复产品应用程序”Backup & Restore > Data Restoration > Restore Product Application“备份恢复 > 任务列表”Backup & Restore > Task List2 ADC运行态菜单中文英文归属模块“ADC系统管理 > 系统概览”ADC System Management > System Overview基础服务“ADC系统管理 > 配置管理 > Redis配置”ADC System Management > Configuration Management > Redis Configuration基础服务“ADC系统管理 > 配置管理 > Kafka配置”ADC System Management > Configuration Management > Kafka Configuration基础服务“ADC系统管理 > 配置管理 > ES配置”ADC System Management > Configuration Management > ES Configuration基础服务“ADC系统管理 >  > 配置管理 > DB配置”ADC System Management > Configuration Management > DB Configuration基础服务“ADC系统管理 > 配置管理 > File配置”ADC System Management > Configuration Management > File Configuration基础服务“ADC系统管理 > 配置管理 > MQ配置”ADC System Management > Configuration Management > MQ Configuration基础服务“ADC系统管理 > 配置管理 > 系统参数配置”ADC System Management > Configuration Management > System Parameter Configuration基础服务“ADC系统管理 > 配置管理 > 日志配置”ADC System Management > Configuration Management > Log Configuration基础服务“ADC系统管理 > 租户初始化管理”ADC System Management > Tenant Initialization Management基础服务“ADC系统管理 > 初始化资源管理”ADC System Management > Initialization Resource Management基础服务“ADC系统管理 > 任务管理”ADC System Management > Task Management基础服务“ADC系统管理 > 日志管理”ADC System Management > Log Management基础服务“ADC系统管理 > 租户额外数据源配置”ADC System Management > Tenant Extra Data Sources Configuration基础服务“开发态Studio”Development State Studio资产服务“工单管理 >  工单创建”Ticket Management > Ticket CreateBPM“工单管理 >  工单查询”Ticket Management > Ticket QueryBPM“工单管理 >  工单代理人配置”Ticket Management > Ticket Consigner ConfigurationBPM“网络操作 >  资源类型管理 >  网管类型”Network Operation > Resource Type Management > EMS TypeMCP“网络操作 >  资源类型管理 >  网络类型”Network Operation > Resource Type Management > Network TypeMCP“网络操作 >  资源类型管理 >  设备厂商”Network Operation > Resource Type Management > VendorMCP“网络操作 >  资源类型管理 >  设备类型”Network Operation > Resource Type Management > Device TypeMCP“网络操作 >  资源类型管理 >  网元类型”Network Operation > Resource Type Management > Ne TypeMCP“网络操作 >  资源管理 >  设备”Network Operation > Resource Management > DeviceMCP“网络操作 >  资源管理 >  网管”Network Operation > Resource Management > EMSMCP“网络操作 >  通用配置 >  接口管理”Network Operation > General Config > Interface ManagementMCP“网络操作 >  通用配置 >  通用协议配置”Network Operation > General Config > General Protocol ConfigMCP“网络操作 >  通用配置 >  敏感字段配置”Network Operation > General Config > Sensitive Field ConfigMCP“网络操作 >  通用配置 >  指令白名单配置”Network Operation > General Config > Command White ListMCP“网络操作 >  通用配置 >  设备登录配置”Network Operation > General Config > Device Login ConfigMCP“网络操作 >  通用配置 >  探针服务配置”Network Operation > General Config > Probe Service ConfigMCP“网络操作 >  路由管理 >  MCP路由配置”Network Operation > Route Management > MCP Route ConfigMCP“网络操作 >  路由管理 >  MCP通用路由配置”Network Operation > Route Management > MCP General Route ConfigMCP“网络操作 >  指令管理”Network Operation > Command ManagementMCP“网络操作 >  脚本管理”Network Operation > Script ManagementMCP“网络操作 >  执行日志”Network Operation > Execution LogsMCP“业务开通 > 定单管理”Service Provisioning > Order ManagementNSO“业务开通 > 业务管理”Service Provisioning > Service ManagementNSO“业务开通 > 客户管理”Service Provisioning > Customer ManagementNSO“系统管理 >  应用管理”System Management > App Management资产服务“系统管理 >  Stack Online配置”System Management > Stack Online Config资产服务“集成服务 > 入站认证策略管理”Web Service > Inbound Authentication Policy Management编排引擎“集成服务 > 出站认证策略管理”Web Service > Outbound Authentication Policy Management编排引擎“集成服务 > WSSE签名管理”Web Service > WSSE Signature Management编排引擎“集成服务 > 证书管理”Web Service > Certificate Management编排引擎“集成服务 > FTP管理”Web Service > FTP Management编排引擎“系统管理 >  GDE Store配置”System Management > GDE Store Config资产服务“系统管理 > 系统配置”System Management > System Config基础服务“系统管理 > 异步任务”System Management > Asynctask基础服务“系统管理 > 定时任务”System Management > Timertask基础服务“系统管理 > 模型归档”System Management > ModelArchive编排引擎“系统管理 >  模型管理 >  缓存配置”System Management > ModelManage > CacheConfig编排引擎“系统管理 >  模型管理 >  分片策略”System Management > ModelManage > ShardPolicy编排引擎“系统管理 >  模型管理 >  模型订阅”System Management > ModelManage > Subscriber编排引擎“系统管理 > 归档配置”System Management > Archive Config基础服务“系统管理 >  流程管理 >  流程配置”System Management > Process Management > Process ConfigurationBPM“系统管理 >  流程管理 >  流程参数配置”System Management > Process Management > Process Parameter ConfigurationBPM“系统管理 >  流程管理 >  SLA管理 >  SLA配置”System Management > Process Management > SLA Management > SLA ConfigurationBPM“系统管理 >  流程管理 >  SLA管理 >  日历配置”System Management > Process Management > SLA Management > Calendar ConfigurationBPM“系统管理 >  流程管理 >  数据字典”System Management > Process Management > Data DictionaryBPM“日志管理 > 集成日志 > SOAP接收日志”Log Management > Integration Log > Soap Receive Log编排引擎“日志管理 > 集成日志 > REST接收日志”Log Management > Integration Log > Rest Receive Log编排引擎“日志管理 > 集成日志 > SOAP发送日志”Log Management > Integration Log > Soap Send Log编排引擎“日志管理 > 集成日志 > REST发送日志”Log Management > Integration Log > Rest Send Log编排引擎“日志管理 > Excel导入日志”Log Management > Excel Import Records资产服务“日志管理 > Excel导出日志”Log Management > Excel Export Records资产服务“日志管理 > 操作日志”Log Management > Operation Log基础服务“日志管理 > 业务日志 > 工单操作日志”Log Management > Business Log > Ticket Operation LogBPM“日志管理 > 设计态资产初始化日志”Log Management > Studio Asset Auto Init Log资产服务“日志管理 > 运行态资产初始化日志”Log Management > Runtime Asset Auto Init Log资产服务“终端服务管理 > 推送”Mobile Service Management > Push终端“终端服务管理 > APP日志”Mobile Service Management > APP Log终端“终端服务管理 > App管理”Mobile Service Management > App Management终端“终端服务管理 > JSLib管理”Mobile Service Management > JSLib Management终端“终端服务管理 > 多语言包管理”Mobile Service Management > Language Management终端“终端服务管理 > Tab菜单管理”Mobile Service Management > Tab Menu Management终端“终端服务管理 > 终端设备管理”TMobile Service Management > Mobile Device Management终端“终端服务管理 > 轻应用管理”Mobile Service Management > Light App Management终端“终端服务管理 > 插件管理”Mobile Service Management > Plugin Management终端“终端服务管理 > 公告管理”Mobile Service Management > Notice Management终端“终端服务管理 > SDK版本管理”Mobile Service Management > Sdk Version Management终端“终端服务管理 > 自定义APP插件版本管理”Mobile Service Management > Custom App Plugin Version Management终端“终端服务管理 > 自定义打包管理”Mobile Service Management > Custom Packaging Management终端“API目录”API Catalog资产服务3 ADC开发态菜单3.1 开发态-通用菜单中文英文Owner“工程管理”Project Management资产服务“资产管理”Asset ManagementDSC“资产管理 > 业务分类”Asset Management > Business TypeDSC“API目录”API Catalog资产服务“通用”Common公共“模型”Model编排引擎“服务”Service编排引擎“事件”Event编排引擎“事件监听”Event Listener编排引擎“数据导出”Data Export资产服务“数据导入”Data Import资产服务“页面”Page用户体验“页面 > 编排资源 > 页面模板管理”Page > Orchestrating Resources > Page Template Management用户体验“页面 > 编排资源 > 图片管理”Page > Orchestrating Resources > Picture Management用户体验“页面 > 编排资源 > 脚本管理”Page > Orchestrating Resources > Script Management用户体验“页面 > 编排资源 > 自定义页面管理”Page > Orchestrating Resources > Customized Page Management用户体验“页面 > 编排资源 > 第三方JS类库”Page > Orchestrating Resources > Third-party JS Class Library用户体验“页面 > 编排资源 > 自定义页面组件”Page > Orchestrating Resources > Customized Page Components用户体验“定时器”Job基础服务“菜单”Menu用户体验“权限”Permission基础服务“卡片”Card用户体验“错误码”Error Code基础服务“国际化”I18n用户体验“函数服务”Function ServiceProcode“终端页面”Mobile Page终端“触发器”Trigger编排引擎“向数据处理转储”Model Dump编排引擎“从数据处理加载”Model Load编排引擎“外部接入 > 自定义资产”Data Package > Customized Asset终端3.2 开发态-工作流菜单中文英文Owner修改记录“流程”Business ProcessBPM2020.5.193.3 开发态-网络自动化菜单中文英文Owner“网络自动化”MCPMCP“通用配置 >  资源管理”General Settings > Resource ManagementMCP“通用配置 >  资源管理 > 设备”General Settings > Resource Management > DeviceMCP“通用配置 >  资源管理 >  网管”General Settings > Resource Management > EMSMCP“通用配置 >  执行日志”General Settings > Execution LogsMCP“网络自动化 >  脚本管理”MCP > ScriptMCP“网络自动化 >  指令管理”MCP > CommandMCP“通用配置 >  元数据管理 >  网管类型”Type Management > EMS TypeMCP“通用配置 >  元数据管理 >  网络类型”General Settings > Resource Type Management > Network TypeMCP“通用配置 >  元数据管理 >  设备厂商”General Settings > Resource Type Management > Device VendorMCP“通用配置 >  元数据管理 >  设备类型”General Settings > Resource Type Management > Device TypeMCP“通用配置 >  元数据管理 >  网元类型”General Settings > Resource Type Management > NE TypeMCP“通用配置 >  MCP配置 >  接口管理”General Settings > MCP Settings > Interface ManagementMCP“通用配置 >  MCP配置 >  通用协议配置”General Settings > MCP Settings > Common Protocol ConfigurationMCP“通用配置 >  MCP配置 >  敏感字段配置”General Settings > MCP Settings > Sensitive FieldMCP“通用配置 >  MCP配置 >  指令白名单”General Settings > MCP Settings > Command White ListMCP“通用配置 >  MCP配置 >  设备登录配置”General Settings > MCP Settings > Device Login ConfigurationMCP“通用配置 >  MCP配置 >  探针服务配置”General Settings > MCP Settings > Probe Service ConfigurationMCP3.4 开发态-接口集成菜单中文英文Owner“接口集成”Interface Package编排引擎“入站REST”Inbound Rest编排引擎“接口集成 >  入站REST”Interface Package > Inbound Rest编排引擎“出站REST”Outbound Rest编排引擎“接口集成 >  出站REST”Interface Package > Outbound Rest编排引擎“入站SOAP”Inbound Soap编排引擎“接口集成 >  入站SOAP”Interface Package > Inbound Soap编排引擎“出站SOAP”Outbound Soap编排引擎“接口集成 >  出站SOAP”Interface Package > Outbound Soap编排引擎4 统一Portal菜单中文英文归属模块“管理员配置 >  Portal配置 >  自定义菜单管理”Administration > Portal > Menu Customization统一Portal“管理员配置 >  Portal配置 >  应用快捷方式”Administration > Portal > App Shortcut Configuration统一Portal“管理员配置 >  Portal配置 >  联机帮助管理”Administration > Portal > Online Help Management统一Portal“管理员配置 >  Portal配置 >  国际化管理”Administration > Portal > Internationalization Management统一Portal“管理员配置 >  Portal配置 >  公告管理”Administration > Portal > Announcement Management统一Portal“管理员配置 >  Portal配置 >  Portal首页配置”Administration > Portal > Portal Homepage Management统一Portal“管理员配置 >  Portal配置 >  Portal公共配置 >  公共参数配置”Administration > Portal > Common Portal Configuration > Common Parameter Config统一Portal“管理员配置 > Portal配置 > Portal公共配置 > 主题外观”Administration > Portal > Common Portal Configuration > Theme Appearance统一Portal“管理员配置 >  Portal配置 > Portal公共配置 > 工具栏设置”Administration > Portal > Common Portal Configuration > Banner Toolbar Setting统一Portal“管理员配置 >  Portal配置 >  菜单简写配置”Administration > Portal > Menu Abbreviation Configuration统一Portal“管理员配置 >  Portal配置 >  系统菜单管理”Administration > Portal > System Menu Management统一Portal“管理员配置 >  Portal配置 >  Portal系统管理 >  系统配置”Administration > Portal > Portal System Management > System Configuration统一Portal“管理员配置 >  Portal配置 >   Portal系统管理 >   Portal租户初始化管理”Administration > Portal > Portal System Management > Portal Tenant Init Manage统一Portal“管理员配置 >  Portal配置 >  Portal系统管理 >   License同步信息配置”Administration > Portal > Portal System Management > License Sync Manage统一Portal“管理员配置 >  安全配置 >  跳转外网白名单配置”Administration > Security Center > External URL Whitelist Configuration统一Portal5 RPA运行态菜单中文英文归属模块“机器人管理中心 > 任务 > 任务管理”RPA Orchestrator > Jobs > Job ManagementRPA“机器人管理中心 > 任务 > 队列管理”RPA Orchestrator > Jobs > Queue ManagementRPA“机器人管理中心 > 任务 > 共享文件”RPA Orchestrator > Jobs > Shared FileRPA“机器人管理中心 > 任务 > 人机协同任务”RPA Orchestrator > Jobs > Interaction TaskRPA“机器人管理中心 > 机器人 > 扩展管理”RPA Orchestrator > Robots > PluginRPA“机器人管理中心 > 机器人 > 脚本管理”RPA Orchestrator > Robots > ScriptRPA“机器人管理中心 > 机器人 > 参数配置”“安全配置”RPA Orchestrator > Robots > Parameter SettingRPA“机器人管理中心 > 机器人 > 白名单配置”RPA Orchestrator > Robots > Allow List SettingRPA“机器人管理中心 > 工具 > 客户端软件”RPA Orchestrator > Tools > Agent PackageRPA“机器人管理中心 > 工具 > 执行机软件”RPA Orchestrator > Tools > Robot PackageRPA“机器人管理中心 > 作业机 > 执行器”RPA Orchestrator > Workstations > ExecutorRPA“机器人管理中心 > 作业机 > 连接器”RPA Orchestrator > Workstations > ConnectorRPA“机器人管理中心 > 作业机 > 凭证”RPA Orchestrator > Workstations > CredentialRPA“机器人管理中心 > 作业机 > 许可证”RPA Orchestrator > Workstations > LicenseRPA“机器人管理中心 > 作业机 > 服务证书库”RPA Orchestrator > Workstations > Service CertificateRPA“机器人管理中心 > 作业机 > 集群”RPA Orchestrator > Workstations > ClusterRPA“机器人管理中心 > 作业机 > 设计器”RPA Orchestrator > Workstations > StudioRPA“机器人管理中心 > 设置 > 安全配置”RPA Orchestrator > Settings > Secure SettingRPA“机器人管理中心 > 设置 > 资产证书库”RPA Orchestrator > Settings > Asset CertificateRPA“机器人管理中心 > 设置 > 系统配置”RPA Orchestrator > Settings > System SettingRPA
  • [集群&DWS] GaussDB(DWS)运维管理系列基础篇三:数据仓库之变形金刚(集群resize原理介绍)
    摘要数据仓库,往往意味着海量的数据,超大的集群,就像一个超大的金刚。一旦数据仓库搭建完成,集群迁移、集群规模扩展、集群架构调整需要花费很大的代价,对上层应用业务的影响周期也比较长。DWS提供了集群resize的功能。支持集群规模的scale out,也支持硬件规格的scale up,同时支持集群拓扑结构的重组。就如同使数仓这个金刚可以变形了。那让我们一起来看看他是如何变形的吧!背景介绍先简单介绍数据仓库几个概念:Scale Out(也就是Scale horizontally)横向扩展,向外扩展:Scale out代表分布式计算的能力,通过在原有系统上增加节点来扩展存储能力和计算能力。对于数仓来说就是扩展集群规模。为了不出现木桶效应,要求新扩的机器硬件配置和老集群一致。Scale Up(也就是Scale vertically)纵向扩展,向上扩展:Scale up代表以主机或机箱式为主的扩展CPU或内存存储的能力。通过在原有系统上提升硬件配置(如磁盘、内存、CPU、网卡等),来提升存储能力和计算能力。对于数仓来说就是升级硬件配置,升级有些硬件配置可能需要升级操作系统。DWS逻辑拓扑结构:这个图大家在之前的博文中应该见过,本次从resize的角度介绍下。DWS的组件从功能角度可分为功能组件和数据组件。数据组件:提供数据处理的组件,如DN节点,目前DWS均衡部署,每个机器上的DN数目一般相同。功能组件:提供特定功能的组件,如GTM提供全局事务处理,CN处理业务接入,CM处理集群管理,WLM处理负载均衡。这些组件一般数量固定,在集群安装时按照特定规则部署在集群的某些机器上。随着集群规模的调整,初始的配置可能已经不是最优配置了。因此存在调整集群拓扑结构来调优的诉求。Redshift的cluster resize解决方案如下,包括原地resize和快照恢复到异构集群方式resizeresize原理介绍resize基于多nodegroup和数据重分布实现,同时提供了横向扩展和纵向扩展的能力,resize期间老集群只支持只读业务。典型resize流程示意图如下老集群同网络内,新建一个独立的集群,新集群的拓扑结构和硬件配置可以和老集群完全不同。新老集群融合成一个大集群,并做老集群到新集群的数据重分布。数据重分布期间,新集群对外不可见,老集群对外提供业务。数据重分布完成,新老集群分裂,此时新老集群的各自的数据是完全相同的,用户可以运行业务,对比新老集群的性能。集群resize的完整流程图如下集群resize的数据重分布逻辑数据重分布的核心思想是把1个nodegroup的数据select insert into到1个新的nodegroup上。Scale-out扩容的数据重分布新的nodegroup是包含老的nodegroup的,而集群resize的新的nodegroup和老的nodegroup的DN是完全没有交集的。如下:使用场景6.5.1版本交付的需求,主要给DWS使用,支撑DWS从小规格节点Scale-up为更大规格的节点。主要场景为XX客户POC使用低配xlarge规格,切换生产时想使用大规格高配12xlarge集群。且通过不重装集群、不导出/导入数据方式直接切换。扩展场景:新建集群的集群规模新增或者减少。新建集群的硬件配置可以高配或者低配。新建集群的功能组件的的配置(数量,位置)可以变更。规格约束及演进方向resize的耗时依赖于老集群的IO read(可能瓶颈),新集群的IO write和新老节点间的网络IO。公式为:max(老集群单raid数据量/IO read速率,  新集群单raid数据量/IO write速率,  总数据量/老节点数/发送速率,  总数据量/新节点数/接收速率)新集群单raid数据量 = 总数据量/新集群节点数/raid组数   --假设无明显数据倾斜。集群resize过程中集群存在业务秒级闪断。集群resize过程中提供只读服务,后续版本提供在线能力。结语集群resize提供一键式集群的扩容和迁移的能力。来解决数仓使用过程中规格调整,规模扩展,拓扑变更的诉求。原文链接:https://bbs.huaweicloud.com/blogs/219087【推荐阅读】【最新活动汇总】DWS活动火热进行中,互动好礼送不停(持续更新中)  HOT  【博文汇总】GaussDB(DWS)博文汇总1,欢迎大家交流探讨~(持续更新中)【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1,欢迎大家交流探讨(持续更新中)【项目实践汇总】GaussDB(DWS)项目实践汇总贴,欢迎大家交流探讨(持续更新中)【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总,欢迎大家交流学习(持续更新中)【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习(持续更新中)扫码关注我哦,我在这里↓↓↓
  • [集群&DWS] GaussDB(DWS)运维管理系列基础篇一:升级介绍与展望
    【摘要】 运维管理模块是任何软件产品最基础和重要的一部分。是软件产品的门户,也是用户接触和使用软件产品的和前提和基础。如安装部署能让用户快速上手使用,升级能让产品平滑更新,扩容能让产品扩充能力,故障修复能让产品快速恢复,监控告警能让产品提前预知或及时排除故障。其在可用性,易用性,可靠性,可维护性、在线运维方面都有较高的要求。本文将详细介绍GaussDB(DWS)重要运维管理功能“升级”的原理和使用。前言不断更新和演进是软件的一个重要行为,升级是软件更新的重要保证。伴随着新特性不断推出和历史问题修复,软件升级和打补丁显得格外重要。升级和打补丁需要满足如下要求:软件版本的无缝、平滑过渡。业务中断时间尽量少,以至于在线。用户体验前向兼容。而数据库升级比其他软件升级更为复杂,不光是软件本身的更新,还要支持其管理的数据的升级。数据库升级需要考虑如下因素: 软件升级,即软件本身的更新。元数据升级,即软件管理数据的方式的更新。业务数据升级,即软件管理的数据的升级。随着数据库版本的快速演进,升级愈显重要,其可靠性、性能、业务中断、易用性急需改善。升级演进GaussDB(DWS)升级经过多个版本的演进,其性能,可靠性逐步提升。并提供了不同场景的各种升级方式。如下是演进过程:大版本全量升级:新版本重建数据库,元数据导入导出,业务数据全量mv方式。依赖于数据库对象个数和业务数据量大小、业务数据表文件数。已在V1R8停用。就地升级:原地替换二进制,修改系统表方式。依赖于系统表的逻辑大小(数据对象个数)和物理大小(系统表脏页)及数据库个数。小版本离线升级:停机,替换二进制,启动集群。业务中断时间是一次集群的重启时间。小版本滚动升级:保留老二进制文件,新目录安装新二进制,按照组件(om_monitor,cm_agent,ETCD,CN,dummy DN,standby DN/GTM/CM,master DN/GTM/CM)滚动切换到新二进制,然后主备切换。整个升级过程中涉及两次switchover,业务中断时间依赖于在线switchover和CN retry能力。小版本闪断升级:基于小版本滚动升级基础,保留老二进制文件,新目录安装新二进制,先切换管理组件(om_monitor、cm_agent、ETCD、cm_server),再一次性切换业务组件(GTM、CN、DN),只闪断一次业务。目前DWS已使用。就地升级原理介绍目前8.0主要使用的升级方式是就地升级。其已经支撑现网线下和公有云多套集群成功升级到新版本。1、公有云升级流程DWS服务升级主要分2部分,管控面升级和租户面升级:各个region的管控面升级回滚主要通过CDK平台完成,升级后组件自行功能验证。升级实例的信息:租户面升级在ServiceCM平台由SRE操作,操作可分为DWS Guest升级和数据库内核升级:主要流程如下所示:2、线下updatetool升级通过登录UpdateService操作界面,创建升级工程,进行一键式升级。3、数据库内核升级流程数据库内核升级是通过替换二进制+更新元数据的方式进行升级。包括初始阶段,准入检查,环境准备,停机,备份,升级,update catalog,提交8个阶段。升级性能目标版本业务中断升级时间窗8.0版本升级小于60分钟建议4小时8.0版本补丁10分钟建议2小时8.1版本升级小于30分钟建议2小时8.1版本补丁秒级闪断建议30分钟8.x版本升级灰度滚动升级在线升级8.x版本补丁函数注册,无闪断在线补丁升级问题定位升级过程日志概览见下表:流程日志目录日志记录信息说明创建升级工程${BIGDATA_LOG_HOME}/update-service/scriptLog/创建工程脚本执行${BIGDATA_LOG_HOME}/controller/scriptlog/restore_package.log升级包瘦身还原${BIGDATA_LOG_HOME}/controller/scriptlog/installPack.log部署新版本组件包${BIGDATA_LOG_HOME}/update-service/runLog/update-manager.log集群信息与工程初始化${BIGDATA_LOG_HOME}/upgrade/prepare.log升级信息准备分发软件包${BIGDATA_LOG_HOME}/update-service/runLog/update-manager.log包分发-工具侧${BIGDATA_LOG_HOME}/controller/controller.log包分发-controller侧${BIGDATA_LOG_HOME}/update-service/runLog/omm_upd_agent.log原子包部署${BIGDATA_LOG_HOME}/update-service/scriptLog/distribute_deploy_adapter.log升级适配包部署升级Manager${BIGDATA_LOG_HOME}/upgrade/upgrade.log升级Manager过程中脚本执行${BIGDATA_LOG_HOME}/controller/scriptlog/installPack.log注册新版本部件升级集群前准备${BIGDATA_LOG_HOME}/upgrade/upgrade.log适配components适配adapter${BIGDATA_LOG_HOME}/controller/controller_client.log进入、退出agent更新模式${BIGDATA_LOG_HOME}/update-service/runLog/update-manager.log进入、退出agent更新模式安装新版本部件配置生成组件账户信息升级Postinstall处理${BIGDATA_LOG_HOME}/controller/controller.log安装新部件配置生成组件账户信息升级Postinstall处理升级集群${BIGDATA_LOG_HOME}/update-service/runLog/update-manager.log停止服务备份服务升级前处理启动新服务${BIGDATA_LOG_HOME}/ controller/controller.log停止服务启动新服务提交确认${BIGDATA_LOG_HOME}/upgrade/commit.log旧版本部件删除oms升级确认agent升级确认${BIGDATA_LOG_HOME}/update-service/runLog/update-manager.log新服务提交确认旧版本部件卸载${BIGDATA_LOG_HOME}/controller/controller.log组件账户信息确认旧版本部件卸载${BIGDATA_LOG_HOME}/update-service/scriptLog/删除升级软件包脚本执行回滚${BIGDATA_LOG_HOME}/upgrade/rollback.log回退JDK回退Adapter适配回退component适配卸载新版本部件agent回退oms回退${BIGDATA_LOG_HOME}/update-service/runLog/update-manager.log激活旧版本部件配置刷新停止服务组件服务回退启动旧版本服务部件回退进入与退出Agent更新模式${BIGDATA_LOG_HOME}/controller/controller.log激活旧版本部件配置刷新停止服务启动旧版本服务组件账户信息回退部件回退${BIGDATA_LOG_HOME}/update-service/scriptLog/删除升级软件包脚本执行UpdateService的日志分为审计日志和调试日志,位置见下表:文件目录日志类别日志说明/var/log/Bigdata/audit/upgrade审计日志记录UpdateService接收到的命令及其执行结果${BIGDATA_LOG_HOME}/update-service/catalina${BIGDATA_LOG_HOME}/update-service/core${BIGDATA_LOG_HOME}/update-service/runLog${BIGDATA_LOG_HOME}/update-service/scriptLog运行日志安装运行过程中产生的日志结语在数据仓库产品使用过程中,升级和打补丁是使用频率较高的功能。本文中仅仅介绍了GaussDB(DWS)升级的大致流程和基本原理,及性能目标。如果现网变更中遇到升级相关问题,还需联系相关技术支持。原文链接:https://bbs.huaweicloud.com/blogs/198213【推荐阅读】【最新活动汇总】DWS活动火热进行中,互动好礼送不停(持续更新中)  HOT  【博文汇总】GaussDB(DWS)博文汇总1,欢迎大家交流探讨~(持续更新中)【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1,欢迎大家交流探讨(持续更新中)【项目实践汇总】GaussDB(DWS)项目实践汇总贴,欢迎大家交流探讨(持续更新中)【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总,欢迎大家交流学习(持续更新中)【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习(持续更新中)扫码关注我哦,我在这里↓↓↓
  • [技术干货] 运维管理工具
    运维管理工具●SmartKit: 为存储、服务器、云计算三大领域的产品提供了统一的服务工具平台,工具是基于原OceanStor Toolkit演进而来。SmartKit的典型应用场景包括开局交付、例行维护、故障处理,升级/补丁、扩容、部件更换等。●FusionDirector: 定位为服务器提供全生命周期的智能运维的管理软件,提供对华为服务器五大智能管理:1.智能版本管理:固件版本的自动检查和升级。(固件包支持自动手动传入)2.智能部署管理:自动识别服务器位置,从上电到0S部署都是全自动化的。(支持模板部署)3.智能资产管理:部件级的资产管理,实现资产管理自动化,可视化。(可查看资产的明细和资产的变更记录)4.智能能效管理:结合动态能耗管理技术(DEMT), 动态调整服务器运行状态。5.智能故障管理:监控硬件运行状态,利用AI技术提前预测硬盘故障,快速诊断故障原因。●Smart Provisioning:是随服务器发布的一款工具软件,提供图形化的界面实现对操作系统的安装部署、固件升级、RAID配置、 故障诊断和配置导入导出等功能。Smart Provisioning存储在服务器主板的flash芯片上。●eService: 华为eService云智能管理平台,基于Cloud-Native (云原生),利用大数据分析和AI技术,提供自动报障、容量性能预测以及硬盘风险预测等服务,提前预防潜在风险,并为容量规划提供依据。1.主动式问题处理。2.智能预测分析。3.资产管理。
  • [云运维] AOM的 告警订阅(订阅到DMS)能力下线了吗?
    AOM的 告警订阅(订阅到DMS)能力下线了吗? 怎么找不到对应的文档了,之前看到过的原有文档地址:https://support.huaweicloud.com/usermanual-aom/aom_02_1013.html
  • 如何完成应用运维管理安装ICAgent码豆日常任务
    如题,就是日常码豆任务中如何安装ICAgent?简单介绍下,这是一个比较简单且行之有效的,适合小白的教程,大佬或者想学习的可以按照任务中给的教程安装。首先,你需要通过以下活动https://bbs.huaweicloud.com/forum/thread-85317-1-1.html按照教程创建好且状态正常的区块链服务实例(如下图1),图1创建好区块链服务实例就成功一半了,接着还是在区块链应用运维管理界面,点击左侧菜单列表中的运维中心(如下图2),点击后会跳转到另一页面,仍然在左侧菜单列表中找到配置管理(如下图3),在配置管理下第一个就是Agent管理,右边界面点击安装ICAgent即可。图2图3PS:1.此教程适合小白完成安装ICAgent任务,获取码豆。安装好ICAgent后,可以继续完成告警设置和创建仪表盘任务。2.以上任务需要在活动帖子中领取889.1元CCE+BCS实践券,限量200份,大家要做任务需要尽快了。3.如有疑问,可以在本帖回复。
  • 终于完成应用运维管理码豆任务
  • 教你如何一周轻松get到17000+码豆,走上人生巅峰
    1. 对于第一次到会员中心领码豆的小朋友,完成新人任务可以迅速拿到3000码豆2. 接着完成日常任务里的首次任务,全部完成后可以得1800码豆首次分布式缓存服务领取Redis免费实例250首次分布式消息服务领取Kafka免费实例350首次云性能测试服务领取CPTS免费套餐包250首次微服务管理查看服务治理面板300首次应用运维管理开通应用运维管理服务150首次安装ICAgent200首次应用性能管理性能管理接入应用200首次更多任务加入HE2E DevOps实践课50首次加入JAVA应用程序设计课程503、完成会员中心每周任务,每周全部完成后可以得到2385码豆每周项目管理体验DevOps全流程样例项目500每周添加项目成员30每周代码托管创建代码仓库75每周代码检查创建代码检查任务75每周编译构建创建编译构建任务75每周部署创建部署任务75每周发布上传发布文件150每周测试管理创建测试用例150每周接口测试创建接口测试用例150每周流水线创建流水线45每周APIG新建API100每周调用API300每周调试API50每周函数工作流创建函数100每周分布式缓存服务缓存分析30每周创建Topic30每周云性能测试服务创建测试工程30每周创建JMeter测试工程30每周应用运维管理告警设置30每周创建仪表盘30每周云日志服务配置日志采集路径30每周更多任务体验DevStar快速生成代码3004.每天完成固定任务,全部完成每天至少可得340码豆,上不封顶,不含云声发帖,任务全部完成,每周可的3990码豆(云声上不封顶啊朋友们)每天项目管理新建工作项15每天代码托管CloudIDE打开代码30每天提交代码60每天代码检查执行代码检查30每天编译构建执行构建30每天部署执行部署30每天测试管理执行手工测试用例15每天接口测试执行接口测试用例30每天流水线执行流水线30每天CloudIDE启动CLOUDIDE实例30每天更多任务使用API Explorer在线调试30每天其他任务会员中心签到10~70每天发帖每篇20,至多3篇每天发博客(过审)每篇50,至多2篇每天回帖每篇10,至多4篇每天云声(过审)100*无限每天云声(采纳)200*无限5.其他推荐任务活动送码豆:会员中心还有很多其他活动,码豆福利大,让你瞬间走上人生巅峰,可不要错过了。综合计算,如果你是新人,第一周完成会员中心任务+论坛任务(不含云声)就可以得到11175码豆;如果你是老用户,完成会员中心任务+论坛任务(不含云声),每周可得6375码豆。如果能参加活动任务,还有更多码豆相送,比如1024程序员节好多小伙伴都拿到了上万的码豆。再看下面这些礼品,松松就搞定了
  • [内容拦截申诉] 【博客】IT运维管理升级,不只是技术层面的事
    发文的标题名:IT运维管理升级,不只是技术层面的事帖子内容链接:https://bbs.huaweicloud.com/blogs/163509
  • [问题求助] AOM和APM是否支持监控能力拓展(比如定制一些指标,或者支持一些不在兼容清单的东西),还是说目前必须根据当前兼容性清单进行匹配
    在使用APM和AOM的时候,如果监控项不满足诉求,或者不在兼容性清单中,能否支持监控能力拓展?
  • [ManageOne二...] 【华为云Stack ManageOne 可定制能力】运营侧对接第三方云服务方案和开发指导
    ManageOne作为统一云管平台,分为租户侧和运维侧,租户侧提供租户管理、产品管理、配额管理、计量管理、流程审批等公共能力,运维侧提供监控、报表、大屏、自运维等公共能力,华为云Stack云服务或第三方云服务都按照统一接入规范接。客户价值:1.一致体验,通过一套系统管理华为云Stack和第三方云服务,相同的页面风格和操作方式,一致使用体验2.统一运营,第三方云服务继承多租户、VDC管理、配额、计量,流程审批等能力,可有效控制资源发放3.统一运维,支持展示资源、告警、性能监控,可按照VDC维度监控业务部门、分支机构的资源使用情况通过DEMO结合实际环境演示第三方云服务接入开发指南的操作步骤,可让第三方开发者快速运行DMEO,深入理解开发流程中的细节问题。操作步骤主要包括:1、环境信息搜集。2、云服务初始化,包括产品、配额、计量、订单等配置。3、部署前端代码。4、运行后台模拟程序。约束条件:ManageOne 8.0.0 SPC100及以上版本注意:运营侧应用支持添加第三方云服务上报的虚拟机和裸金属,可做拓扑和告警展示,但应用下的模块不支持,模块只支持HCS的虚拟机和裸金属,只有模块中添加的资源才支持部署任务。传送门:Console本地开发技巧:cid:link_2Console开发FAQ:https://bbs.huaweicloud.com/forum/forum.php?mod=viewthread&tid=78362&page=1&extra=#pid355807Service开发FAQ: https://bbs.huaweicloud.com/forum/forum.php?mod=viewthread&tid=78368&page=1&extra=#pid355874订单对接参数详解:cid:link_3DMEO下载地址:https://devcloud.cn-north-4.huaweicloud.com/codehub/project/5f2e165cff6a400494fbf7c560232b0b/codehub/625837/home
  • [产品体验官] 华为云应用运维管理AOM服务体验及评测--wyxtnbp
                                        华为云立体运维AOM,真真实实十八般武器保障企业业务稳定                                                       群昵称:wyxtnbp        华为云推出的立体运维提供真正“立体”的全方位能力,包括齐全的数据种类、端到端跨层全链路分析和丰富的数据洞察能力。    华为云立体运维AOM,协助企业减轻传统运维的压力,为企业关键业务保驾护航,让运维不再困难。    有幸体验,我都想跳槽了。
  • [产品体验官] 体验官有奖体验第14期 |华为云应用运维管理AOM服务体验及评测--suegeeker
  • [产品体验官] 体验官有奖体验第14期 |华为云应用运维管理AOM服务体验及评测--hawking
    体验官有奖体验第14期 |华为云应用运维管理AOM服务体验及评测--hawking
  • [产品体验官] 体验官有奖体验第14期 |华为云应用运维管理AOM服务体验及评测--Tong
    姓名:佟鑫群昵称:Tong
总条数:100 到第
上滑加载中