- GaussDB 的Stream机制 GaussDB 的Stream机制
- 在数据仓库类型的数据库中,大表的分布列选择对于数据库和语句查询性能都有至关重要的影响。 如果表的分布列选择不当,在数据导入后有可能出现数据分布倾斜,进而导致某些磁盘的使用明显高于其他磁盘,极端情况下会导致集群 只读。 对于Hash分表策略,存在数据倾斜情况下,查询时出现部分DN的I/O短板,从而影响整体查询性能。 在对已经创建的表,该如何进行分布列的调整,也是我们经常思考的课题。 在数据仓库类型的数据库中,大表的分布列选择对于数据库和语句查询性能都有至关重要的影响。 如果表的分布列选择不当,在数据导入后有可能出现数据分布倾斜,进而导致某些磁盘的使用明显高于其他磁盘,极端情况下会导致集群 只读。 对于Hash分表策略,存在数据倾斜情况下,查询时出现部分DN的I/O短板,从而影响整体查询性能。 在对已经创建的表,该如何进行分布列的调整,也是我们经常思考的课题。
- GaussDB for DWS生产应急指导 GaussDB for DWS生产应急指导
- 1. 操作场景数据节点上由于磁盘或raid故障,导致该raid组上cn、dn实例故障,会上报“ALM-37006 Coordinator进程异常” 或“ALM-37007 Datanode进程异常”等MPPDB相关告警。在修复硬件故障后,需修复故障raid上的cn、dn实例,使集群恢复Normal状态。2.整体过程描述3.前提条件1) GaussDB A集群安装成功,且已处于启动状态。2) ... 1. 操作场景数据节点上由于磁盘或raid故障,导致该raid组上cn、dn实例故障,会上报“ALM-37006 Coordinator进程异常” 或“ALM-37007 Datanode进程异常”等MPPDB相关告警。在修复硬件故障后,需修复故障raid上的cn、dn实例,使集群恢复Normal状态。2.整体过程描述3.前提条件1) GaussDB A集群安装成功,且已处于启动状态。2) ...
- 批量更新DWS统计信息的脚本 批量更新DWS统计信息的脚本
- 1 资源管理概述 1.1 资源管理的作用和分类 从用户的角度看可以通过设定阈值或者优先级限定程序对资源的使用,保证承诺的服务等级 (SLA);同时满足不同用户间资源隔离,达成多租户的需求。 从系统的角度看,可以引入监控和控制等手段,实现资源在可控的情况下被合理利用的目的,避免 资源耗尽,防止系统停止响应、崩溃;根据任务优先级,保证服务等级协议(SLA);在资... 1 资源管理概述 1.1 资源管理的作用和分类 从用户的角度看可以通过设定阈值或者优先级限定程序对资源的使用,保证承诺的服务等级 (SLA);同时满足不同用户间资源隔离,达成多租户的需求。 从系统的角度看,可以引入监控和控制等手段,实现资源在可控的情况下被合理利用的目的,避免 资源耗尽,防止系统停止响应、崩溃;根据任务优先级,保证服务等级协议(SLA);在资...
- GaussDB 列存表 scan性能优化 GaussDB 列存表 scan性能优化
- 本文主要是探讨OLAP关系型数据库框架的数据仓库平台如何设计双集群系统,即增强系统高可用的保障水准。 本文主要是探讨OLAP关系型数据库框架的数据仓库平台如何设计双集群系统,即增强系统高可用的保障水准。
- 简单介绍DWS权限管理框架和注意点,让读者对权限管理有个基本认知。 简单介绍DWS权限管理框架和注意点,让读者对权限管理有个基本认知。
- GaussDB (DWS)中的时区分为后台集群时区和客户端时区。后台集群时区默认使用UTC时区,可以通过控制台的集群参数修改页面进行调整。通常情况下集群时区不需要进行修改,设置客户端时区可以对SQL执行产生影响。 查询客户端时区和当前时间。 客户端时区为UTC时区,now()函数返回当前时间。 建立如下数据表CREATE TABLE timezone_test (id int, t1 t... GaussDB (DWS)中的时区分为后台集群时区和客户端时区。后台集群时区默认使用UTC时区,可以通过控制台的集群参数修改页面进行调整。通常情况下集群时区不需要进行修改,设置客户端时区可以对SQL执行产生影响。 查询客户端时区和当前时间。 客户端时区为UTC时区,now()函数返回当前时间。 建立如下数据表CREATE TABLE timezone_test (id int, t1 t...
- 为保证现网数据库稳定运行,需要进行日常例行巡检,以保障系统的软硬件处于良好的工作状态,并能够及时发现可能出现的问题,做好风险预警和问题处理。 为保证现网数据库稳定运行,需要进行日常例行巡检,以保障系统的软硬件处于良好的工作状态,并能够及时发现可能出现的问题,做好风险预警和问题处理。
- 负载管理功能概述及全景介绍 负载管理功能概述及全景介绍
- 集群启停问题定位指南1 集群启停基本原理1.1 起停依赖关系描述及图示FIM:集群管理界面,用户可以从FIM界面上下发启动和停止集群操作; cron:系统服务,每一分钟定时查看om_monitor服务是否拉起,如果没有拉起,则拉起;om_monitor:常驻系统,用于拉起cm_agent;cm_agent:起停 cn、dn、gtm、cm_server,以及在停止时,当cn... 集群启停问题定位指南1 集群启停基本原理1.1 起停依赖关系描述及图示FIM:集群管理界面,用户可以从FIM界面上下发启动和停止集群操作; cron:系统服务,每一分钟定时查看om_monitor服务是否拉起,如果没有拉起,则拉起;om_monitor:常驻系统,用于拉起cm_agent;cm_agent:起停 cn、dn、gtm、cm_server,以及在停止时,当cn...
- 1. 通过横向与纵向对比,确定占用空间异常的实例与最小级别目录。(横向对比:单实例或部分实例磁盘使用率异常时,对比不同实例上各目录大小差异;纵向对比:所有实例磁盘使用率异常增高时,与之前的磁盘使用情况进行对比) 2. 确认目录后按照对应场景处理 3. 磁盘使用率达到90%后,处理时需注意集群的只读状态;磁盘使用率达到100%后,直接联系华为工程师 1. 通过横向与纵向对比,确定占用空间异常的实例与最小级别目录。(横向对比:单实例或部分实例磁盘使用率异常时,对比不同实例上各目录大小差异;纵向对比:所有实例磁盘使用率异常增高时,与之前的磁盘使用情况进行对比) 2. 确认目录后按照对应场景处理 3. 磁盘使用率达到90%后,处理时需注意集群的只读状态;磁盘使用率达到100%后,直接联系华为工程师
- 当两张表关联的时候,如果一张表关联的不是分布列,那么就会发生表的广播或者重分布,将数据移到一个节点上进行关联,从而获得数据。这里详细的介绍什么时候广播,什么时候重分布。 分布式的关联有两种:(1) 单DN关联。关联键与分布列一致,只要在单个库关联后得到结果即可。(2)跨DN关联。关联键与分布列不一致,需要数据重分布,转换成单库关联查询,从而实现表的关联。 不管是采用广播还是重分布首先必须保证... 当两张表关联的时候,如果一张表关联的不是分布列,那么就会发生表的广播或者重分布,将数据移到一个节点上进行关联,从而获得数据。这里详细的介绍什么时候广播,什么时候重分布。 分布式的关联有两种:(1) 单DN关联。关联键与分布列一致,只要在单个库关联后得到结果即可。(2)跨DN关联。关联键与分布列不一致,需要数据重分布,转换成单库关联查询,从而实现表的关联。 不管是采用广播还是重分布首先必须保证...
上滑加载中
推荐直播
-
华为云码道 × 仓颉编程:工程化AI编码探索2026/05/27 周三 19:00-21:00
刘俊杰-华为云仓颉语言专家/李炎-华为云码道技术专家/王智鹏-OpenCangjie开源社区发起人
本场直播围绕华为云仓颉语言与华为云码道的深度结合,展示华为云智能编程从零基础到高效落地的完整生态能力。以华为云码道为引擎,仓颉语言为载体,带给大家日常提效、趣味创新到极速量产的开发体验。
回顾中
热门标签