- cm_agent组件具备日志文件压缩和回收的能力，避免日志占用过多的磁盘空间。本篇博文对cm_agent组件的日志压缩删除功能及常见问题的规避定位进行了介绍。 cm_agent组件具备日志文件压缩和回收的能力，避免日志占用过多的磁盘空间。本篇博文对cm_agent组件的日志压缩删除功能及常见问题的规避定位进行了介绍。
- 一、背景： HDFS已支持联邦，现场HDFS切换成联邦模式，对应hdfs上数据目录及namenode地址发生变化导致原GaussDB(DWS)外表无法正常访问。客户通过重建server以及对应数据的目录，新增联邦配置文件，创建对应联邦namenode HDFS Server，新建外表，维护成本太高。 GaussDB(DWS)支持联邦后，通过指定多个router地址，访... 一、背景： HDFS已支持联邦，现场HDFS切换成联邦模式，对应hdfs上数据目录及namenode地址发生变化导致原GaussDB(DWS)外表无法正常访问。客户通过重建server以及对应数据的目录，新增联邦配置文件，创建对应联邦namenode HDFS Server，新建外表，维护成本太高。 GaussDB(DWS)支持联邦后，通过指定多个router地址，访...
- 1. 协议安全机制SSL/TLS协议是业界常用的加密通信协议，通过该协议可以完成通信双方身份认证，会话密钥协商，通信内容加密和完整性保护。SSL/TLS协议的算法套件包含4种算法：密钥交换、认证、加密、MAC算法。如TLS_DHE_RSA_WITH_AES_128_CBC_SHA256算法套件，DHE是密钥交换算法，RSA是认证算法，AES_128_CBC是对称加密算法，SHA25... 1. 协议安全机制SSL/TLS协议是业界常用的加密通信协议，通过该协议可以完成通信双方身份认证，会话密钥协商，通信内容加密和完整性保护。SSL/TLS协议的算法套件包含4种算法：密钥交换、认证、加密、MAC算法。如TLS_DHE_RSA_WITH_AES_128_CBC_SHA256算法套件，DHE是密钥交换算法，RSA是认证算法，AES_128_CBC是对称加密算法，SHA25...
- 为ROACH故障测试提供基本思路，方法。 为ROACH故障测试提供基本思路，方法。
- 一、数据仓库系统资源的监控与规划数据仓库系统的用户通常分为三种角色：管理员，开发人员以及使用人员。不同角色对于系统资源的关注点是不一样的。在实际的客户场景中，即便管理员也是分为平台管理员和应用管理员两个不同的方向。平台管理员：关注的是物理层面的资源使用信息，目的是保证整个平台的稳定性。所以对于系统资源的使用情况自底向上的层次递进关系为：SQL->CN/DN节点->服务器->集群，（如图1）。... 一、数据仓库系统资源的监控与规划数据仓库系统的用户通常分为三种角色：管理员，开发人员以及使用人员。不同角色对于系统资源的关注点是不一样的。在实际的客户场景中，即便管理员也是分为平台管理员和应用管理员两个不同的方向。平台管理员：关注的是物理层面的资源使用信息，目的是保证整个平台的稳定性。所以对于系统资源的使用情况自底向上的层次递进关系为：SQL->CN/DN节点->服务器->集群，（如图1）。...
- 1 GaussDB(DWS)外表支持的列存格式 GaussDB(DWS)通过SQL On Anywhere特性（参考博客“GaussDB DWS的SQL ON ANYWHERE技术解密”）访问HDFS或OBS上的数据。目前GaussDB(DWS)外表支持的外表格式如下表所示。新版本支持了OBS读Parquet文件。文件系统读支持写支持HDFSORC、ParquetORCOBSORC、CAR... 1 GaussDB(DWS)外表支持的列存格式 GaussDB(DWS)通过SQL On Anywhere特性（参考博客“GaussDB DWS的SQL ON ANYWHERE技术解密”）访问HDFS或OBS上的数据。目前GaussDB(DWS)外表支持的外表格式如下表所示。新版本支持了OBS读Parquet文件。文件系统读支持写支持HDFSORC、ParquetORCOBSORC、CAR...
- 一：环境参数适配1.修改全局参数-- 修改时，可以先手动登录控制台，然后使用F12观察消息里面的内容，将消息里面的内容填到jmeter中-- 注意：最后一个参数cookie要把cfLatestRecordTimestamp放在最后，同时把这个参数的值去掉，类似这样其中的clusterid2修改为实际环境中有的某个集群id -- 测试过程中这个集群不能删，后面的jmeter脚本会以这个为基础判... 一：环境参数适配1.修改全局参数-- 修改时，可以先手动登录控制台，然后使用F12观察消息里面的内容，将消息里面的内容填到jmeter中-- 注意：最后一个参数cookie要把cfLatestRecordTimestamp放在最后，同时把这个参数的值去掉，类似这样其中的clusterid2修改为实际环境中有的某个集群id -- 测试过程中这个集群不能删，后面的jmeter脚本会以这个为基础判...
- 1. Poller锁优化详细设计1.1外部接口介绍CleanConnection、pg_pooler_status、pv_total_memory_detail、pgxc_pool_reload、pg_pool_validate等pooler相关函数视图在内部实现上均有修改，但未修改接口对外表征及具体语义。1.2 空闲连接的无锁存取数据结构设计图 1‑1 空闲连接存储数据结构（优化前）图 ... 1. Poller锁优化详细设计1.1外部接口介绍CleanConnection、pg_pooler_status、pv_total_memory_detail、pgxc_pool_reload、pg_pool_validate等pooler相关函数视图在内部实现上均有修改，但未修改接口对外表征及具体语义。1.2 空闲连接的无锁存取数据结构设计图 1‑1 空闲连接存储数据结构（优化前）图 ...
- 多路IO复用是一种同步IO模型，实现一个线程可以监视多个文件句柄；一旦某个文件句柄就绪，就能够通知应用程序进行相应的读写操作；没有文件句柄就绪时会阻塞应用程序，交出cpu。多路是指网络连接，复用指的是同一个线程。多路IO复用共有三种实现模式：selectpollepoll1、select1.1 select进行IO复用原理当一个客户端连接上服务器时，服务器就将其连接的fd加入fd_set集合... 多路IO复用是一种同步IO模型，实现一个线程可以监视多个文件句柄；一旦某个文件句柄就绪，就能够通知应用程序进行相应的读写操作；没有文件句柄就绪时会阻塞应用程序，交出cpu。多路是指网络连接，复用指的是同一个线程。多路IO复用共有三种实现模式：selectpollepoll1、select1.1 select进行IO复用原理当一个客户端连接上服务器时，服务器就将其连接的fd加入fd_set集合...
- 为保障业务系统高效运行，降低额外的资源损耗，建议定期对运行在GaussDB(DWS)集群上的业务脚本进行排查，并及时对低效业务脚本进行识别和优化，避免系统运行卡顿或资源过度使用。因此，需要增强低效业务脚本的排查和校验，及时识别出耗时、高频等需优化的低效SQL，并进行整改，为生产业务运行增加一道防护网。 为保障业务系统高效运行，降低额外的资源损耗，建议定期对运行在GaussDB(DWS)集群上的业务脚本进行排查，并及时对低效业务脚本进行识别和优化，避免系统运行卡顿或资源过度使用。因此，需要增强低效业务脚本的排查和校验，及时识别出耗时、高频等需优化的低效SQL，并进行整改，为生产业务运行增加一道防护网。
- 在项目交付中会遇到针对JSON类型解析的场景，例如key值获取value，当前GaussDB(DWS)不支持（需求已规划），针对该场景可参考本文方法实现，实际使用过程中可按照注释内容按需调整。 在项目交付中会遇到针对JSON类型解析的场景，例如key值获取value，当前GaussDB(DWS)不支持（需求已规划），针对该场景可参考本文方法实现，实际使用过程中可按照注释内容按需调整。
- GaussDB(DWS)提供了监控当前CN实例内存使用状态的视图及监控整个集群内存使用状态的视图。 GaussDB(DWS)提供了监控当前CN实例内存使用状态的视图及监控整个集群内存使用状态的视图。
- 在分布式场景下，导致性能问题的因素非常之多，包括但不限于硬件故障（慢盘等）、OS配置、集群故障（不均衡等）、软硬件问题（网卡加固等）、系统资源瓶颈、资源竞争、排队、重试等等。本文主要探讨对于性能问题如何快速切入，并总结出一份套路供大家参考。 在分布式场景下，导致性能问题的因素非常之多，包括但不限于硬件故障（慢盘等）、OS配置、集群故障（不均衡等）、软硬件问题（网卡加固等）、系统资源瓶颈、资源竞争、排队、重试等等。本文主要探讨对于性能问题如何快速切入，并总结出一份套路供大家参考。
- 监控指标是查看集群的各个指标性能是否正常，查看集群实例节点是否异常。在集群上做业务操作，用户需要查看集群的监控指标信息时，可以通过云监控服务确认集群的各项指标情况，通过监控集群运行时的各项指标，用户可以识别出数据库集群状态异常的时间段，然后在数据库日志中，分析可能存在问题的活动，从而优化数据库性能。 监控指标是查看集群的各个指标性能是否正常，查看集群实例节点是否异常。在集群上做业务操作，用户需要查看集群的监控指标信息时，可以通过云监控服务确认集群的各项指标情况，通过监控集群运行时的各项指标，用户可以识别出数据库集群状态异常的时间段，然后在数据库日志中，分析可能存在问题的活动，从而优化数据库性能。
- 针对项目交付过程中遇到的List行转列的场景，GaussDB(DWS)提供regexp_split_to_table函数实现，本文进行详细介绍。 针对项目交付过程中遇到的List行转列的场景，GaussDB(DWS)提供regexp_split_to_table函数实现，本文进行详细介绍。
上滑加载中
推荐直播
-
GaussDB管理平台TPOPS，DBA高效运维的一站式解决方案2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维，是否让你感到头疼不已？今天，华为云GaussDB管理平台将彻底来改观！本期直播，我们将深入探索GaussDB管理平台的TPOPS功能，带你感受一键式部署安装的便捷，和智能化运维管理的高效，让复杂的运维、管理变得简单，让简单变得可靠。
回顾中 -
走进数据库：数据库基础知识精讲2024/12/27 周五 16:00-17:30
Steven 华为云学堂技术讲师
数据管理是数据库的核心任务，本期直播将带领大家一起走进数据库，了解期发展趋势、基础模型、架构演进及相关的技术特点。同时还会介绍数据库对象和相关概念，帮助开发者对数据库使用和实践夯实基础。
去报名
热门标签