- 开发者
- Gauss AP
#Gauss AP#
- DN redo慢告警 DN redo慢告警
- 1.简介存储倾斜即时检测数据,是通过copy或者insert命令入库完成后,根据各DN的入库情况,秒级告警,发现数据倾斜;是避免产生数据倾斜的手段之一;2.原理介绍DML执行到最后,CN上会统计各个DN返回行数,该特性利用CN上的这个行数计算出倾斜率,倾斜率越大代表该次入库数据越倾斜;可以看出倾斜率比值范围为0-1,计算倾斜率需要统计所有DN返回行数的最大值、最小值和总行数。倾斜率定义:倾斜... 1.简介存储倾斜即时检测数据,是通过copy或者insert命令入库完成后,根据各DN的入库情况,秒级告警,发现数据倾斜;是避免产生数据倾斜的手段之一;2.原理介绍DML执行到最后,CN上会统计各个DN返回行数,该特性利用CN上的这个行数计算出倾斜率,倾斜率越大代表该次入库数据越倾斜;可以看出倾斜率比值范围为0-1,计算倾斜率需要统计所有DN返回行数的最大值、最小值和总行数。倾斜率定义:倾斜...
- 在大规模集群扩容场景下,扩容流程容易受到网络,系统配置,底层资源等影响,造成扩容流程失败,特别是HCS形态下,所有新加机器都是搭建入云的,可靠性和正确性并未得到充分验证。一键式操作可能导致高概率回滚,而且时间较长,影响扩容窗口,DWS产品推出分段扩容功能,将扩容步骤进行添加节点、扩容、重分布的三段拆分,可独立操作和容错重试,提高大规模集群扩容的容错能力,降低扩容的时间成本。 在大规模集群扩容场景下,扩容流程容易受到网络,系统配置,底层资源等影响,造成扩容流程失败,特别是HCS形态下,所有新加机器都是搭建入云的,可靠性和正确性并未得到充分验证。一键式操作可能导致高概率回滚,而且时间较长,影响扩容窗口,DWS产品推出分段扩容功能,将扩容步骤进行添加节点、扩容、重分布的三段拆分,可独立操作和容错重试,提高大规模集群扩容的容错能力,降低扩容的时间成本。
- 如果您已经创建了GaussDB(DWS) 集群,就可以使用SQL客户端工具或者JDBC(Java database connectivity)/ODBC(Open Database Connectivity)等第三方驱动程序 连接集群,访问集群中的数据库。本文介绍如何使用Data Studio图形界面客户端连接集群 如果您已经创建了GaussDB(DWS) 集群,就可以使用SQL客户端工具或者JDBC(Java database connectivity)/ODBC(Open Database Connectivity)等第三方驱动程序 连接集群,访问集群中的数据库。本文介绍如何使用Data Studio图形界面客户端连接集群
- 1 获取并安装巡检工具1.1 安装说明1、此方法适用于所有的线上版本(HCS\HCSO\HC等)。2、2020.9.30 发布版本,将工具已经集成到了产品的镜像中,新安装环境可以进入沙箱内的/opt/dws/opstool/ 目录下,因此可以不需要安装,进入沙箱中/opt/dws/opstool/目录,直接执行gs_check命令即可;升级上来的集群,因为不会重新安装镜像,所以沙箱内的/op... 1 获取并安装巡检工具1.1 安装说明1、此方法适用于所有的线上版本(HCS\HCSO\HC等)。2、2020.9.30 发布版本,将工具已经集成到了产品的镜像中,新安装环境可以进入沙箱内的/opt/dws/opstool/ 目录下,因此可以不需要安装,进入沙箱中/opt/dws/opstool/目录,直接执行gs_check命令即可;升级上来的集群,因为不会重新安装镜像,所以沙箱内的/op...
- 概述 程序在运行过程中,需要使用最小化权限进行控制,以符合安全规范,所以一般程序都是以普通用户调用起来使用。有些时候,程序需要完成只有root权限才能完成的任务,这个时候就需要来使用sudo来达成目的。 不使用su命令切换到root来达成目的的原因是:如果这么使用,一方面容易导致root密码管理问题(比如修改后需要通知应用程序,应用程序存储root密码也容易泄露)。... 概述 程序在运行过程中,需要使用最小化权限进行控制,以符合安全规范,所以一般程序都是以普通用户调用起来使用。有些时候,程序需要完成只有root权限才能完成的任务,这个时候就需要来使用sudo来达成目的。 不使用su命令切换到root来达成目的的原因是:如果这么使用,一方面容易导致root密码管理问题(比如修改后需要通知应用程序,应用程序存储root密码也容易泄露)。...
- GaussDB DWS存储类问题汇总原理类行列存GaussDB(DWS)之数据库对象设计https://bbs.huaweicloud.com/blogs/195856GaussDB(DWS)&TD分区表设计原理和使用对比https://bbs.huaweicloud.com/blogs/177226GaussDB(DWS)存储系列之行存表https://bbs.huaweicloud.co... GaussDB DWS存储类问题汇总原理类行列存GaussDB(DWS)之数据库对象设计https://bbs.huaweicloud.com/blogs/195856GaussDB(DWS)&TD分区表设计原理和使用对比https://bbs.huaweicloud.com/blogs/177226GaussDB(DWS)存储系列之行存表https://bbs.huaweicloud.co...
- 通过日常巡检减少系统隐患,确保系统能够长期安全、稳定、可靠地运行,降低维护成本,确保系统进行正常的业务处理。 通过日常巡检减少系统隐患,确保系统能够长期安全、稳定、可靠地运行,降低维护成本,确保系统进行正常的业务处理。
- 高斯 sequence 使用心得体会,产品文档的补充 高斯 sequence 使用心得体会,产品文档的补充
- GaussDB(DWS)备份恢复工具roach支持将数据备份到多种介质,包括对象存储服务(Object Storage Service,OBS),并从中恢复,支持恢复到原集群和新集群。Roach备份至OBS时,数据不落盘到本地磁盘,可直接上传至OBS。 1.将数据备份至OBS: 数据存放到OBS,需要OBS对应的AK/SK,内核侧采用命令行方式进行备份恢复: $... GaussDB(DWS)备份恢复工具roach支持将数据备份到多种介质,包括对象存储服务(Object Storage Service,OBS),并从中恢复,支持恢复到原集群和新集群。Roach备份至OBS时,数据不落盘到本地磁盘,可直接上传至OBS。 1.将数据备份至OBS: 数据存放到OBS,需要OBS对应的AK/SK,内核侧采用命令行方式进行备份恢复: $...
- 全文检索(Text search)顾名思义,就是在给定的文档中查找指定模式(pattern)的过程。GaussDB(DWS)支持对表格中文本类型的字段及字段的组合做全文检索,找出能匹配给定模式的文本,并以用户期望的方式将匹配结果呈现出来。本文简要介绍了GaussDB(DWS)全文检索的原理和使用方法。 全文检索(Text search)顾名思义,就是在给定的文档中查找指定模式(pattern)的过程。GaussDB(DWS)支持对表格中文本类型的字段及字段的组合做全文检索,找出能匹配给定模式的文本,并以用户期望的方式将匹配结果呈现出来。本文简要介绍了GaussDB(DWS)全文检索的原理和使用方法。
- GaussDB(DWS)的实例在运行过程中难免发生故障,引起实例错误或无法启动,此时就需要进行备机重建工作。备机重建功能主要目的是修复实例单点故障,此外,还可用于集群安装的初始化、集群扩容的元数据同步、节点故障后的温备替换等等场景。本文将介绍备机重建各种方法的实现机制,并结合应用场景分析,以及对新增参数的使用建议,以期获得最佳应用效果。 GaussDB(DWS)的实例在运行过程中难免发生故障,引起实例错误或无法启动,此时就需要进行备机重建工作。备机重建功能主要目的是修复实例单点故障,此外,还可用于集群安装的初始化、集群扩容的元数据同步、节点故障后的温备替换等等场景。本文将介绍备机重建各种方法的实现机制,并结合应用场景分析,以及对新增参数的使用建议,以期获得最佳应用效果。
- 数据库审计,指的是将用户对数据库的所有操作写入审计日志中,使得数据库安全管理员可以利用这些日志信息,找出非法操作的用户,时间和内容等。如何使用数据库审计,这里以审计事务功能为例:1. 设置审计配置项要使数据库能够审计到某项功能,需要打开审计的总开关(audit_operation_exec)和对应的审计项开关(audit_operation_exec),二者均支持动态加载,在数据库运行期间修... 数据库审计,指的是将用户对数据库的所有操作写入审计日志中,使得数据库安全管理员可以利用这些日志信息,找出非法操作的用户,时间和内容等。如何使用数据库审计,这里以审计事务功能为例:1. 设置审计配置项要使数据库能够审计到某项功能,需要打开审计的总开关(audit_operation_exec)和对应的审计项开关(audit_operation_exec),二者均支持动态加载,在数据库运行期间修...
- GaussDB Kernel提供自研的TSDB时序引擎,提供扩展的时序场景语法,以及分区管理、时序计算、时序生态函数等服务功能,此博文详细描述如何使用Grafana与DWS时序数仓对接,展示时序数据。 GaussDB Kernel提供自研的TSDB时序引擎,提供扩展的时序场景语法,以及分区管理、时序计算、时序生态函数等服务功能,此博文详细描述如何使用Grafana与DWS时序数仓对接,展示时序数据。
- 索引是常见的查询性能优化手段,但索引本身也需要占用一定的磁盘空间,同时也会降低数据入库的性能。通过学习和了解GaussDB(DWS)的btree索引和cbtree的机制,本文提供一种依靠索引元数据来识别表上索引冗余的手段 索引是常见的查询性能优化手段,但索引本身也需要占用一定的磁盘空间,同时也会降低数据入库的性能。通过学习和了解GaussDB(DWS)的btree索引和cbtree的机制,本文提供一种依靠索引元数据来识别表上索引冗余的手段
上滑加载中
推荐直播
-
OpenHarmony应用开发之网络数据请求与数据解析
2025/01/16 周四 19:00-20:30
华为开发者布道师、南京师范大学泰州学院副教授,硕士研究生导师,开放原子教育银牌认证讲师
科技浪潮中,鸿蒙生态强势崛起,OpenHarmony开启智能终端无限可能。当下,其原生应用开发适配潜力巨大,终端设备已广泛融入生活各场景,从家居到办公、穿戴至车载。 现在,机会敲门!我们的直播聚焦OpenHarmony关键的网络数据请求与解析,抛开晦涩理论,用真实案例带你掌握数据访问接口,轻松应对复杂网络请求、精准解析Json与Xml数据。参与直播,为开发鸿蒙App夯实基础,抢占科技新高地,别错过!
回顾中 -
Ascend C高层API设计原理与实现系列
2025/01/17 周五 15:30-17:00
Ascend C 技术专家
以LayerNorm算子开发为例,讲解开箱即用的Ascend C高层API
回顾中
热门标签