- 随着信息技术的发展，人类进入大数据时代，数据量呈现爆炸式的增长，金融领域数据承载核心业务，即便遭遇各种软硬件错误或灾难，也需要具备找回和快速恢复业务能力，因此备份恢复能力成为数仓的最关键能力之一。华为的GaussDB(DWS)支持了物理细粒度备份恢复能力。用户可自定义备份整集群或部分数据库元素，并进行灵活的单、多表恢复，有效缩减备份数据所需的时间窗口和存储空间，同时聚焦于用户业务场景的关键表的备份 随着信息技术的发展，人类进入大数据时代，数据量呈现爆炸式的增长，金融领域数据承载核心业务，即便遭遇各种软硬件错误或灾难，也需要具备找回和快速恢复业务能力，因此备份恢复能力成为数仓的最关键能力之一。华为的GaussDB(DWS)支持了物理细粒度备份恢复能力。用户可自定义备份整集群或部分数据库元素，并进行灵活的单、多表恢复，有效缩减备份数据所需的时间窗口和存储空间，同时聚焦于用户业务场景的关键表的备份
- ORC文件格式是一种Hadoop生态圈中的列式存储格式，被多种查询引擎支持，而压缩作为ORC格式的核心特性，其支持snappy、zlib、lz三种压缩算法，本文通过对这三种压缩算法进行性能对比测试，得出其三种算法不同的应用场景。 ORC文件格式是一种Hadoop生态圈中的列式存储格式，被多种查询引擎支持，而压缩作为ORC格式的核心特性，其支持snappy、zlib、lz三种压缩算法，本文通过对这三种压缩算法进行性能对比测试，得出其三种算法不同的应用场景。
- Oracle存储过程中table%Rowtype语法改写，DWS中通过数组进行实现 Oracle存储过程中table%Rowtype语法改写，DWS中通过数组进行实现
- 内核提供cbm（changed block map）功能，对外提供数据页面的修改情况，并向提供外部接口，根据cbm信息可直接获取两次备份之间发生对于数据文件（行存、列存）的增量修改信息，并备份。 内核提供cbm（changed block map）功能，对外提供数据页面的修改情况，并向提供外部接口，根据cbm信息可直接获取两次备份之间发生对于数据文件（行存、列存）的增量修改信息，并备份。
- 1. 适用场景1) 当GaussDB A节点硬件发生故障后无法修复，界面上会出现12006告警。为了使服务快速地恢复正常，需要将发生故障的一个或多个节点更换为正常节点。2) 本方案仅适用于线下产品。3) 本方案仅适用于OS重装后，主机置换场景。4) OS未重装场景，不在此文档适用范围内。2. 前提条件1) GaussDB A集群安装成功，且处于已启动状态。2) 准备新的硬件服务器... 1. 适用场景1) 当GaussDB A节点硬件发生故障后无法修复，界面上会出现12006告警。为了使服务快速地恢复正常，需要将发生故障的一个或多个节点更换为正常节点。2) 本方案仅适用于线下产品。3) 本方案仅适用于OS重装后，主机置换场景。4) OS未重装场景，不在此文档适用范围内。2. 前提条件1) GaussDB A集群安装成功，且处于已启动状态。2) 准备新的硬件服务器...
- 涉及版本：C80及以下版本相关原理：http://mysql.taobao.org/monthly/2018/03/08/从6.5.1版本开始，DWS采用64位事务号，不再存在此问题。此帖只用于技术交流。此方案属于高危操作，严禁用户与一线、二线在生产集群操作！操作不慎会导致集群无法修复的严重后果！ 场景一：CN回卷，且正常cn的nextxid未超过21亿1. 确认集群状态：3c18d确认gt... 涉及版本：C80及以下版本相关原理：http://mysql.taobao.org/monthly/2018/03/08/从6.5.1版本开始，DWS采用64位事务号，不再存在此问题。此帖只用于技术交流。此方案属于高危操作，严禁用户与一线、二线在生产集群操作！操作不慎会导致集群无法修复的严重后果！ 场景一：CN回卷，且正常cn的nextxid未超过21亿1. 确认集群状态：3c18d确认gt...
- 在一些局点的交付过程中，ISV需要使用行级访问策略进行用户访问权限控制，省级用户具有全部查询权限，部分市级用户设置行级访问权限。如果行级访问控制使用不好，会导致影响整体查询的执行效率，例如在业务系统建表的过程中，创建1个行级访问策略并增加case when条件，根据登录用户名（current_user）判断用户属性（省级用户还是市级用户），并进行访问控制，实际测试过程中省级用户查询执行耗时17秒。 在一些局点的交付过程中，ISV需要使用行级访问策略进行用户访问权限控制，省级用户具有全部查询权限，部分市级用户设置行级访问权限。如果行级访问控制使用不好，会导致影响整体查询的执行效率，例如在业务系统建表的过程中，创建1个行级访问策略并增加case when条件，根据登录用户名（current_user）判断用户属性（省级用户还是市级用户），并进行访问控制，实际测试过程中省级用户查询执行耗时17秒。
- 使用copymanager接口，读取二进制文件流，将二进制文件中的数据导入到数据库中 使用copymanager接口，读取二进制文件流，将二进制文件中的数据导入到数据库中
- GaussDB(DWS)提供了资源负载管理手段，来均衡任务对系统资源的利用。资源负载 管理存储空间目前主要实现了：1.用户级别的空间管控；2.Schema级别的空间管控； GaussDB(DWS)提供了资源负载管理手段，来均衡任务对系统资源的利用。资源负载 管理存储空间目前主要实现了：1.用户级别的空间管控；2.Schema级别的空间管控；
- GaussDB(DWS)cgroup技术介绍 GaussDB(DWS)cgroup技术介绍
- 与互联网产品的立项模式类似，当我们定义设计一款新产品时，首先需要对用户做需求分析，归纳整理综合分析用户的需求，定义我们的产品定位，功能，业务逻辑，使用界面等等。因此，为了设计好数据库智能监控系统，我们需要对数据库监控系统的目标用户做需求分析，收集用户诉求，挖掘用户潜在需求，绘制典型用户画像。最后，设计数据库监控系统的实现架构，将典型用户的各种需求纳入到产品的设计架构管道中。 与互联网产品的立项模式类似，当我们定义设计一款新产品时，首先需要对用户做需求分析，归纳整理综合分析用户的需求，定义我们的产品定位，功能，业务逻辑，使用界面等等。因此，为了设计好数据库智能监控系统，我们需要对数据库监控系统的目标用户做需求分析，收集用户诉求，挖掘用户潜在需求，绘制典型用户画像。最后，设计数据库监控系统的实现架构，将典型用户的各种需求纳入到产品的设计架构管道中。
- 有大流量产生的stream作业可以通过相关参数调节其性能。 有大流量产生的stream作业可以通过相关参数调节其性能。
- 一、tpcds工具编译1. 从tpc官网下载TPC-DS包。http://www.tpc.org/tpcds/2. 提交TPC-DS包至linux服务器上。3. 解压。 unzip tpc-ds2.6.zip4. 进入目录。 cd v2.6.0/tools5. 复制Makefile文件。 cp Makefile.suite Makefile6. 编译工具 make二... 一、tpcds工具编译1. 从tpc官网下载TPC-DS包。http://www.tpc.org/tpcds/2. 提交TPC-DS包至linux服务器上。3. 解压。 unzip tpc-ds2.6.zip4. 进入目录。 cd v2.6.0/tools5. 复制Makefile文件。 cp Makefile.suite Makefile6. 编译工具 make二...
- 在数据仓库的日常管理过程中，空间管理是一个必要的且重要的事情。从技术上讲，可以防止空间爆满导致集群不可用的情况发生；从业务发展角度讲，可以根据空间的使用趋势评估未来业务的发展趋势，评估什么时候扩容、扩多大等。本文介绍一种基于用户或租户的空间管理方式。 在数据仓库的日常管理过程中，空间管理是一个必要的且重要的事情。从技术上讲，可以防止空间爆满导致集群不可用的情况发生；从业务发展角度讲，可以根据空间的使用趋势评估未来业务的发展趋势，评估什么时候扩容、扩多大等。本文介绍一种基于用户或租户的空间管理方式。
- GaussDB(DWS)对接NBU进行集群数据备份恢复的方法和步骤 GaussDB(DWS)对接NBU进行集群数据备份恢复的方法和步骤
上滑加载中
推荐直播
-
GaussDB管理平台TPOPS，DBA高效运维的一站式解决方案2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维，是否让你感到头疼不已？今天，华为云GaussDB管理平台将彻底来改观！本期直播，我们将深入探索GaussDB管理平台的TPOPS功能，带你感受一键式部署安装的便捷，和智能化运维管理的高效，让复杂的运维、管理变得简单，让简单变得可靠。
回顾中 -
走进数据库：数据库基础知识精讲2024/12/27 周五 16:00-17:30
Steven 华为云学堂技术讲师
数据管理是数据库的核心任务，本期直播将带领大家一起走进数据库，了解期发展趋势、基础模型、架构演进及相关的技术特点。同时还会介绍数据库对象和相关概念，帮助开发者对数据库使用和实践夯实基础。
去报名
热门标签