- 性能调优是应用迁移或开发过程中的关键步骤,同时也在整个项目实施过程中占据很大的份量,在很多实施步骤中都需要进行考虑。本篇博文作为《GaussDB(DWS)性能调优系列》的专题文章,主要介绍数据库级别的性能调优思路和总体策略,助力GaussDB DWS使用者深谙调优精髓,更好地完成应用实施过程中的各项调优任务。 性能调优是应用迁移或开发过程中的关键步骤,同时也在整个项目实施过程中占据很大的份量,在很多实施步骤中都需要进行考虑。本篇博文作为《GaussDB(DWS)性能调优系列》的专题文章,主要介绍数据库级别的性能调优思路和总体策略,助力GaussDB DWS使用者深谙调优精髓,更好地完成应用实施过程中的各项调优任务。
- XXX局点的数据库为全省集中部署,涉及到20000+业务数据表,且业务数据表全部放在一个schema下。为应对审计部门的核查,每季度需要将全省集中的生产数据库拷贝到汇总库中,再按照省市县约100+区划进行分离,实现A区划用户只有权限查看其本区划内的数据,其余区划信息均不可见,并且能够实现A区划数据的分离提取。 XXX局点的数据库为全省集中部署,涉及到20000+业务数据表,且业务数据表全部放在一个schema下。为应对审计部门的核查,每季度需要将全省集中的生产数据库拷贝到汇总库中,再按照省市县约100+区划进行分离,实现A区划用户只有权限查看其本区划内的数据,其余区划信息均不可见,并且能够实现A区划数据的分离提取。
- 数据库分布式计划的主要特点在于执行算子在不同的节点(逻辑节点/物理节点)上执行,在保证最终执行结果正确性的前提下,如何更好的利用各节点资源是生成最优分布式计划以及性能调优均需面对的首要问题。 数据库分布式计划的主要特点在于执行算子在不同的节点(逻辑节点/物理节点)上执行,在保证最终执行结果正确性的前提下,如何更好的利用各节点资源是生成最优分布式计划以及性能调优均需面对的首要问题。
- 扩容问题定位指南(二)2 扩容问题定位方法2.1 扩容问题分类扩容通常是在“初始化服务和实例”和数据重分布两个步骤报错,可通过查看后台日志排查分析。2.2 日志分析步骤1、 如果是在“初始化服务和实例”步骤报错,则使用omm用户登录报错的新扩容节点,查看日志/var/log/Bigdata/mpp/scriptlog/postinstall.log,如果日志文... 扩容问题定位指南(二)2 扩容问题定位方法2.1 扩容问题分类扩容通常是在“初始化服务和实例”和数据重分布两个步骤报错,可通过查看后台日志排查分析。2.2 日志分析步骤1、 如果是在“初始化服务和实例”步骤报错,则使用omm用户登录报错的新扩容节点,查看日志/var/log/Bigdata/mpp/scriptlog/postinstall.log,如果日志文...
- 扩容问题定位指南(一)1 扩容基本原理1.1 扩容总体流程1. 用户在FIM界面提交扩容加节点请求;2. FIM向所有新节点下发命令,执行preinstall;3. 第一个新节点在完成preinstall之后等待所有新节点都已完成preinstall,然后ssh到第一个老节点调用gs_expand做内核扩容加节;其它新节点在... 扩容问题定位指南(一)1 扩容基本原理1.1 扩容总体流程1. 用户在FIM界面提交扩容加节点请求;2. FIM向所有新节点下发命令,执行preinstall;3. 第一个新节点在完成preinstall之后等待所有新节点都已完成preinstall,然后ssh到第一个老节点调用gs_expand做内核扩容加节;其它新节点在...
- 华为的 GaussDB 数据库,从传承和沿革上,让行业里的朋友非常困惑,我整理一下相关的信息记录于此。最初,华为的数据库公布出来的型号系列有三款,分别是 100、200 和 300 ,统一的命名都是 GaussDB 。GaussDB 100 ,以 OLTP 为方向,最初和招商银行联合研发,然后推广,在 2020年6月,将会开源单机版本;GaussDB 200,以 PostgreSQL 为出发... 华为的 GaussDB 数据库,从传承和沿革上,让行业里的朋友非常困惑,我整理一下相关的信息记录于此。最初,华为的数据库公布出来的型号系列有三款,分别是 100、200 和 300 ,统一的命名都是 GaussDB 。GaussDB 100 ,以 OLTP 为方向,最初和招商银行联合研发,然后推广,在 2020年6月,将会开源单机版本;GaussDB 200,以 PostgreSQL 为出发...
- 在数据仓库/分析领域,有传统厂商Oracle,Teradata,开源软件Hadoop,云厂商AWS Redshift,Google Bigquery,Snowflake成功的技术原因是什么? 在数据仓库/分析领域,有传统厂商Oracle,Teradata,开源软件Hadoop,云厂商AWS Redshift,Google Bigquery,Snowflake成功的技术原因是什么?
- https://www.cnblogs.com/qiaojun/articles/9901552.html https://www.cnblogs.com/steer-life/p/sdo_geometry.html https://www.cnblogs.com/qiaojun/articles/9901552.html https://www.cnblogs.com/steer-life/p/sdo_geometry.html
- GaussDB(DWS)通过GDS导出的文件,用GDS重新导入到源表,竟然会报错。带着疑问研究了下为什么会这样,原来是字符集不兼容分隔符导致的,分隔符无法被外表的字符集正确读取 GaussDB(DWS)通过GDS导出的文件,用GDS重新导入到源表,竟然会报错。带着疑问研究了下为什么会这样,原来是字符集不兼容分隔符导致的,分隔符无法被外表的字符集正确读取
- 本文介绍GaussDB HA现网常见问题以及应急方案,包括集群单实例异常、备机升主长时间不成功导致集群不可用、实例build失败、xlog积压引起磁盘使用率过高、主备catchup长时间不结束、主备切换长时间不成功、GaussDB 实例异常退出、常用日志总结等,总体覆盖80%HA常见问题,对待本文建议大家看到不是单点案例而是一类问题的处理方式。 本文介绍GaussDB HA现网常见问题以及应急方案,包括集群单实例异常、备机升主长时间不成功导致集群不可用、实例build失败、xlog积压引起磁盘使用率过高、主备catchup长时间不结束、主备切换长时间不成功、GaussDB 实例异常退出、常用日志总结等,总体覆盖80%HA常见问题,对待本文建议大家看到不是单点案例而是一类问题的处理方式。
- DWS集群的基本功能:创建,备份,恢复,删除。 DWS集群的基本功能:创建,备份,恢复,删除。
- 之前有在笔记本上安装hadoop,配置如下: 测试过同时运行6台虚拟机(2C4G)没有问题,但是如果运行pycharm,没过多久肯定会有一台虚拟机会挂掉。所以只能运行一个pycharm和5台虚拟机。 之前安装没有搭建k8s,只安装docker,为了便于管理docker,使用docker-compose,并在mas5虚拟机里使用docker-compose安装zabbix。doc... 之前有在笔记本上安装hadoop,配置如下: 测试过同时运行6台虚拟机(2C4G)没有问题,但是如果运行pycharm,没过多久肯定会有一台虚拟机会挂掉。所以只能运行一个pycharm和5台虚拟机。 之前安装没有搭建k8s,只安装docker,为了便于管理docker,使用docker-compose,并在mas5虚拟机里使用docker-compose安装zabbix。doc...
- GaussDB(DWS)通过GUC(grand unified configuration)参数来控制数据库的部署形态和运行行为。参数种类繁多,从功能上大致可分为集群配置类参数,性能/资源控制类参数,功能开关参数和HA相关参数。通过了解这些参数的含义、使用场景及配置方法,可以快速理解和使用数据库。这里进行GUC参数的简单介绍和配置说明。 GaussDB(DWS)通过GUC(grand unified configuration)参数来控制数据库的部署形态和运行行为。参数种类繁多,从功能上大致可分为集群配置类参数,性能/资源控制类参数,功能开关参数和HA相关参数。通过了解这些参数的含义、使用场景及配置方法,可以快速理解和使用数据库。这里进行GUC参数的简单介绍和配置说明。
- Teradata项目搬迁GaussDB(DWS)云数仓事项浓缩信息 Teradata项目搬迁GaussDB(DWS)云数仓事项浓缩信息
- 日前,华为举办第五届HUAWEI CONNECT,中国光大银行信息科技部副处长刘淼受邀分享了“光大银行基于华为云GaussDB(DWS) 数据仓库创新实践”。刘淼说,“面向未来数据平台3.0要做架构减法,平台由N->1,华为云GaussDB(DWS)未来作为数据仓库唯一平台,数据链路实现从数据湖直接到华为云GaussDB(DWS)数据仓库。” 日前,华为举办第五届HUAWEI CONNECT,中国光大银行信息科技部副处长刘淼受邀分享了“光大银行基于华为云GaussDB(DWS) 数据仓库创新实践”。刘淼说,“面向未来数据平台3.0要做架构减法,平台由N->1,华为云GaussDB(DWS)未来作为数据仓库唯一平台,数据链路实现从数据湖直接到华为云GaussDB(DWS)数据仓库。”
上滑加载中
推荐直播
-
DeepSeek华为云全栈解决方案
2025/02/18 周二 16:30-17:30
Young-华为云公有云解决方案专家
如何让大模型发挥更大能量助力业务?本期课程以真实案例展开,带您深入探索如何构建更完整的AI解决方案。
回顾中
热门标签