- 集群运行过程中,根据集群的综合负载和业务接入情况进行分析:增加CN可以适当降低CPU消耗,增大接入连接数,分散CN节点业务压力,根据实际情况来识别是否要增加CN,如果是提升集群容量和扩展比能力,建议进行扩容操作。 支持在线运维:在符合增加CN、删除CN界面的准入条件下,找低峰期时间窗进行操作。准入条件:1.增加CN要求集群状态正常(集群状态为Normal,非均衡,低性能状态)2.如果存在一个... 集群运行过程中,根据集群的综合负载和业务接入情况进行分析:增加CN可以适当降低CPU消耗,增大接入连接数,分散CN节点业务压力,根据实际情况来识别是否要增加CN,如果是提升集群容量和扩展比能力,建议进行扩容操作。 支持在线运维:在符合增加CN、删除CN界面的准入条件下,找低峰期时间窗进行操作。准入条件:1.增加CN要求集群状态正常(集群状态为Normal,非均衡,低性能状态)2.如果存在一个...
- 带你快速入门GDS导入导出,玩转PB级数仓GaussDB(DWS) 1、创建导入目标表CREATE TABLE tpcds_reasons( r_reason_sk integer not null, r_reason_id char(16) not null, r_reason_desc char(100)); 2、创建与目标表一致的外表#外表中配置了数据源格式信息、GDS服务的访... 带你快速入门GDS导入导出,玩转PB级数仓GaussDB(DWS) 1、创建导入目标表CREATE TABLE tpcds_reasons( r_reason_sk integer not null, r_reason_id char(16) not null, r_reason_desc char(100)); 2、创建与目标表一致的外表#外表中配置了数据源格式信息、GDS服务的访...
- 通常跑批加工场景下,都是大数量做关联操作,通常不建议使用索引。有些时候因为计划误判导致使用索引的可能会导致严重的性能问题。本文从一个典型的索引导致性能的场景重发,剖析此类问题的特征,定位方法和解决方法 通常跑批加工场景下,都是大数量做关联操作,通常不建议使用索引。有些时候因为计划误判导致使用索引的可能会导致严重的性能问题。本文从一个典型的索引导致性能的场景重发,剖析此类问题的特征,定位方法和解决方法
- 在实际应用中,可能存在某一个文件太大,需要拆分成多个文件发送的情况,那么,GDS是否可以同时将拆分后的这些文件一次性加载到数据库呢? 下文对以上场景进行了验证。 结论1:一个GDS进程能够处理同一个目标表对应的同一个目录下的多个文件,这些文件通常使用通配符指定。 结论2:多个GDS进程能够同时处理同一个目标表的多个目录下的多个文件,文件可以使用通配符指定。 结论3:一个GDS进程不支持同时 在实际应用中,可能存在某一个文件太大,需要拆分成多个文件发送的情况,那么,GDS是否可以同时将拆分后的这些文件一次性加载到数据库呢? 下文对以上场景进行了验证。 结论1:一个GDS进程能够处理同一个目标表对应的同一个目录下的多个文件,这些文件通常使用通配符指定。 结论2:多个GDS进程能够同时处理同一个目标表的多个目录下的多个文件,文件可以使用通配符指定。 结论3:一个GDS进程不支持同时
- 现网中遇到很多小伙伴不清楚字符串与进制之间的转换方法,其实在GaussDB(DWS)中,进制转换是非常方便的。这次就来对不同的场景一一进行解析,整理出来供大家翻阅参考。 现网中遇到很多小伙伴不清楚字符串与进制之间的转换方法,其实在GaussDB(DWS)中,进制转换是非常方便的。这次就来对不同的场景一一进行解析,整理出来供大家翻阅参考。
- DWS(gaussdb)设置CPU配额和限额 DWS(gaussdb)设置CPU配额和限额
- 这里会介绍数据仓库的理解,什么是数据仓库技术,数据仓库的作用。 数据仓库,英文名称为Data Warehouse,可简写为DW或DWH。数据仓库,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和决策支持目的而创建。 为需要业务智能的企业,提供指导业务流程改进、监视时间、成本、质量以及控制。 我简单的做一个比喻,数据仓库就是可以理解就... 这里会介绍数据仓库的理解,什么是数据仓库技术,数据仓库的作用。 数据仓库,英文名称为Data Warehouse,可简写为DW或DWH。数据仓库,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和决策支持目的而创建。 为需要业务智能的企业,提供指导业务流程改进、监视时间、成本、质量以及控制。 我简单的做一个比喻,数据仓库就是可以理解就...
- cgroup cgroup
- 欢迎DMS的小伙伴给建议 欢迎DMS的小伙伴给建议
- 编写写入DWS层业务代码DWS层主要是存放大宽表数据,此业务中主要是针对Kafka topic “KAFKA-DWD-BROWSE-LOG-TOPIC”中用户浏览商品日志数据关联HBase中“ODS_PRODUCT_CATEGORY”商品分类表与“ODS_PRODUCT_INFO”商品表维度数据获取浏览商品主题大宽表。Flink在读取Kafka 用户浏览商品数据与HBase中维度数据进行关... 编写写入DWS层业务代码DWS层主要是存放大宽表数据,此业务中主要是针对Kafka topic “KAFKA-DWD-BROWSE-LOG-TOPIC”中用户浏览商品日志数据关联HBase中“ODS_PRODUCT_CATEGORY”商品分类表与“ODS_PRODUCT_INFO”商品表维度数据获取浏览商品主题大宽表。Flink在读取Kafka 用户浏览商品数据与HBase中维度数据进行关...
- 企业只有把数据用起来了,才能反向推动数据治理和数据标准类似的工作,而数据治理的推进也会让数据服务化更好,让业务更好的使用数据,这其实也是企业数字化转型的方向和重要目标:让数据用起来。 企业只有把数据用起来了,才能反向推动数据治理和数据标准类似的工作,而数据治理的推进也会让数据服务化更好,让业务更好的使用数据,这其实也是企业数字化转型的方向和重要目标:让数据用起来。
- 出于数据安全或者使数据简单化的考虑,在数据仓库的建设过程中,通常采用视图的方式实现;时间久了之后,有时候视图与表的关系会变的很复杂,那么,我们如何找出他们的依赖关系呢? 出于数据安全或者使数据简单化的考虑,在数据仓库的建设过程中,通常采用视图的方式实现;时间久了之后,有时候视图与表的关系会变的很复杂,那么,我们如何找出他们的依赖关系呢?
- 聊聊GaussDB(for Mysql)GaussDB的产品GaussDB 是华为出的一款数据库产品,从华为云的官网我们就能看到,GaussDB有多个产品,包括关系型数据库的GaussDB(for openGauss)和GaussDB(for Mysql)的,GaussDB(for Mysql)可以完全兼容我们用的Mysql,非关系型的数据库中包括GaussDB(for Cassandra)... 聊聊GaussDB(for Mysql)GaussDB的产品GaussDB 是华为出的一款数据库产品,从华为云的官网我们就能看到,GaussDB有多个产品,包括关系型数据库的GaussDB(for openGauss)和GaussDB(for Mysql)的,GaussDB(for Mysql)可以完全兼容我们用的Mysql,非关系型的数据库中包括GaussDB(for Cassandra)...
- 后台使用JDBC连接远端集群执行sql实践;本文提供详细的思路和方法,工具请从内部资源获取,感谢理解 后台使用JDBC连接远端集群执行sql实践;本文提供详细的思路和方法,工具请从内部资源获取,感谢理解
- 思想,因为碰撞,在不断构建与崩塌中,逐渐凝练璀璨。不是专家,也不故作高人之姿。尘世迷途中的一个tester,和大家一人一个小马扎,做最朴素的讨论。该语言讨论,咱就语言讨论。作为网友,物理交流就留给元宇宙和脑机接口吧。 大家好,我是......(忽略)。本文为系列开篇文章,讨论一个问题。当你需要使用不熟悉的某个工具或平台来完成某项任务时,对应owner大概率会丢一个指导文档给你。 思想,因为碰撞,在不断构建与崩塌中,逐渐凝练璀璨。不是专家,也不故作高人之姿。尘世迷途中的一个tester,和大家一人一个小马扎,做最朴素的讨论。该语言讨论,咱就语言讨论。作为网友,物理交流就留给元宇宙和脑机接口吧。 大家好,我是......(忽略)。本文为系列开篇文章,讨论一个问题。当你需要使用不熟悉的某个工具或平台来完成某项任务时,对应owner大概率会丢一个指导文档给你。
上滑加载中
推荐直播
-
DeepSeek 深入浅出白话解读
2025/02/12 周三 17:00-18:00
Tim-华为云中国区AI解决方案总监
DeepSeek的来龙去脉,为什么DeepSeek那么强?哪些是它的领先优势?它是怎么发展过来的?在华为云上能不能用到DeepSeek?本节课将一一解读。
即将直播
热门标签