- ETL代表“提取、转换和加载”。ETL 过程在数据集成策略中起着关键作用。ETL允许企业从多个来源收集数据并将其整合到一个集中的位置。ETL还使不同类型的数据可以协同工作。 ETL代表“提取、转换和加载”。ETL 过程在数据集成策略中起着关键作用。ETL允许企业从多个来源收集数据并将其整合到一个集中的位置。ETL还使不同类型的数据可以协同工作。
- 在调度和查询混合的数据仓库的使用场景中,常常会有同时对一张表进行ETL写入,和业务进行查询的情况。这种情况下会导致调度和查询互锁,影响调度性能,拖慢整体调度时间;或者是查询语句被锁,只能等待调度完成再能读取。给业务带来很大的不便。这种情况下,如果目标表是分区表,可以使用分区表的交换分区的功能,减少锁等待。语法如下:具体实现方式简单理解为,调度将数据写入与目标表相同表结构的临时表中,数据写完之... 在调度和查询混合的数据仓库的使用场景中,常常会有同时对一张表进行ETL写入,和业务进行查询的情况。这种情况下会导致调度和查询互锁,影响调度性能,拖慢整体调度时间;或者是查询语句被锁,只能等待调度完成再能读取。给业务带来很大的不便。这种情况下,如果目标表是分区表,可以使用分区表的交换分区的功能,减少锁等待。语法如下:具体实现方式简单理解为,调度将数据写入与目标表相同表结构的临时表中,数据写完之...
- 一、DWS表空间介绍 DWS中的表空间实际上就是数据文件系统位置上的一个目录而已,目录中存放了所有的其他对象,例如:表、索引等等; DWS的表空间又分为:默认表空间:pg_default(base)、全局共享系统表表空间pg_global(g... 一、DWS表空间介绍 DWS中的表空间实际上就是数据文件系统位置上的一个目录而已,目录中存放了所有的其他对象,例如:表、索引等等; DWS的表空间又分为:默认表空间:pg_default(base)、全局共享系统表表空间pg_global(g...
- PG的WAL基本原理 PG的WAL基本原理
- 列存文件格式使用1.1 列存文件存储简介目前列存表存储格式支持两种,分别为colversion 1.0和2.0,当指定为1.0格式时,每一列数据存储在一个单独文件之中,文件名以relfilenode.C1、relfilenode.C2、relfilenode.C3等命名,bcm文件也是类似,如果业务中列存表/列存宽表较多时,文件数据会比较多,影响扩容、build、备份等运维操作性... 列存文件格式使用1.1 列存文件存储简介目前列存表存储格式支持两种,分别为colversion 1.0和2.0,当指定为1.0格式时,每一列数据存储在一个单独文件之中,文件名以relfilenode.C1、relfilenode.C2、relfilenode.C3等命名,bcm文件也是类似,如果业务中列存表/列存宽表较多时,文件数据会比较多,影响扩容、build、备份等运维操作性...
- 当开启transaction,执行updata的语句执行成功,不执行commit或rollback;再开启另一个窗口,执行upadate语句,会出现失败(报错:锁等待超时)的情况,但是如果对于上一个窗口执行rollback,此窗口update可以执行成功,该种情况应考虑该表是否为列存表。【问题根因】如果使用的是列存表,在事务中执行update操作时,是以CU为单位进行加锁的,所以在事务未提交... 当开启transaction,执行updata的语句执行成功,不执行commit或rollback;再开启另一个窗口,执行upadate语句,会出现失败(报错:锁等待超时)的情况,但是如果对于上一个窗口执行rollback,此窗口update可以执行成功,该种情况应考虑该表是否为列存表。【问题根因】如果使用的是列存表,在事务中执行update操作时,是以CU为单位进行加锁的,所以在事务未提交...
- GaussDB(DWS)所有内部组件CN、DN、GTM、CM等采用多活或主备设计,通过集群管理进行故障检测和切换。在硬件层面,除了最基本的宕机、断网的直接故障外,GaussDB(DWS)还针对夯死、慢节点、亚健康等僵而不死的复杂场景,做了大量的建模和针对性优化,能够实现故障的准确探测和自愈。并且还提供了双集群容灾能力,通过跨AZ、跨Region的物理复制,实现异构集群容灾。 GaussDB(DWS)所有内部组件CN、DN、GTM、CM等采用多活或主备设计,通过集群管理进行故障检测和切换。在硬件层面,除了最基本的宕机、断网的直接故障外,GaussDB(DWS)还针对夯死、慢节点、亚健康等僵而不死的复杂场景,做了大量的建模和针对性优化,能够实现故障的准确探测和自愈。并且还提供了双集群容灾能力,通过跨AZ、跨Region的物理复制,实现异构集群容灾。
- 从四个核心技术为你解密,GaussDB(DWS)负载管理功能如何做好计算/存储资源的划分,让你的数仓“聪明”起来。 从四个核心技术为你解密,GaussDB(DWS)负载管理功能如何做好计算/存储资源的划分,让你的数仓“聪明”起来。
- 适配Oracle的WEEKOF函数 适配Oracle的WEEKOF函数
- 适配Oralce的dayof函数 适配Oralce的dayof函数
- GaussDB(DWS)是有两个时区的,你知道吗? GaussDB(DWS)是有两个时区的,你知道吗?
- 数据库内存不够用,扩容是必须的,但更要定位准确。 数据库内存不够用,扩容是必须的,但更要定位准确。
- 从理论到升级案例,带你掌握GaussDB(DWS)升级面临的疑难问题。 从理论到升级案例,带你掌握GaussDB(DWS)升级面临的疑难问题。
- 什么是逻辑集群、DWS逻辑集群如何使用,统统都告诉你。 什么是逻辑集群、DWS逻辑集群如何使用,统统都告诉你。
- 数据库未来是云,越来越多企业面临数据库和应用技术转型,云端运维成数据库运维需要掌握的核心。 数据库未来是云,越来越多企业面临数据库和应用技术转型,云端运维成数据库运维需要掌握的核心。
上滑加载中
推荐直播
-
大模型Prompt工程深度实践
2025/02/24 周一 16:00-17:30
盖伦 华为云学堂技术讲师
如何让大模型精准理解开发需求并生成可靠输出?本期直播聚焦大模型Prompt工程核心技术:理解大模型推理基础原理,关键采样参数定义,提示词撰写关键策略及Prompt工程技巧分享。
回顾中 -
华为云 x DeepSeek:AI驱动云上应用创新
2025/02/26 周三 16:00-18:00
华为云 AI专家大咖团
在 AI 技术飞速发展之际,DeepSeek 备受关注。它凭借哪些技术与理念脱颖而出?华为云与 DeepSeek 合作,将如何重塑产品与应用模式,助力企业数字化转型?在华为开发者空间,怎样高效部署 DeepSeek,搭建专属服务器?基于华为云平台,又该如何挖掘 DeepSeek 潜力,实现智能化升级?本期直播围绕DeepSeek在云上的应用案例,与DTSE布道师们一起探讨如何利用AI 驱动云上应用创新。
去报名
热门标签