- 导读：BigQuery和Snowflake都提供了丰富的数据分析功能，旨在将企业数据服务提升到更高的水平。但是哪个数据平台更适合你的业务？本文将从8个角度逐一对比。 导读：BigQuery和Snowflake都提供了丰富的数据分析功能，旨在将企业数据服务提升到更高的水平。但是哪个数据平台更适合你的业务？本文将从8个角度逐一对比。
- sql执行慢，网卡重启 sql执行慢，网卡重启
- GaussDB 内核版本为811之后的版本，空间管控为单dn管控，提供函数查询每个dn的用户资源使用情况，包括用户空间大小 GaussDB 内核版本为811之后的版本，空间管控为单dn管控，提供函数查询每个dn的用户资源使用情况，包括用户空间大小
- 【DWS】【错误信息】部分监控面板没有信息【适用版本】HCS 8.0.3,DWS 8.1.1.2 (管控面430版本，租户面630版本)【问题现象】DWS集群监控面板部分显示监控信息：即 数据仓库服务-》集群列表-》操作-》监控面板进入某个集群的监控页面，其中集群概览，监控-》主机监控，设置-》监控设置 中网络监控，数据库监控，查询监控实例监控，负载监控，诊断 这些监控页面没有信息，其他监控... 【DWS】【错误信息】部分监控面板没有信息【适用版本】HCS 8.0.3,DWS 8.1.1.2 (管控面430版本，租户面630版本)【问题现象】DWS集群监控面板部分显示监控信息：即 数据仓库服务-》集群列表-》操作-》监控面板进入某个集群的监控页面，其中集群概览，监控-》主机监控，设置-》监控设置 中网络监控，数据库监控，查询监控实例监控，负载监控，诊断 这些监控页面没有信息，其他监控...
- 集群常用命令 集群常用命令
- GaussDB数据库数据节点（以下简称dn）之间会因不同的查询计划、sql、线程等等出现频繁的数据交互，在dn上就会承载大量以自身为基准、对端节点为目的d数据流（以下简称stream），当业务量比较集中时或者业务负载较大时，某组dn或多组dn上的数据流就可能会阻塞。用户或运维人员在定位处理该问题时，需要从上亿条数据中获取需要的信息，时效性以及便利性体验不佳。 GaussDB数据库数据节点（以下简称dn）之间会因不同的查询计划、sql、线程等等出现频繁的数据交互，在dn上就会承载大量以自身为基准、对端节点为目的d数据流（以下简称stream），当业务量比较集中时或者业务负载较大时，某组dn或多组dn上的数据流就可能会阻塞。用户或运维人员在定位处理该问题时，需要从上亿条数据中获取需要的信息，时效性以及便利性体验不佳。
- 在项目交付中经常会遇到各种异构数据库间的迁移替换，该场景重度依赖迁移工具完成同步。目前华为云上没有现成的数据迁移工具能够支持Clickhouse到GaussDB(DWS)的迁移，本文提供一种思路，通过Spark代码完成ClickHouse中表数据读取，并写入到GaussDB(DWS)中完成迁移。 在项目交付中经常会遇到各种异构数据库间的迁移替换，该场景重度依赖迁移工具完成同步。目前华为云上没有现成的数据迁移工具能够支持Clickhouse到GaussDB(DWS)的迁移，本文提供一种思路，通过Spark代码完成ClickHouse中表数据读取，并写入到GaussDB(DWS)中完成迁移。
- 列存表一些常用信息查询使用 列存表一些常用信息查询SQL示例 建列存分区表CREATE TABLE column_table( state_ID INT, state_NAME VARCHAR2(40), area_ID INT, ready BOOLEAN)WITH (ORIENTATION = COLUMN)PARTITION BY range(area_ID)(... 列存表一些常用信息查询使用 列存表一些常用信息查询SQL示例 建列存分区表CREATE TABLE column_table( state_ID INT, state_NAME VARCHAR2(40), area_ID INT, ready BOOLEAN)WITH (ORIENTATION = COLUMN)PARTITION BY range(area_ID)(...
- ETL代表“提取、转换和加载”。ETL 过程在数据集成策略中起着关键作用。ETL允许企业从多个来源收集数据并将其整合到一个集中的位置。ETL还使不同类型的数据可以协同工作。 ETL代表“提取、转换和加载”。ETL 过程在数据集成策略中起着关键作用。ETL允许企业从多个来源收集数据并将其整合到一个集中的位置。ETL还使不同类型的数据可以协同工作。
- 在调度和查询混合的数据仓库的使用场景中，常常会有同时对一张表进行ETL写入，和业务进行查询的情况。这种情况下会导致调度和查询互锁，影响调度性能，拖慢整体调度时间；或者是查询语句被锁，只能等待调度完成再能读取。给业务带来很大的不便。这种情况下，如果目标表是分区表，可以使用分区表的交换分区的功能，减少锁等待。语法如下：具体实现方式简单理解为，调度将数据写入与目标表相同表结构的临时表中，数据写完之... 在调度和查询混合的数据仓库的使用场景中，常常会有同时对一张表进行ETL写入，和业务进行查询的情况。这种情况下会导致调度和查询互锁，影响调度性能，拖慢整体调度时间；或者是查询语句被锁，只能等待调度完成再能读取。给业务带来很大的不便。这种情况下，如果目标表是分区表，可以使用分区表的交换分区的功能，减少锁等待。语法如下：具体实现方式简单理解为，调度将数据写入与目标表相同表结构的临时表中，数据写完之...
- 一、DWS表空间介绍 DWS中的表空间实际上就是数据文件系统位置上的一个目录而已，目录中存放了所有的其他对象，例如：表、索引等等； DWS的表空间又分为：默认表空间：pg_default(base)、全局共享系统表表空间pg_global(g... 一、DWS表空间介绍 DWS中的表空间实际上就是数据文件系统位置上的一个目录而已，目录中存放了所有的其他对象，例如：表、索引等等； DWS的表空间又分为：默认表空间：pg_default(base)、全局共享系统表表空间pg_global(g...
- PG的WAL基本原理 PG的WAL基本原理
- 列存文件格式使用1.1 列存文件存储简介目前列存表存储格式支持两种，分别为colversion 1.0和2.0，当指定为1.0格式时，每一列数据存储在一个单独文件之中，文件名以relfilenode.C1、relfilenode.C2、relfilenode.C3等命名，bcm文件也是类似，如果业务中列存表/列存宽表较多时，文件数据会比较多，影响扩容、build、备份等运维操作性... 列存文件格式使用1.1 列存文件存储简介目前列存表存储格式支持两种，分别为colversion 1.0和2.0，当指定为1.0格式时，每一列数据存储在一个单独文件之中，文件名以relfilenode.C1、relfilenode.C2、relfilenode.C3等命名，bcm文件也是类似，如果业务中列存表/列存宽表较多时，文件数据会比较多，影响扩容、build、备份等运维操作性...
- 当开启transaction，执行updata的语句执行成功，不执行commit或rollback；再开启另一个窗口，执行upadate语句，会出现失败（报错：锁等待超时）的情况，但是如果对于上一个窗口执行rollback，此窗口update可以执行成功，该种情况应考虑该表是否为列存表。【问题根因】如果使用的是列存表，在事务中执行update操作时，是以CU为单位进行加锁的，所以在事务未提交... 当开启transaction，执行updata的语句执行成功，不执行commit或rollback；再开启另一个窗口，执行upadate语句，会出现失败（报错：锁等待超时）的情况，但是如果对于上一个窗口执行rollback，此窗口update可以执行成功，该种情况应考虑该表是否为列存表。【问题根因】如果使用的是列存表，在事务中执行update操作时，是以CU为单位进行加锁的，所以在事务未提交...
- GaussDB(DWS)所有内部组件CN、DN、GTM、CM等采用多活或主备设计，通过集群管理进行故障检测和切换。在硬件层面，除了最基本的宕机、断网的直接故障外，GaussDB(DWS)还针对夯死、慢节点、亚健康等僵而不死的复杂场景，做了大量的建模和针对性优化，能够实现故障的准确探测和自愈。并且还提供了双集群容灾能力，通过跨AZ、跨Region的物理复制，实现异构集群容灾。 GaussDB(DWS)所有内部组件CN、DN、GTM、CM等采用多活或主备设计，通过集群管理进行故障检测和切换。在硬件层面，除了最基本的宕机、断网的直接故障外，GaussDB(DWS)还针对夯死、慢节点、亚健康等僵而不死的复杂场景，做了大量的建模和针对性优化，能够实现故障的准确探测和自愈。并且还提供了双集群容灾能力，通过跨AZ、跨Region的物理复制，实现异构集群容灾。
上滑加载中
推荐直播
-
OpenHarmony应用开发之网络数据请求与数据解析2025/01/16 周四 19:00-20:30
华为开发者布道师、南京师范大学泰州学院副教授，硕士研究生导师，开放原子教育银牌认证讲师
科技浪潮中，鸿蒙生态强势崛起，OpenHarmony开启智能终端无限可能。当下，其原生应用开发适配潜力巨大，终端设备已广泛融入生活各场景，从家居到办公、穿戴至车载。 现在，机会敲门！我们的直播聚焦OpenHarmony关键的网络数据请求与解析，抛开晦涩理论，用真实案例带你掌握数据访问接口，轻松应对复杂网络请求、精准解析Json与Xml数据。参与直播，为开发鸿蒙App夯实基础，抢占科技新高地，别错过！
回顾中 -
Ascend C高层API设计原理与实现系列2025/01/17 周五 15:30-17:00
Ascend C 技术专家
以LayerNorm算子开发为例，讲解开箱即用的Ascend C高层API
回顾中
热门标签