- BigQuery数据迁移至华为DWS数仓 1. 前言 2. 准备工作 3. 将BigQuery的数据导出到Cloud Storage 3.1 DDL导出 3.2 数据导出 3.3 验证导出 4. 将Cloud Storage上的数据同步到华为云OBS 5. 创建用于装载数据的目标表 6. 将OBS数据导入DWS数仓 ... BigQuery数据迁移至华为DWS数仓 1. 前言 2. 准备工作 3. 将BigQuery的数据导出到Cloud Storage 3.1 DDL导出 3.2 数据导出 3.3 验证导出 4. 将Cloud Storage上的数据同步到华为云OBS 5. 创建用于装载数据的目标表 6. 将OBS数据导入DWS数仓 ...
- 【HCS】管控面升级注册细粒度工步报错定位过程 【HCS】管控面升级注册细粒度工步报错定位过程
- 数据库的存储模型直接影响数据处理的性能与效率,本文对当前dws支持的表类型进行介绍,从存储格式进行分类,对各种类型的表的适用场景进行介绍,并提供了一些简单的使用实例,方便业务进行表选型和开发。 数据库的存储模型直接影响数据处理的性能与效率,本文对当前dws支持的表类型进行介绍,从存储格式进行分类,对各种类型的表的适用场景进行介绍,并提供了一些简单的使用实例,方便业务进行表选型和开发。
- 本文主要介绍DWS中user和role的区别及user和schema如何解耦。 本文主要介绍DWS中user和role的区别及user和schema如何解耦。
- 【建议使用版本】910及以上TOPSQL全开场景【建议使用场景】CPU/内存/IO等资源偶尔非常高,初步分析不是一两个烂SQL导致,怀疑业务请求量上涨【分析步骤】(1)通过TOPSQL查询每个用户不同类型请求每分钟的请求次数,参考如下SQL:select to_char(start_time,‘yyyy-mm-dd hh24:mi’),username,stmt_type,count(*) ... 【建议使用版本】910及以上TOPSQL全开场景【建议使用场景】CPU/内存/IO等资源偶尔非常高,初步分析不是一两个烂SQL导致,怀疑业务请求量上涨【分析步骤】(1)通过TOPSQL查询每个用户不同类型请求每分钟的请求次数,参考如下SQL:select to_char(start_time,‘yyyy-mm-dd hh24:mi’),username,stmt_type,count(*) ...
- 容灾正常运行,但是界面显示容灾异常 容灾正常运行,但是界面显示容灾异常
- 1、问题现象 创建容灾后任务后,容灾启动失败。查看dwscontroller日志disaster_recovery.log发现有scp失败的错误。检查主备集群中节点/home/Ruby/.ssh/passphrase.file中的私钥和authorized_keys中的公钥,发现不一致。2、定位步骤及解决方案 步骤1 主集群显示容灾异常,登录实例节点,vi log/di... 1、问题现象 创建容灾后任务后,容灾启动失败。查看dwscontroller日志disaster_recovery.log发现有scp失败的错误。检查主备集群中节点/home/Ruby/.ssh/passphrase.file中的私钥和authorized_keys中的公钥,发现不一致。2、定位步骤及解决方案 步骤1 主集群显示容灾异常,登录实例节点,vi log/di...
- DWS文档持续提升信息体验,原理场景全解析,SQL语法精解,语法兼容更清晰,API优化+实战案例,助您高效用数。 DWS文档持续提升信息体验,原理场景全解析,SQL语法精解,语法兼容更清晰,API优化+实战案例,助您高效用数。
- 本文档是GaussDB备份恢复用户指南文档,主要描述了如何正确地使用CBR对GaussDB数据库进行数据备份与数据恢复的方法。 本文档是GaussDB备份恢复用户指南文档,主要描述了如何正确地使用CBR对GaussDB数据库进行数据备份与数据恢复的方法。
- 1. 常用元信息 2. 查看视图reloptions --推荐turbo+opt格式,刷新性能最优 3. 查看分区映射关系 4. 查看刷新耗时 5. 提取拓扑关系 --可视化分析拓扑关系 6. 在线删除物化视图 7. 使用不稳定函数 --如何强制使用to_date等不稳定函数 8. 配置级联刷新 --级联刷新节省资源,数据新鲜度一致 9. 级联修改定义 --辅助级联修改 1. 常用元信息 2. 查看视图reloptions --推荐turbo+opt格式,刷新性能最优 3. 查看分区映射关系 4. 查看刷新耗时 5. 提取拓扑关系 --可视化分析拓扑关系 6. 在线删除物化视图 7. 使用不稳定函数 --如何强制使用to_date等不稳定函数 8. 配置级联刷新 --级联刷新节省资源,数据新鲜度一致 9. 级联修改定义 --辅助级联修改
- [HCS]数仓集群因裸金属系统盘非MBR格式导致集群下发失败问题定位过程 [HCS]数仓集群因裸金属系统盘非MBR格式导致集群下发失败问题定位过程
- CPU限额未限制住CPU排查处理办法 CPU限额未限制住CPU排查处理办法
- mmap_sem锁产生的问题分析及优化 mmap_sem锁产生的问题分析及优化
- DWS roach备份调用顺序:FI管控面-> GaussRoach.py(备份场景使用)/SyncDataToStby.py(容灾场景使用) -> gs_roach DWS roach备份调用顺序:FI管控面-> GaussRoach.py(备份场景使用)/SyncDataToStby.py(容灾场景使用) -> gs_roach
- 带你一步步完成从功能开通到发布使用的全流程,轻松掌握Agent 创建技巧;描述华为云Stack基于eBPF技术的无侵入可观测实践;深入剖析华为云WAF(Web应用防火墙)防御机制,结合实战场景,揭示如何构筑动态、智能的主动防御工事... 带你一步步完成从功能开通到发布使用的全流程,轻松掌握Agent 创建技巧;描述华为云Stack基于eBPF技术的无侵入可观测实践;深入剖析华为云WAF(Web应用防火墙)防御机制,结合实战场景,揭示如何构筑动态、智能的主动防御工事...
上滑加载中
推荐直播
-
华为云码道 × 仓颉编程:工程化AI编码探索2026/05/27 周三 19:00-21:00
刘俊杰-华为云仓颉语言专家/李炎-华为云码道技术专家/王智鹏-OpenCangjie开源社区发起人
本场直播围绕华为云仓颉语言与华为云码道的深度结合,展示华为云智能编程从零基础到高效落地的完整生态能力。以华为云码道为引擎,仓颉语言为载体,带给大家日常提效、趣味创新到极速量产的开发体验。
回顾中
热门标签