- GaussDB的分布式架构充分运用了每个节点的计算资源,且随着节点规模的扩大其整体性能也呈线性增长。为了实现分布式架构下性能和资源的最大化利用,GaussDB提供了三种分布式执行计划,分别为FQS(Fast Query Shipping)计划、Stream计划以及Remote-Query计划,其中FQS和Stream是可以下推的计划,也就是说,集群中的所有DN都参与了SQL执行。显然这两种执... GaussDB的分布式架构充分运用了每个节点的计算资源,且随着节点规模的扩大其整体性能也呈线性增长。为了实现分布式架构下性能和资源的最大化利用,GaussDB提供了三种分布式执行计划,分别为FQS(Fast Query Shipping)计划、Stream计划以及Remote-Query计划,其中FQS和Stream是可以下推的计划,也就是说,集群中的所有DN都参与了SQL执行。显然这两种执...
- 存储过程/函数中使用select into语句将查询结果赋值给某个变量时,如果查询没有记录,则会发生报错:query returned no rows when process INTO。如果将存储过程/函数中的语句单独运行,则不会报错。这是因为在函数中返回结果为null时,无法通过select into语句进行变量赋值,而单独运行变量则会自动创建为一张表,类似于create table a... 存储过程/函数中使用select into语句将查询结果赋值给某个变量时,如果查询没有记录,则会发生报错:query returned no rows when process INTO。如果将存储过程/函数中的语句单独运行,则不会报错。这是因为在函数中返回结果为null时,无法通过select into语句进行变量赋值,而单独运行变量则会自动创建为一张表,类似于create table a...
- 本文将分享我对华为云GaussDB(DWS)云原生数仓的体验。首先,我将介绍我使用GaussDB(DWS)的背景和需求,然后重点谈论我在实际使用中的感受,包括性能、功能和易用性等方面的评价和体验。最后,我将总结我的体验并提出一些建议。 本文将分享我对华为云GaussDB(DWS)云原生数仓的体验。首先,我将介绍我使用GaussDB(DWS)的背景和需求,然后重点谈论我在实际使用中的感受,包括性能、功能和易用性等方面的评价和体验。最后,我将总结我的体验并提出一些建议。
- 本文将结合我的工作经验和实验体验,分享我对华为云GaussDB(DWS)云原生数仓的使用感受。首先,我将介绍我在工作中使用GaussDB(DWS)的背景和需求,然后重点谈论我对其性能、功能和易用性的感受,最后探讨我对GaussDB(DWS)的未来发展的期待和建议。 本文将结合我的工作经验和实验体验,分享我对华为云GaussDB(DWS)云原生数仓的使用感受。首先,我将介绍我在工作中使用GaussDB(DWS)的背景和需求,然后重点谈论我对其性能、功能和易用性的感受,最后探讨我对GaussDB(DWS)的未来发展的期待和建议。
- 本文将介绍华为云GaussDB(DWS)云原生数仓的技术理解。首先,我们将简要介绍数仓的概念和背景,然后重点讨论GaussDB(DWS)的云原生特性、架构和功能,最后探讨其在大数据处理和分析方面的优势和应用场景。 本文将介绍华为云GaussDB(DWS)云原生数仓的技术理解。首先,我们将简要介绍数仓的概念和背景,然后重点讨论GaussDB(DWS)的云原生特性、架构和功能,最后探讨其在大数据处理和分析方面的优势和应用场景。
- 一、用户级别的DFX视图 gs_user_monitor 查询该视图会显示所有自建用户的作业执行信息、资源使用情况(CPU、内存、网络、磁盘等)。 1.1 视图使用规格只可查询自建用户的作业执行信息和资源使用情况,不显示初始用户;该视图仅支持在CN上查询;集群版本8.2.1.1及以上版本可直接使用该视图; 1.2 视图字段介绍名称类型描述usenamename用户名称... 一、用户级别的DFX视图 gs_user_monitor 查询该视图会显示所有自建用户的作业执行信息、资源使用情况(CPU、内存、网络、磁盘等)。 1.1 视图使用规格只可查询自建用户的作业执行信息和资源使用情况,不显示初始用户;该视图仅支持在CN上查询;集群版本8.2.1.1及以上版本可直接使用该视图; 1.2 视图字段介绍名称类型描述usenamename用户名称...
- 在GaussDB(DWS)数据库中,支持的字符编码有GBK、UTF8、Latin1和SQL_ASCII,其中Latin1和SQL_ASCII属于单字节编码,可以存储任何编码规则字符。GBK是中文字符集,使用2个字节编码一个中文字符,而在UTF8中一般使用3个字节编码一个中文字符。对于fixed格式的数据文件,如果里面包含中文,当字符编码从GBK转为UTF8时,字符存储长度增加,会导致根据长... 在GaussDB(DWS)数据库中,支持的字符编码有GBK、UTF8、Latin1和SQL_ASCII,其中Latin1和SQL_ASCII属于单字节编码,可以存储任何编码规则字符。GBK是中文字符集,使用2个字节编码一个中文字符,而在UTF8中一般使用3个字节编码一个中文字符。对于fixed格式的数据文件,如果里面包含中文,当字符编码从GBK转为UTF8时,字符存储长度增加,会导致根据长...
- 使用场景:本案例适合满足以下条件的场景关联条件使用OR连接关联条件中使用同一列做数据筛选1. 原始语句SELECT t2.PARTNER_CHANNEL_CODE AS CHANNEL_ID ,t1.COUNTRY_CODE ,t1.BRAND ,t2.CHANNEL_ID AS CHANNEL_ID2FROM t1LEFT JOIN t2ON ( t2.CHANN... 使用场景:本案例适合满足以下条件的场景关联条件使用OR连接关联条件中使用同一列做数据筛选1. 原始语句SELECT t2.PARTNER_CHANNEL_CODE AS CHANNEL_ID ,t1.COUNTRY_CODE ,t1.BRAND ,t2.CHANNEL_ID AS CHANNEL_ID2FROM t1LEFT JOIN t2ON ( t2.CHANN...
- 前言:测试过程中,我们会遇到这样一种情况,我的作业都执行很久了,为啥还不结束,是不是作业hang掉了? 或者说,明明看到CN上的作业都没了,为什么通过全局视图发现DN上还有作业在执行而没有退出,这是不是有问题啊?那么就带着这样的疑问点来阅读本篇分析问题的方式方法,给初学者一点定位思路。【通信系统视图】pgxc_comm_send_stream :展示所有DN上的通信库发送流状态。pgxc_c... 前言:测试过程中,我们会遇到这样一种情况,我的作业都执行很久了,为啥还不结束,是不是作业hang掉了? 或者说,明明看到CN上的作业都没了,为什么通过全局视图发现DN上还有作业在执行而没有退出,这是不是有问题啊?那么就带着这样的疑问点来阅读本篇分析问题的方式方法,给初学者一点定位思路。【通信系统视图】pgxc_comm_send_stream :展示所有DN上的通信库发送流状态。pgxc_c...
- 本文通过介绍数据仓库的起源和演进,以及未来展望,总结了数据仓库的前世今生。文章定义了数据仓库的概念和特点,包括面向主题、集成、相对稳定和反映历史变化。同时讨论了数据仓库的技术架构和逻辑分层架构。文章强调了丰富的数据引发更多的思考,包括海量和多样化数据的融合分析和开发、融合、云化、实时、全场景分析等趋势。最后,介绍了华为云的数据仓库产品GaussDB(DWS),包括产品发展、产品愿景和产品服务。 本文通过介绍数据仓库的起源和演进,以及未来展望,总结了数据仓库的前世今生。文章定义了数据仓库的概念和特点,包括面向主题、集成、相对稳定和反映历史变化。同时讨论了数据仓库的技术架构和逻辑分层架构。文章强调了丰富的数据引发更多的思考,包括海量和多样化数据的融合分析和开发、融合、云化、实时、全场景分析等趋势。最后,介绍了华为云的数据仓库产品GaussDB(DWS),包括产品发展、产品愿景和产品服务。
- 混合负载场景下,怎样避免“烂”语句对数据库系统的冲击?如何在资源紧张的情况下,让高优先级的作业先行?本期《数仓过载不用愁,资源管理帮分忧》的主题直播中,我们邀请到华为云EI DTSE技术布道师周孟韬,针对GaussDB(DWS)资源管理机制与开发者和伙伴朋友们展开交流互动。通过5部分内容帮助开发者快速了解GaussDB(DWS) 资源管理机制,让数仓过载烦恼不再,把“烂”SQL牢牢关进笼子里... 混合负载场景下,怎样避免“烂”语句对数据库系统的冲击?如何在资源紧张的情况下,让高优先级的作业先行?本期《数仓过载不用愁,资源管理帮分忧》的主题直播中,我们邀请到华为云EI DTSE技术布道师周孟韬,针对GaussDB(DWS)资源管理机制与开发者和伙伴朋友们展开交流互动。通过5部分内容帮助开发者快速了解GaussDB(DWS) 资源管理机制,让数仓过载烦恼不再,把“烂”SQL牢牢关进笼子里...
- 宽表加工性能优化 宽表加工性能优化
- 一、概述引言:嘿,你好!欢迎来到这个有关使用GaussDB(DWS)构建实时数据仓库的最佳实践的指南。如果你正在寻找一种同时满足严谨性和幽默感的方式来了解这个话题,那么你来对地方了!我们将以一种轻松幽默的口吻,一起探索如何将GaussDB(DWS)发挥到极致,构建一个让你的数据仓库在峡谷中轻盈自如的实时解决方案。数据仓库基础知识:在我们深入GaussDB(DWS)的魅力之前,让我们先简要了... 一、概述引言:嘿,你好!欢迎来到这个有关使用GaussDB(DWS)构建实时数据仓库的最佳实践的指南。如果你正在寻找一种同时满足严谨性和幽默感的方式来了解这个话题,那么你来对地方了!我们将以一种轻松幽默的口吻,一起探索如何将GaussDB(DWS)发挥到极致,构建一个让你的数据仓库在峡谷中轻盈自如的实时解决方案。数据仓库基础知识:在我们深入GaussDB(DWS)的魅力之前,让我们先简要了...
- 主动预防-OSCore配置,原因是现网出现core问题,使用数据库自带的bbox core dump时可能出现dump时间过长被CM杀掉无法core出来问题,此时我们需要配置OS Core保证core可以稳定dump出来。 主动预防-OSCore配置,原因是现网出现core问题,使用数据库自带的bbox core dump时可能出现dump时间过长被CM杀掉无法core出来问题,此时我们需要配置OS Core保证core可以稳定dump出来。
- DWS是一个分布式架构的MPP集群,物理部署上涉及数百数千台主机和对应的磁盘,以及这些主机所在的大规模分布式高速组网环境。在逻辑上,MPPDB包括CM、GTM、CN、DN各种实例组件的配合工作。因此DWS的故障场景较多,不过我们提供了针对各种故障场景的系统性修复方案。通过此文可以了解DWS服务面临的故障场景和对应的修复方案。 DWS是一个分布式架构的MPP集群,物理部署上涉及数百数千台主机和对应的磁盘,以及这些主机所在的大规模分布式高速组网环境。在逻辑上,MPPDB包括CM、GTM、CN、DN各种实例组件的配合工作。因此DWS的故障场景较多,不过我们提供了针对各种故障场景的系统性修复方案。通过此文可以了解DWS服务面临的故障场景和对应的修复方案。
上滑加载中
推荐直播
-
DeepSeek行业运用方案
2025/02/25 周二 16:30-17:30
阿肯-华为云生态技术讲师
本期课程将带您揭秘DeepSeek在多行业的创新方案,手把手演示如何通过ModelArts在华为云上构建方案。
回顾中 -
华为云 x DeepSeek:AI驱动云上应用创新
2025/02/26 周三 16:00-18:00
华为云 AI专家大咖团
在 AI 技术飞速发展之际,DeepSeek 备受关注。它凭借哪些技术与理念脱颖而出?华为云与 DeepSeek 合作,将如何重塑产品与应用模式,助力企业数字化转型?在华为开发者空间,怎样高效部署 DeepSeek,搭建专属服务器?基于华为云平台,又该如何挖掘 DeepSeek 潜力,实现智能化升级?本期直播围绕DeepSeek在云上的应用案例,与DTSE布道师们一起探讨如何利用AI 驱动云上应用创新。
去报名
热门标签