-
【功能模块】【操作步骤&问题现象】从文档里拷贝出来执行,有时这样,有时又不能重现,是什么原因呢?报错信息看了看,也是百思不得姐【截图信息】【日志信息】(可选,上传日志内容或者附件)
-
请假大神们一个问题,现在项目面临的问题是在gaussdb中大概2000多张表,如何将这些表的数据同步到hive中去。请教了一下华为的客服,推荐用loader组件,可是这个组件对于这种大批量的数据迁移来说实在是太麻烦了,有没有大神有过这方面的经验,烦请告知!先谢谢了
-
【功能模块】【操作步骤&问题现象】延时多久监控数据能刷新出来?【截图信息】【日志信息】(可选,上传日志内容或者附件)
-
【功能模块】【操作步骤&问题现象】找了一下帮助没有找到相关信息就是执行一条SQL后除了展示执行结果,还展示该执行花费了多长时间【截图信息】【日志信息】(可选,上传日志内容或者附件)
-
行级访问控制,可以使用户进行表中部分行进行sql操作限制,sql语句包括select、update,delete操作,从而增加数仓的安全性。测试过程:--创建用户alice, bob, peterCREATE user alice PASSWORD 'Gauss@123';CREATE user bob PASSWORD 'Gauss@123';CREATE user peter PASSWORD 'Gauss@123'; --创建表public.all_data,包含不同用户数据信息CREATE TABLE public.all_data(id int, role varchar(100), data varchar(100)); --向数据表插入数据INSERT INTO all_data VALUES(1, 'alice', 'alice data');INSERT INTO all_data VALUES(2, 'bob', 'bob data');INSERT INTO all_data VALUES(3, 'peter', 'peter data'); --将表all_data的读取权限赋予alice,bob和peter用户GRANT SELECT ON all_data TO alice, bob, peter; --打开行访问控制策略开关ALTER TABLE all_data ENABLE ROW LEVEL SECURITY;--开启新session使用alice用户查询表public.all_data--创建行访问控制策略,当前用户只能查看用户自身的数据CREATE ROW LEVEL SECURITY POLICY all_data_rls ON all_data USING(role = CURRENT_USER);--再使用alice用户查询表public.all_data总结:行级访问策略增加了数仓的安全性,表结构中需带有用于区分用用户的字段。疑问:请问列存表是否也有此功能(个人理解列存实现此功能有一定难度,代价可能比较大),我自己测试过程中并未发生报错,但访问功能未实现,是按照以上操作有问题吗?或者列存没有此功能,如果没有的话应该再创建控制策略时报错。
-
工作负载管理的功能为针对数仓中用户进行资源、规则等限制。测试过程:首先进入资源管理界面,开启工作负载开关并添加工作负载队列,选定资源限制和并发限制。创建完成后关联数据库中用户,在关联用户处可以选择添加或删除用户,个人测试了一下,创建Sysadmin权限的用户无法进行关联。创建完成后也可以对各项参数进行修改:DWS工作负载管理操作避免了使用者去服务器进行cgroup设置,再进行关联,使资源管理操作更加简便、易懂。疑问:1在资源池设置中,未发现选择动态资源池或者静态资源池选项,请问DWS有此项功能吗?2之前直播课程中介绍负载队列优先级限制功能与读写IO限制暂时无法使用,请问现在功能是否已经实现,同时也希望尽快将此类功能加入到工作负载队列管理界面中。
-
DWS免费试用教程 0%DWS免费试用指南1.pdf (2.18 M) 本教程用于已经获得DWS免费试用资格的用户,本教程从以下5个方面介绍数据仓库试用流程:一、提交DWS免费试用订单二、一键开通数据仓库服务三、购买并绑定EIP四、下载客户端并连接集群五、清理资源详细操作步骤如下:... 15一、提交DWS免费试用订单注册华为云账号步骤 1 登录华为云网站https://www.huaweicloud.com/ 步骤 2 在页面右上角单击“注册”。步骤 3 进入注册页面,根据提示信息完成注册。步骤 4 完成注册后登录,将鼠标移动到右上方的用户名称,并在下拉列表中选择“账号中心”。步骤 5 在“基本信息”页面单击“认证信息”后的“实名认证”。步骤 6 进入实名认证页面,根据提示信息完成实名认证。 ----结束提交活动免费体验订单 步骤 1 获得免费试用资格的用户联系DWS小助手获取免费试用链接; 步骤 2 点击链接,立即购买,提交活动体验订单(已获得免费试用资格用户显示价格为0元)。可进入 费用>我的订单 ,查看体验订单详情。 ----结束 二、 一键开通数据仓库服务开通完免费试用,就可以免费购买并使用数据仓库服务。(一)首先登陆华为云,登录您的账号。华为云链接https://console.huaweicloud.com/console/?region=cn-north-4#/home(二)访问优惠链接:https://console.huaweicloud.com/dws/?region=cn-north-4&activityID=P210824012636773071QUBG05G0ILQ&pkgID=PPP21082401263673201ISMYF0WYQY0H#/dws/promotion您一定看一下:购买数据仓库服务促销套餐后不会自动创建数据仓库集群,您需前往数据仓库服务页面自行创建集群。购买的数据仓库服务促销套餐到期后,集群仍会保留并按标准的按需费率计费。访问优惠链接进入如下页面:购买数量:1(购买数量是1个才是正常),之后点击“立即购买”。点击“去支付”。点击订单号,确认订单是否正确。订单详情如下:确认名称以及订单金额。点击“确认付款”。显示订单支付成功页面如下,点击 “返回数据仓库服务控制台” ,跳转至数据仓库服务控制台。登录 数据仓库服务管理控制台,并单击右上角的“购买数据仓库集群”。(三)在购买页面填写相关参数:区域:数据仓库基础设施所在的区域,请选择 “华北-北京四”。可用区:可用区1---------------------------------------------------------------------------------------------------集群类型:标准数仓节点规格:dwsk.xlarge 注意:只有和订单里的规格一致才是免费的!节点数量:3 注意:本次活动,3各节点免费使用一个月,超出的会收费!包年包月节点数量:如果已经获得免费体验资格,则会显示包年包月节点数量,如果提示未购买,则需要重新获取数据仓库体验资格。否则,会自动按需进行计费。可以在立即购买的时候检查参考价格。---------------------------------------------------------------------------------------------------集群名称:输入管理员用户:输入管理员密码:输入确认密码:输入数据库端口:默认 ----------------------------------------------虚拟私有云:选择1个(有默认选项选择默认)。注:如果没有可选项,单击选择框后面的“查看虚拟私有云”链接,进入到vpc页面创建(创建页面内全部采用默认值即可),创建完成后回到本页面,单击刷新,然后再选择。 1)点击“查看虚拟私有云” 2)点击“创建虚拟私有云” 3)所有选项默认即可,点击“立即创建”子网:选择1个(有默认选项选择默认)安全组参数:自动创建安全组公网访问:暂不使用。(四)配置完成后,单击“立即购买”进入配置确认页面,确认价格是否是0元,无误后点击“提交”。点击“返回集群列表”数据仓库集群正在创建中:等待30分钟左右。说明: 点击立即购买的时候,请检查参考价格,如果已经获取DWS体验资格, 则参考价格会是0。否则会按需进行计费。当前活动创建的集群,免费体验时间只有一个月,请在活动结束之后立即删除集群,否则集群到期,会自动转为按需计费,会自动从账户上扣费! 请等待数分钟,安装页面提示安装成功,查看服务及组织状态变为“正常”后,表示数据仓库服务部署完成。部署成功示例图: ---结束三、 购买并绑定EIP购买并绑定EIP步骤1:创建EIP(即弹性公网IP)在 数据仓库服务 页面,左上角选择“华北-北京四”:进入控制台,点击集群名称。点击绑定弹性IP点击“创建弹性IP”。点击“购买弹性公网IP”。请按照下面的设置购买EIP服务(24小时的费用约2元)。 计费模式:按需计费 区域:华北-北京四 线路:静态BGP, 公网带宽:按宽带计费 带宽大小:1Mbit/s 带宽名称:自定义输出 购买数量:1 企业项目(和创建dws集群是企业项目需要一样), 最后点击“立即购买”。 点击“提交”。步骤2:在DWS的服务详情中,在“公网IP”处,单击“绑定公网IP”。点击刷新,弹性公网IP就会出现,确定即可。 ----结束 四、 下载客户端并连接集群 DWS支持Data Studio和gsql两种后台连接方式,本次试用建议使用Windows平台下的Data Studio客户端来连接。(华为内部员工体验,公网IP连接Data Studio需要使用外网连接,自己安全PC访问不通。)下载客户端并连接集群 具体步骤:https://support.huaweicloud.com/qs-dws/index.html 中的“Step4 下载客户端并连接集群”。 五、 清理资源 免费试用时长为领取免费试用之日起30天内,试用期结束后,集群如果未删除会自行续费,用户可在试用期到期之前自行删除集群清理资源。 该步骤非常必要,如果不及时清理,后续可能会产生费用,请务必关注。 具体步骤:https://support.huaweicloud.com/qs-dws/index.html 中的“Step9 清理资源”。 【注意】本活动最终解释权归华为云数仓GaussDB(DWS)所有。 15
-
【问题描述】当前遇到的问题如下: 首先,创建分区表:CREATE TABLE data."test_table"("column1" varchar DEFAULT NULL ,"partition" int8DEFAULT NULL ) DISTRIBUTE BY HASH("partition") PARTITION by RANGE("partition") (PARTITION "20210429" start('20210429')END('20210430'));由于业务需求,需要按天创建分区但因为数据不连续,可能隔天或者隔几天才有数据,例如上表,如果4月30日没有数据,5月1日又有数据,这时候数据产生的创建分区语句如下:ALTER TABLE data."test_table" ADDPARTITION "20210501" start('20210501') END('20210502') 就会报以下错误:----------------------------------------[2021-04-29 16:17:41.888 CST] : [ERROR] 执行失败错误代码:[0]SQL错误码: =42P16ERROR: Start value of partition"20210501" is not equal to upper boundary of last partition.------------------------------------------------------------又或者用户导入历史数据,数据产生的创建分区语句如下:ALTER TABLE data."test_table" ADDPARTITION "20200501" start('20200501') END('20200502') 同样会报以下错误:---------------------------------------[2021-04-29 16:20:58.828 CST] : [ERROR] 执行失败错误代码:[0]SQL错误码: =42P16ERROR: Start value of partition"20200501" is not equal to upper boundary of last partition.---------------------------------------------------------------【求助】gaussDB可以支持这种离散型的分区创建么?
-
4月25日,在华为开发者大会(Cloud)上,华为云发布了云原生数据库GaussDB,主打政企核心业务负载的金融级分布式数据库。企业上云的核心是数据库上云,随着业务和数据规模几何级增长,数据流量洪峰不断,业务“始终在线”,无中断的需求,核心数据库上云大势不可逆转。华为云GaussDB,是企业核心数据上云的信赖之选,在性能、可用性、弹性方面全面提升,并且已经受金融业务全场景的严苛考验。 华为云CTO张宇昕表示:“数据库是承载企业核心交易业务与数据处理的核心基石,云原生数据库需要承载核心业务的高性能,并具备弹性扩展快速发放、高可用、数据安全等能力。华为已经持续战略投入GaussDB数据库10多年,GaussDB是结合云原生与AI的技术倾力打造的数据库,涵盖了关系型与非关系型的全场景业务。GaussDB这款产品是主打政企核心业务负载的金融级分布式数据库旗舰产品,具备出色的混合负载高性能、金融级高可用等商用能力。云原生数据库GaussDB加速创新 性能卓越:GaussDB在交易事务处理方面,通过Numa-Aware技术大幅度降低单节点内CPU跨核的内存访问时延,同时结合分布式GTM-Lite的分布式强一致与轻量化事务快照,将单节点和分布式性能提升了5倍。在复杂查询性能方面,主要通过分布式全并行架构提供极致的吞吐量性能。首先通过MPP节点并行,把执行计划动态均匀分布到所有节点;其次利用SMP算子级并行,将单节点内的多个CPU核心做并行计算;最后通过指令级并行,实现1个指令同时操作多条数据,进而大幅度降低查询时延。在银行实际业务测试中,无论是交易事务处理性能,还是复杂查询性能,都大幅度领先于其他厂商。金融级高可用:GaussDB为金融政企客户提供同城AZ内高可用、跨AZ高可用、异地跨Region的两地三中心容灾等多种高可用方案,满足金融级监管要求。GaussDB通过独有的Switch Turbo技术保障同城AZ内单点故障10秒内切换,保障业务的可靠性和可用性。弹性扩展:GaussDB具备在线弹性扩展能力,支持1000+超大分布式集群的能力。单集群分片扩展支持数据自动在线完成重分布操作,支持PB级海量事务型存储扩展能力,可以轻松应对海量高并发数据处理和复杂查询场景的考验。数据安全可靠:传统云数据库只能实现数据的传输与存储态加密,GaussDB作为业界首款纯软全密态数据库,提供丰富的数据库安全能力,可实现数据从传输、计算到存储的全程加密,从用户认证、角色管理、对象访问控制、动态脱敏、统一审计、全密态等多维度来守护系统和数据安全,解决数据库云上隐私泄露及第三方信任问题。 AI-Native自治,管理智能高效:GaussDB将AI技术融入分布式数据库的全生命周期,可以实现数据库智能调优、索引推荐、自诊断、自运维等能力,协助DBA降低运维难度,大幅提升管理效率。其中在参数自调优中,当前已经覆盖了500+重点参数,通过深度强化学习与全局调优算法,结合不同业务负载模型进行针对性调优,相比DBA人工根据经验调优,性能提升30%的同时,耗费时间从天缩短到分钟级。在智能索引推荐中,通过启发式推荐算法,实现了语句级和负载级智能索引推荐,将效率从小时级提升到秒级,并在benchmark测试中实测性能提升了约40倍。 华为云GaussDB经历金融严苛考验,共建开放共赢生态GaussDB广泛适用于金融政企核心交易、企业生产系统、互联网金融、ERP/CRM、办公/OA等业务场景。GaussDB通过和工商银行长期联创,已经实现了覆盖银行A类(核心交易系统)到D类(办公、门户系统)全场景业务的上线考验,稳定服务于上亿客户。在过去的两年,华为云GaussDB数据库面向70所高校,200家ISV,发展了10万开发者。此外,通过开源openGauss单机版本,鼓励更多开发者加入openGauss社区共同繁荣开源生态。在未来3年,华为云GaussDB将和国内超过100所高校合作开设数据库课程。华为云首先提出云原生2.0,让每个企业都成为“新云原生企业”,华为云云原生数据库GaussDB将持续注入更领先的技术,为企业数字化转型提供无限可能。
-
查看文档有如下的说明:而我创建的数据库超过上限的128个,且无任何提示创建数据库的个数超过限制。若超过了128个会带来怎样的影响?
-
DWS免费试用活动说明:https://bbs.huaweicloud.com/forum/forum.php?mod=viewthread&tid=122035&page=1&extra=#pid1061064DWS免费试用教程:见附件
Select*fromMacchiato
发表于2021-05-07 17:21:26
2021-05-07 17:21:26
最后回复
匿名用户群体
2021-05-11 19:02:01
1416 1 -
# 一、前言 在数据仓库平台建设过程中,数据的加载、卸载,各层数据模型之间的数据流转,业务规则的实现等等数据加工过程都会以ETL任务的方式实现。 构建ETL子系统是数据仓库系统实施的一个非常重要的环节,在仓库平台建设过程中搭建一个完整、标准的ETL子系统是数据仓库平台建设的基础性目标之一。 ETL是Extraction(数据抽取),Transform(数据转换)和Loading(数据加载)这三个数据处理动作的缩写,也是早期数据仓库建设的数据流转处理顺序,因此形成的专用术语沿用至今。但是随着作为数据仓库核心的数据库引擎技术的不断发展,ETL模式也在不断发展和改变,逐渐形成了E-L-T,E-T-L-T等不同形式。对于GaussDB DWS为代表的MPPDB数据仓库平台,则多以ELT或是ETLT模式为主来构建ETL子系统。 # ETL子系统逻辑参考架构 ETL子系统的建设目的是将企业中的分散、零乱、标准不统一的异构数据源的业务数据整合到一起,进行必要的清洗和转换,形成高质量的统一的数据模型,或者是便于用户查询,分析和探索的维度模型。  图1 数据仓库子系统参考架构 2.1 数据抽取(Extraction) 数据抽取是从数据仓库的上游系统(通常是核心系统,业务系统或外部系统)进行全量或增量数据抓取的过程。而随着企业内部信息底层架构的完善和数据平台功能的划分,不同平台通常采用松耦合的方式进行关联。传统中下游系统直接到上游系统进行数据抽取的这种方式并不符合当前技术的发展趋势。一方面,下游系统直接到上游系统进行数据抽取操作牵涉到权限的开放管理,增加了上游系统的数据安全风险。另一方面,本身数据抽取操作也应当在业务系统自身正常业务完成后的时间窗口进行,以避免数据抽取时对正常作业流程的资源竞争。因此数据抽取这个环节的操作,通常是上下游系统进行接口协商,由上游系统按照接口规范进行数据卸载操作。或者对于更成熟的企业,会构建统一的数据交换平台来完成企业内部统一的数据抽取/卸载工作。 对于数据仓库平台来说,数据抽取的工作更多的是形成统一的接口规范。 2.2 数据转换(Transform) 广义上的数据转换包括数据清洗,数据关联加工,数据标准化处理,数据汇总聚合等操作。大部分基于业务规则和数据模型的数据转换操作在MPPDB数据库内实现比在数据库外的ETL服务器上进行实现效率更高。而这种转换操作在数据库内通过SQL实现T过程,也比通过ETL工具实现T过程更具有标准化和开放性,适合业务人员参与T过程的开发,校验。 2.3 数据加载(Loading) 对于数据仓库而言,不仅仅是数据加载,还包括数据卸载,也就是Loading和Unloading过程。典型的场景就是在数据到达的高峰期进行大量的文件加载入库的操作。而库内数据加工完成后,及时地进行数据卸载操作,形成接口文件推送给下游系统。所以高效地批量数据加载和卸载操作是数据仓库ETL系统要面对的主要挑战之一。而随着客户对实时数据仓库的需求越来越普遍,数据库和消息队列,数据流组件之间的实时数据加载和卸载的技术则是当前ETL系统构建时面临的又一个技术挑战。 # 三、ETL子系统的两种实现架构 依托GaussDB(DWS)数据库构建ETL系统一般有两种实现方式:重ETL Server方案和MPPDB方案。如下图  图2 两种架构示意图 3.1 重ETL Server方案 这种方案借助专业化的ETL软件:Informatica, DataStage, Kettle等软件,采用分布式的/基于共享存储的ETL服务器集群方式部署ETL软件。在执行ETL任务的时候,数据从MPPDB读取出来,数据处理过程在ETL服务器完成,处理完结果再推送到数据库服务器,其中有些操作可以通过SQL Push down在数据库内完成。 这种方案的特点在于整个ETL开发和部署过程图形化操作和脚本化操作方式结合,基于工具过程的开发也可以对ETL过程进行基于元数据的血缘分析,影响性分析;作业自动化编排,调度方面ETL工具的功能弱于专业的调度软件。 基于ETL工具方案对于ETL开发过程来说需要专业的开发人员,要对ETL工具本身有很深入的了解,从这方面来说,过于专业化的工具门槛不利于企业内部的业务专家和分析人员介入ETL开发过程。而ETL方面对于软硬件的投入成本也是需要纳入考量的一个问题。 3.2 MPPDB方案 本方案中ETL服务器轻量化,生产环境一般提供主备服务器避免单点故障即可。主要特点如下: - 利用MPPDB并行处理引擎,海量数据ETL处理效率更高。 - ETL过程SQL模板化,快速开发和迭代的过程代价低; - 汇总层和集市层的ETL处理逻辑一般和业务规则强相关,SQL标准对于业务人员开发门槛低 - 与第三方ETL服务器解耦,通过工具封装,可以避免过度依赖某一个ETL工具; - 需要对ETL脚本模板进行定制化封装式开发,为运维,优化,数据治理等过程提供底层数据 3.3简单对比 重ETL Server方案适合基于文件的数据清洗类ETL工作:对于字符集的转换处理;按照接口规范对接口数据的预处理(判断文件大小,记录行数等文件信息和属性方面的数据质量检查);文件的分组,拆分,压缩,解压缩等;以及延伸出去的文件监控和传输功能。 MPPDB方案实际上就是基于SQL的实现方案,适合数据规范化处理:如业务编码转换,业务逻辑主键生成,符合业务规范的数据转换处理;数据转换处理:汇总,聚合,过滤,关联,拆分,转换等。 # 四、GaussDB(DWS)ETL系统实现要点 对于GaussDB(DWS)而言,大多数场合下推荐采用MPPDB方案。实现这种方案实际上要实现ETL SQL模板的封装,把ETL开发过程与外部ETL调度系统的结合进行分层处理。通过模板方式实现与调度软件,和操作系统的接口封装,把SQL实现业务的模块封装在GSQL工具中,开放给业务人员和开发人员,令其聚焦在业务实现本身,而不用在意外部环境对于ETL过程操作的影响。 4.1 基于MPPDB的ETL环境逻辑视图  图3 逻辑视图 ETL调度 数据仓库平台的ETL作业系统是一种后台非交互方式运行的批量数据处理系统。ETL作业调度是将数据仓库系统中运行的各种后台作业自动化,并监视和控制作业的运行。使用调度软件实现作业调度。作业可以分布在多个服务器平台上,能够设定作业定义、依赖关系、顺序关系、工作组关系等,方便地对作业进行自动调度、运行和管理。 调度监管平台可以图形方式动态监视和控制作业的运行,对作业执行中出现的错误/警告提供详细的信息。 ETL脚本封装 GSQL是执行SQL的工具,但是与调度软件之间的结合还有一定的功能缺失,如参数解析,日志解析,异常处理等,所以需要对GSQL进行必要的封装,提高和调度软件之间的契合度。 gsql模板 对加工处理的etl过程进行抽象,总结,形成算法模板。 指定必要的输入参数,设定会话启动的公共参数,为后续的优化和跟踪埋点打桩。 调用形式 调度工具->Python或其他脚本工具模板->GSQL->{.gsql} 4.2 GSQL封装  图4 GSQL封装示意图 增加封装的必要性: GSQL和调度软件解耦:调度软件都具备调用Python/Perl/Shell脚本的能力,通过脚本封装,把GSQL和调度软件解耦,降低GSQL和调度软件的适配兼容性风险; 封装模板需要考量的功能点: - 调度命令到GSQL运行命令的转换: 调度命令相对简单,和业务逻辑相关:如业务子系统代码,算法模板代码,数据日期等; GSQL的运行参数不需要或不应当暴露在调度系统接口下:如登录密码,verbose参数等级等与业务无关的或者为了便于运维,性能跟踪的额外参数; - 登录密码加密解密: GSQL登录密码不允许明文存储,需要密文方式保存在ETL服务器上,执行时候也需要避免出现在后台命令行中被ps指令查看到; - 异常处理: GSQL脚本运行出错后的异常处理功能:如重跑,告警通知等; - 运行日志解析: GSQL的运行日志解析:针对GSQL脚本中不同语句,不同事务的执行时间解析跟踪,错误,告警代码的解析跟踪,为性能分析提供最详细的底层数据; 五、小结 本文对数据仓库构建ETL子系统进行了初步介绍,说明了当前较为主流的两种ETL子系统实现架构,比对MPPDB数据库的ETL架构进行了对比说明。最后对GaussDB(DWS)下的ETL子系统的实现要点进行了梳理,重点对etl实现的逻辑视图以及GSQL封装的功能要点进行了阐述。在今后的篇章,作者会对gsql的具体封装实现的最佳实践做个更为详细的介绍。
-
GaussDB(DWS)第一期免费试用活动集群购买、配置、试用流程 一、0元购买DWS集群首先根据‘GaussDB(DWS)小助手’发放的地址进入页面并确认0元购买DWS免费试用活动,确认后页面如下,并记录节点规格及节点数量。之后可以点击页面上方的费用中心,进入页面后左侧选择订单管理-我的订单,确认是否已生效。 二、配置DWS集群进入DWS控制台https://console.huaweicloud.com/dws/进行集群创建,点击右上方红色的‘购买数据仓库集群’。根据活动发放的节点规格及节点数量进行配置(一定要确认无误,不然会收费)。集群名称、管理员密码、端口、高级配置等信息可自由修改。公网访问需要购买,根据情况进行选择,我这里不测加载导出性能,所以选择购买最低的1M/s。修改完信息确认无误后点击立即购买。等待集群创建过程中会有进度提示,全部完成后集群状态为可用。点击集群名称,进入集群基本信息页面,查看集群公网IP并记录。三、使用DWS集群进入DWS连接管理页面查看下载客户端https://console.huaweicloud.com/dws/?region=cn-north-4#/dws/management/connectManagement首先以gsql客户端为例,点击下载并解压后,source gsql_env.sh脚本,然后直接连DWS集群进行操作。也可以使用data studio连接DWS集群,具体步骤为首先安装配置JDK,下载解压data studio,双击Data Studio.exe启动,点击左上角文件-新建连接,数据库类型选择HUAWEI CLOUD DWS输入IP等信息后点击确定,就可以操作DWS集群了。
-
4月25日,在华为开发者大会(Cloud)上,华为云发布了云原生数据库GaussDB(for openGauss),主打政企核心业务负载的金融级分布式数据库。企业上云的核心是数据库上云,随着业务和数据规模几何级增长,数据流量洪峰不断,业务“始终在线”,无中断的需求,核心数据库上云大势不可逆转。华为云GaussDB(for openGauss),是企业核心数据上云的信赖之选,在性能、可用性、弹性方面全面提升,并且已经受金融业务全场景的严苛考验。华为云CTO张宇昕表示:“数据库是承载企业核心交易业务与数据处理的核心基石,云原生数据库需要承载核心业务的高性能,并具备弹性扩展快速发放、高可用、数据安全等能力。华为已经持续战略投入GaussDB数据库10多年,GaussDB是结合云原生与AI的技术倾力打造的数据库,涵盖了关系型与非关系型的全场景业务。GaussDB(for openGauss)这款产品是主打政企核心业务负载的金融级分布式数据库旗舰产品,具备出色的混合负载高性能、金融级高可用等商用能力。”华为云CTO张宇昕介绍云原生数据库GaussDB(for openGauss)云原生数据库GaussDB(for openGauss)加速创新性能卓越:GaussDB(for openGauss)在交易事务处理方面,通过Numa-Aware技术大幅度降低单节点内CPU跨核的内存访问时延,同时结合分布式GTM-Lite的分布式强一致与轻量化事务快照,将单节点和分布式性能提升了5倍。在复杂查询性能方面,主要通过分布式全并行架构提供极致的吞吐量性能。首先通过MPP节点并行,把执行计划动态均匀分布到所有节点;其次利用SMP算子级并行,将单节点内的多个CPU核心做并行计算;最后通过指令级并行,实现1个指令同时操作多条数据,进而大幅度降低查询时延。在银行实际业务测试中,无论是交易事务处理性能,还是复杂查询性能,都大幅度领先于其他厂商。金融级高可用:GaussDB(for openGauss)为金融政企客户提供同城AZ内高可用、跨AZ高可用、异地跨Region的两地三中心容灾等多种高可用方案,满足金融级监管要求。GaussDB(for openGauss)通过独有的Switch Turbo技术保障同城AZ内单点故障10秒内切换,保障业务的可靠性和可用性。弹性扩展:GaussDB(for openGauss)具备在线弹性扩展能力,支持1000+超大分布式集群的能力。单集群分片扩展支持数据自动在线完成重分布操作,支持PB级海量事务型存储扩展能力,可以轻松应对海量高并发数据处理和复杂查询场景的考验。数据安全可靠:传统云数据库只能实现数据的传输与存储态加密,GaussDB(for openGauss)作为业界首款纯软全密态数据库,提供丰富的数据库安全能力,可实现数据从传输、计算到存储的全程加密,从用户认证、角色管理、对象访问控制、动态脱敏、统一审计、全密态等多维度来守护系统和数据安全,解决数据库云上隐私泄露及第三方信任问题。AI-Native自治,管理智能高效:GaussDB(for openGauss)将AI技术融入分布式数据库的全生命周期,可以实现数据库智能调优、索引推荐、自诊断、自运维等能力,协助DBA降低运维难度,大幅提升管理效率。其中在参数自调优中,当前已经覆盖了500+重点参数,通过深度强化学习与全局调优算法,结合不同业务负载模型进行针对性调优,相比DBA人工根据经验调优,性能提升30%的同时,耗费时间从天缩短到分钟级。在智能索引推荐中,通过启发式推荐算法,实现了语句级和负载级智能索引推荐,将效率从小时级提升到秒级,并在benchmark测试中实测性能提升了约40倍。华为云GaussDB经历金融严苛考验,共建开放共赢生态GaussDB(for openGauss)广泛适用于金融政企核心交易、企业生产系统、互联网金融、ERP/CRM、办公/OA等业务场景。GaussDB(for openGauss)通过和工商银行长期联创,已经实现了覆盖银行A类(核心交易系统)到D类(办公、门户系统)全场景业务的上线考验,稳定服务于上亿客户。在过去的两年,华为云GaussDB数据库面向70所高校,200家ISV,发展了10万开发者。此外,通过开源openGauss单机版本,鼓励更多开发者加入openGauss社区共同繁荣开源生态。在未来3年,华为云GaussDB将和国内超过100所高校合作开设数据库课程。华为云首先提出云原生2.0,让每个企业都成为“新云原生企业”,华为云云原生数据库GaussDB(for openGauss)将持续注入更领先的技术,为企业数字化转型提供无限可能。
-
请问gaussdb dws支持哪些平台?
推荐直播
-
华为云码道-玩转OpenClaw,在线养虾2026/03/11 周三 19:00-21:00
刘昱,华为云高级工程师/谈心,华为云技术专家/李海仑,上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈,华为云码道最新推出 Skill ——开发者只需输入一句口令,即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道,玩转OpenClaw
回顾中 -
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力,华为云开发者生态运营总监/姚圣伟,华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发,看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw,让小艺成为你的AI助理。
回顾中 -
Skill 构建 × 智能创作:基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟,华为云软件研发工程师/万邵业(万少),华为云HCDE开发者专家
本次直播带来两大实战:华为云码道 Skill-Creator 手把手搭建专属知识库 Skill;如何用码道提效 OpenClaw 小说文本,打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路,一次讲透!
回顾中
热门标签