-
前言本文主要内容分两块内容,1. 高可用的演进路线 2. 简单介绍各个内核组件的高可用方案GaussDB for DWS 的内核侧组件为DN, CN, GTM,内核侧组件是通过集群管理组件CM server、CM agent 来进行管理的。内核组件和集群管理组件共同组成了GaussDB for DWS 集群。组件的逻辑关系如下图:演进路线GaussDB For DWS 源于Gauss 200, 经过若干版本的演进,形成当前高可用能力,从最初pgxc组件间没有任何高可用能力,到现在完整的高可用能力。后续高可用的能力还是围绕单点故障快速恢复,业务不中断进行构筑。内核高可用DN 高可用DN 的高可用是基于主备从的架构进行构筑,详细的原理请参见之前技术博文,本文不展开描述。GaussDB for DWS 高可用之数据复制GaussDB for DWS 高可用之主备从HA技术GaussDB for DWS 高可用之备机重建DN 高可用后续会增加 switchover/failover/catchup原理及的介绍。CN 高可用 在 DWS 集群中通常会部署多个CN,每个CN都可读写。如果一个CN故障,那么客户端可以使用其它CN。由于CN只存储元信息数据(即每张用户表数据分布在哪几个DN),因此只有DDL操作时才涉及到CN存储数据,DML时CN并不需要写数据。CN 的数据同步 在DDL操作时,接收业务的CN会把该SQL发送到所有其他CN与所有DN,通过两阶段提交来保证各个CN的数据一致性。这里也有一个场景:即当一个CN故障时,那么集群便无法操作DDL,此时CM已经提供了CN的自动剔除和加回功能,可以方便的处理CN的故障。 CN 重建方式 CN 的修复是通过使用一个正常的CN重建故障CN, 具体技术是用CN build 的方式使用其它CN重建出CN, 这个也是充分利用CN间互为多写互为备机的机制。在较老版本中使用gs_dump工具来实现 CN 的重建。CN 的状态转换 CN的状态分为 4 种如下图:Normal: 是正常提供服务,Starting: 实例启动过程,Down: 停止,Deleted: 被剔除状态。 在集群中CN的操作都是由CM agent来完成的,基本上不需要人工介入。GTM 高可用 在DWS集群中,GTM的作用是产生全局唯一的事务号及sequence id, 在DWS集群中GTM主备两个实例,主GTM提供服务和给备GTM同步信息,备GTM负责在主GTM故障时,升主继续提供服务。主备GTM的数据都需要在本地落盘,其中主GTM在达到阈值后写本地数据并同时保证在备GTM中也落盘,这样保证备GTM升主后不会分配重复的数据。GTM 数据同步 主 GTM 在xid、sequence 达到阈值时刷新本地和备GTM的数据,在上一次阈值是写入数据后的第一次分配的xid、sequence 的xid的基础上 + 一个值(20w) 作为一个阈值,在 xid、sequnce分配到这个点时,触发写本地和同步备GTM,此时备GTM接收到消息后创建一个服务线程,并将事务xid写入本地文件,回复消息,主机的一次同步便完成。GTM在内存中xid每加20w时会向备机同步一次。如果GTM主机永久故障,GTM备机升主后,只需要重新初始化一个GTM实例出来然后和主机同步xid即可。 GTM 状态转换GTM 的角色与 DN 类似,也是有primary, standby, pending 三种,并且通过外部命令switchover/failover/notify进行角色间的转换。当然这种转换是由cm层自动完成,基本上不需要人工介入
-
问题现象: console界面扩容在23%失败问题版本: HCSO DWS 8.1.1.100问题分析:1.登录dwscontroller rms数据库,具体参考: cid:link_0 查询任务进程,获取失败的jobIdSelect task.* from taskmgr_task as task left outer join taskmgr_job as job on job.job_id = task.job_id where job.request like '%{clusterName}%' order by job_id, task_index asc;2.根据jobID 查看日志,具体参考:cid:link_1grep {jobId} ossres-dws.log|grep -i error 获取到错误信息,可以看到有“only support prePaid”,BMS.00423.让bms同事协助排查结论: 排查到是bms组合api的参数相较于测试验证前有变动,仅支持包周期,不支持按需恢复后已经可以拉起问题根因: 是bms组合api的参数,仅支持包周期,不支持按需解决方法: BMS侧协助修复参数设置,修复后重试扩容
-
问题现象: 扩容节点操作提交后,界面弹出“操作不合法”问题分析:1.F12 Preview发现 DWS.00042.查看后台数据 dwscontroller服务的rms 登录方法参考:cid:link_0select id,name,status,enableMountPortCrossTenant is null fromrds_cluster where status='200' and status='200';3.查到对应的enableMountPortCrossTenant 判断为0,可见该值默认值部位null问题根因: 在进行升级时,默认值参数设置导致默认值不合法解决方法:修改参数值:update rds_cluster set enableMountPortCrossTenant=null where id='xxxx'
-
DWS的多实例在主机故障时,会发生failover,但对于主备机这种分布式架构,必然会有数据同步的时延,这种时延就会产生如下主备机日志分叉的问题(可以参考该贴日志分叉部分https://bbs.huaweicloud.com/forum/thread-60315-1-1.html):对于支持UNDO的数据库来说,可以通过UNDO日志将原主机分叉的部分回退到分叉前的一条wal日志,然后接上新主继续从不分叉的地方开始做wal日志同步,但是对于PG这类不支持UNDO的系统来说,这部分数据需要通过特殊的方式来处理,这种操作叫做增量重建(思路类似于社区的pg_rewind,但略有不同)。增量重建的基本的原理如下:分为以下几类数据:part1、从分叉点开始,原主机自己生成的wal日志对应的数据,这部分通过反解wal日志,记录下wal对应的数据页,并从新主机同步part2、原主机的数据文件和新主机的数据文件的列表做差异化比较 ,“拉齐”和新主机的数据以上数据部分同步后,相当于将原主对齐到新主机的一个时间点,并将原主机wal日志重新拉回到同一条wal日志线上。最后关键的一步,就是原主机作为备角色启动后,需要继续追赶在重建过程中的delta数据(整个重建过程中,新主机仍然在做业务),确保最终的一致性。再来解答一下之前有个同学咨询的关于拉齐的原则,这里实际是按照物理文件来处理的,处理的方式是基于size,对于size不一样的文件,会做不同的处理,一般原则如下:(以local作为本地要做build的节点,而remote代表要从远端同步数据的节点为例)1)对于local_file_size < remote_file_size时,说明对应的表有新增的数据,此时需要将local_file做copy_tail的动作2)对于local_file_size > remote_file_size时,由于有mvcc的机制,说明远端的表可能做过vacuum,因此对于tuple的位置均发生的变化,此时,需要先将本地的文件全部truncate掉,然后从远端copy完整文件到本地3)对于从分叉点解析的本地做过modify的页,则单独标记出来,按照页copy的方式,从remote侧进行页copy。
-
1 前言 数据库中高可用普遍使用的是Log Shipping方式,即将WAL日志采用streaming方式传输给备实例,备实例通过重放该日志得到主实例的数据。对于行存储方式使用Log Shipping方式效率较高,但是对于列式存储,通常都是批量导入,如果同样将数据记录到日志中,会使数据写两遍IO,难以发挥列存储优势,因此通常采用数据复制方式(即数据从主实例的内存中直接通过网络传输给备实例,然后备实例写盘)更为合理。在行存的批量导入中,使用数据复制不仅可以提升传输效率(直接从内存中读取数据,无需通过磁盘读取日志),还可提升备实例恢复效率(直接从内存中恢复,无需将日志先写盘,再读取恢复)。GaussDB for DWS的复制方式采用日志和数据混合方式,对于行存单条insert/update/delete,然后使用日志复制方式,对于行存批量导入(copy/insert into select from)默认采用数据复制方式;对于列存默认采用数据复制方式。下面主要介绍下GaussDB for DWS中数据复制的主要设计。2 数据复制总体设计 在GaussDB for DWS中,数据复制默认打开,分别在行存批量导入和列存导入时使用。整体设计如下图所示: 在数据导入过程中,每个业务线程Backend将收到的数据组成一个block(列存为一个CU)放到Datasend线程的数据队列(DataSenderQueue)里,Datasend线程将数据队列数据发送给Datareceive线程,Datareceive线程将接收的数据写入到数据队列(DataWriterQueue)中,Datarcvwrite线程从数据队列(DataWriterQueue)中取出数据按block分别写入到磁盘,实现主备复制高可用。 2.1 Dataqueue设计Dataqueue是一块共享内存,用于实现DataSenderQueue和DataWriterQueue,其算法核心是循环使用共享内存,如下图所示: 首先tail1,head2,tail2初始化为0,每个变量为两个uint32位,第一个uint32 queueid表示数据队列使用了第几次,第二个uint32 queue offset表示当前数据队列的offset。数据导入后,首先tail2向后递增,各个导入通过锁控制实现并发,Datasend发送数据后将head2向后移动,当tail2到达末尾时,新导入数据将移动tail1指针,当tail1与head2接近时,表明没有缓存空间了,因此需要等待Datasend发送数据后将head2向后移动腾出空间。整体算法是一个循环利用实例制,数据的offset是一个单调递增的过程,类似WAL日志的LSN。2.2.2 同步提交设计在GaussDB for DWS中,数据冗余使用的是同步提交,即数据写完两份后事务提交。WAL日志中通过比较LSN非常简单的实现了同步提交。类似WAL日志,数据复制由于Dataqueue中offset也是有序递增的,因此也很容易实现同步提交。其过程是Datarcvwrite将数据单元写入磁盘后,刷新写盘offset,Datareceive线程通过心跳信息将写盘offset发送给Datasend,各业务线程在事务提交前check本次导入最后一段数据备实例端已经写盘后即可提交。2.2.3 BCM与Catchup设计由于GaussDB for DWS设计之初考虑到RAID5数据冗余存储,因此上层只存储两副本,由于分布式环境下各个数据节点采用异步提交时可能会导致全局数据不一致,因此各个数据节点必须使用同步提交。那么系统中如果坏了一个任何一个数据节点的主实例或者备实例系统便不可进行写事务操作。然而在大型分布式系统中这是往往不能接受的,必须要支持单节点故障。GaussDB for DWS使用了缓存接收数据(从备)来实现同步提交下的单节点故障。那么就是备实例挂了后,数据将发往从备,等备实例修复后,备实例可以从主实例同步数据,如何区分哪些数据未同步便显得尤为重要。这里使用BCM(bit change map)文件来实现哪些block需要在追赶时发送给备实例,哪些不用发送。具体设计如下:当数据导入时,每个block对应BCM页面中两个bit(第一个bit用于标记是否同步,第二个保留),放入发送队列后将BCM页面中两个bit第一个标记为未同步,当数据已经写入到备实例端后,将对应block的BCM页面bit标记为已经同步。当备实例挂掉时,数据发送给从备后,BCM页面对应bit将不再清理未同步标记,任然为未同步。当备实例起来后,连接主实例,主实例启动catchup线程先获取从备上增量数据列表,然后扫描本地所有未同步数据发送给备实例,实现主备同步。2.2.4 数据复制与日志复制并发控制数据复制和日志复制是并发运行的,当数据复制正在写入数据时,日志复制无法恢复删除表与truncate表等操作,两者通过锁控制。同样当数据复制时要写入的database与表空间还未恢复时,同样需要等待日志复制恢复完成,这里通过循环检测等待实现。3 数据复制相比日志复制 当IO负载较高时,批量导入场景数据复制的性能优于日志复制30%左右,因此在大数据量入库时,使用数据复制性能更佳。然而对于行存来说触发数据复制时每次会获取新页面,因此对于insert into t1 values v1,v2,v3这种值较少的场景下会导致大量的空页面,不适用于数据复制,可以手动关闭数据复制开关。
-
【功能模块】【操作步骤&问题现象】1、通过Perl脚本连接到DWS,通过DBI->fetchrow()返回数据,查询的字段字符串如果长度超81,就会返回空值,在data studio中查询返回是正常的【截图信息】【日志信息】(可选,上传日志内容或者附件)
-
【问题现象】serviceOM 偶现界面不刷新,接口报404/400【问题版本】803,810【问题分析】1、检查serviceOM配置管理,查看是否有isHCS配置项,是否配置为true;【问题根因】配置项缺失isHCS,导致后台接口跳转访问异常;【恢复方案】配置 isHCS配置项,值为true,确定,然后刷新界面;
-
部分监控面板没有信息【适用版本】HCS 8.0.3, DWS 8.1.1.2 (管控面430版本,租户面630版本)【问题现象】DWS集群监控面板部分显示监控信息:即 数据仓库服务-》集群列表-》操作-》监控面板进入某个集群的监控页面,其中集群概览,监控-》主机监控,设置-》监控设置 中网络监控,数据库监控,查询监控实例监控,负载监控,诊断 这些监控页面没有信息,其他监控有信息。【分析过程】1、登录dms库,确认dms_meta_cluster,dms_meta_host是否有信息select * from dms_meta_cluster;select * from dms_meta_host where cluster_id = 'xxx';2、登录CDK Master,登录dms-monitor容器查看日志 #kubectl get pod -n dws #kubectl -ti exec dms-monitoring-xxxxxx -n dws bash #vi logs/dms-monitoring.log日志中出现“relation ‘DMS_NTC_HARDWARE_HOST_DISKIO_VIEW’ does not exist”信息,或集群id‘xxxxxx’不存在3、F12-》network-》Headers-》Response url查看job的接口信息https://silvan_float_ip/v1/apigw/extension/api-fusion/apis租户面630版本用的是v2接口,430版本管控面没有v2接口,那么就是管控面与租户面版本存在兼容问题【解决方案】 参考《华为云Stack 8.0.3 数据仓库服务(DWS)租户面升级指导书(8.1.0.101&8.1.1.1--8.1.1.2) 01》在DMK中修改APIGateway进行规避步骤 1 使用apigw用户登录DMK。apigwk密码可以从《华为云Stack 8.0.x 账户一览表》中A类(Portal)中查询。步骤 2 增加一条API得映射记录,选择【部署向导】-【第三方组件】【APIG-Tool】,选择部署操作【注册Api】,点击“下一步”,修改配置文件,增加一条记录,并点击执行。 /v2.0/{projectId}/clusters/{clusterId}/dms/collection/metric,v2.0,HTTPS,POST,DWS,{dms-collection-dns},{dms-collection-lb},30,test,/v1.0/{projectId}/clusters/{clusterId}/dms/collection/metric,HTTPS,,false备注:dms-collection-dns表示dms-collection在ApiG中绑定得域名dms-collection-lb表示dms-collection微服务的LB地址,二者和/v1.0/{projectId}/clusters/{clusterId}/dms/collection/meta/instance保持一致即可。例:
-
【DWS】【错误信息】部分监控面板没有信息【适用版本】HCS 8.0.3, DWS 8.1.1.2 (管控面430版本,租户面630版本)【问题现象】DWS集群监控面板部分显示监控信息:即 数据仓库服务-》集群列表-》操作-》监控面板进入某个集群的监控页面,其中集群概览,监控-》主机监控,设置-》监控设置 中网络监控,数据库监控,查询监控实例监控,负载监控,诊断 这些监控页面没有信息,其他监控有信息。【分析过程】1、登录dms库,确认dms_meta_cluster,dms_meta_host是否有信息select * from dms_meta_cluster;select * from dms_meta_host where cluster_id = 'xxx';2、登录CDK Master,登录dms-monitor容器查看日志 #kubectl get pod -n dws #kubectl -ti exec dms-monitoring-xxxxxx -n dws bash #vi logs/dms-monitoring.log日志中出现“relation ‘DMS_NTC_HARDWARE_HOST_DISKIO_VIEW’ does not exist”信息3、F12-》network-》Headers-》Response url查看job的接口信息https://silvan_float_ip/v1/apigw/extension/api-fusion/apis租户面630版本用的是v2接口,430版本管控面没有v2接口,那么就是管控面与租户面版本存在兼容问题【解决方案】 参考《华为云Stack 8.0.3 数据仓库服务(DWS)租户面升级指导书(8.1.0.101&8.1.1.1--8.1.1.2) 01》在DMK中修改APIGateway进行规避步骤 1 使用apigw用户登录DMK。apigwk密码可以从《华为云Stack 8.0.x 账户一览表》中A类(Portal)中查询。步骤 2 增加一条API得映射记录,选择【部署向导】-【第三方组件】【APIG-Tool】,选择部署操作【注册Api】,点击“下一步”,修改配置文件,增加一条记录,并点击执行。 /v2.0/{projectId}/clusters/{clusterId}/dms/collection/metric,v2.0,HTTPS,POST,DWS,{ddms-collection-dns},{dms-collection-lb},30,test,/v1.0/{projectId}/clusters/{clusterId}/dms/collection/metric,HTTPS,,false备注:dms-collection-dns表示dms-collection在ApiG中绑定得域名dms-collection-lb表示dms-collection微服务的LB地址,二者和/v1.0/{projectId}/clusters/{clusterId}/dms/collection/meta/instance保持一致即可。例:
-
维护宝典汇总贴1:https://bbs.huaweicloud.com/forum/thread-85548-1-1.html维护宝典汇总贴2:https://bbs.huaweicloud.com/forum/thread-98530-1-1.html维护宝典汇总贴3:https://bbs.huaweicloud.com/forum/thread-178341-1-1.htmlSupport上维护宝典链接:https://support.huawei.com/enterprise/zh/doc/EDOC1100160683?idPath=22658044%7C7919788%7C9856606%7C250949677本帖为GaussDB(DWS)维护宝典汇总贴3,欢迎在评论区交流探讨~篇一:【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1,欢迎大家交流探讨(持续更新中)篇二:【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴2,欢迎大家交流探讨(持续更新中)序号主题分类标题链接272SQL如何pg_terminate_backend多条sqlhttps://bbs.huaweicloud.com/forum/thread-148364-1-1.html273SQL执行sql报错:ERROR:bufferoverflow,limitof20000https://bbs.huaweicloud.com/forum/thread-137344-1-1.html274SQL客户使用JDBC执行sql报错:ERROR:insufficientdataleftinmessagehttps://bbs.huaweicloud.com/forum/thread-119769-1-1.html275SQL报错:thespaceusedonDNhasexceededthesqlusespacelimithttps://bbs.huaweicloud.com/forum/thread-119304-1-1.html276SQL多nodegroup场景sql执行慢,查看等锁的wait-status是nonehttps://bbs.huaweicloud.com/forum/thread-123154-1-1.html277管控面【管控面升级】1859560,参数信息校验失败,措施信息:Failedtologingaussdbhttps://bbs.huaweicloud.com/forum/thread-154096-1-1.html278管控面【HCS管控面升级】ECF-Common/ECF-Cluster用户ecf登录验证失败https://bbs.huaweicloud.com/forum/thread-149808-1-1.html279管控面【DWS管控面升级】802升级803,参数信息校验失败:failedtologinmysqldbhttps://bbs.huaweicloud.com/forum/thread-141530-1-1.html280管控面【8.0.3】【Insight】【日志收集】serviceOM数仓界面收集DWS日志,报错500InternalERRORhttps://bbs.huaweicloud.com/forum/thread-146787-1-1.html281管控面【8.0.3】RdsPingInstanceManageIpTask失败,BMS实例未能正常开机https://bbs.huaweicloud.com/forum/thread-150640-1-1.html282管控面【8.0.3】DWS集群没有内网域名,查明为RdsCreatePrivateZoneTask失败。https://bbs.huaweicloud.com/forum/thread-150643-1-1.html283管控面【8.0.3】DWS安装完成后不显示创建集群按钮https://bbs.huaweicloud.com/forum/thread-150656-1-1.html284管控面DWS安装完成后页面无法显示规格https://bbs.huaweicloud.com/forum/thread-150650-1-1.html285管控面从mananger页面启动MPPDB失败,prestart报错执行kerberosUtility.py脚本报错https://bbs.huaweicloud.com/forum/thread-130127-1-1.html286管控面从mananger页面启动MPPDB失败,prestart报错cannotbindtoldapserverhttps://bbs.huaweicloud.com/forum/thread-130129-1-1.html287管控面登录管控面后台数据库dwscontrollerecfdmshttps://bbs.huaweicloud.com/forum/thread-173822-1-1.html288管控面DWS管控面服务修改参数并让参数立即生效https://bbs.huaweicloud.com/forum/thread-173819-1-1.html289集群【集群发放失败】实例创建到9x%无法创建/RdsActiveClusterTaskFAILhttps://bbs.huaweicloud.com/forum/thread-168394-1-1.html290集群【集群创建失败】64%失败/DWS.6000/RdsIntInstanceTaskFAILhttps://bbs.huaweicloud.com/forum/thread-161238-1-1.html291集群【集群创建失败】创建报错DWS.6000/在64%失败/RdsIntInstanceTask为FAILhttps://bbs.huaweicloud.com/forum/thread-158691-1-1.html292集群【集群创建失败】集群创建失败DWS.6000/进度40%失败/RdsPingInstanceManagerIpTaskhttps://bbs.huaweicloud.com/forum/thread-159358-1-1.html293集群【创建集群失败】DWS.6000/BMS.0047/进度32%https://bbs.huaweicloud.com/forum/thread-159362-1-1.html294集群【创建集群失败】进度到在50%,在RdsCreatePortTask任务FAILhttps://bbs.huaweicloud.com/forum/thread-153161-1-1.html295集群升级集群42%报错,更新系统表cannotchangereturntypeofexistingfunctiohttps://bbs.huaweicloud.com/forum/thread-148604-1-1.html296集群xx局点DWS8.0.1线下集群安装preinstall卡住https://bbs.huaweicloud.com/forum/thread-127017-1-1.html297集群XX局点安装集群时,安装日志提示超时报错https://bbs.huaweicloud.com/forum/thread-127791-1-1.html298集群DWS集群创建,BMS规格不显示https://bbs.huaweicloud.com/forum/thread-124336-1-1.html299集群oms组件iam状态exception,manager无法登录https://bbs.huaweicloud.com/forum/thread-174990-1-1.html300集群GaussDB(DWS)重建实例https://bbs.huaweicloud.com/forum/thread-165194-1-1.html301集群GaussDB(DWS)主备切换分析https://bbs.huaweicloud.com/forum/thread-156025-1-1.html302集群主机故障导致MPPDB集群降级https://bbs.huaweicloud.com/forum/thread-148606-1-1.html303集群新搭建集群,导入lisence文件失败https://bbs.huaweicloud.com/forum/thread-148600-1-1.html304集群DN长时间处于starting状态--(文件系统问题)https://bbs.huaweicloud.com/forum/thread-137897-1-1.html305集群GaussDB(DWS)单节点长时间故障应急https://bbs.huaweicloud.com/forum/thread-136663-1-1.html306集群【集群创建失败】DWS.6000/46%左右失败/RdsDownloadPackageTask失败https://bbs.huaweicloud.com/forum/thread-165795-1-1.html307集群集群更多查看监控指标不显示内容https://bbs.huaweicloud.com/forum/thread-153410-1-1.html308集群Toomanyopenfilesinsystem导致单节点故障,导致集群不可用https://bbs.huaweicloud.com/forum/thread-149144-1-1.html309集群重启集群https://bbs.huaweicloud.com/forum/thread-147701-1-1.html310集群某局点FIM页面有37031告警,CM_AGENT连接数据库失败https://bbs.huaweicloud.com/forum/thread-144626-1-1.html311集群【创建集群失败】ResTenantTask报错https://bbs.huaweicloud.com/forum/thread-160669-1-1.html312集群【8.0.3】创建DWS集群报错,资源租户VPC,后台查错误步骤为CreateResourceTenantVpcFailed,https://bbs.huaweicloud.com/forum/thread-146791-1-1.html313集群集群信息报异常DWS.0005访问资源不存在或状态异常https://bbs.huaweicloud.com/forum/thread-115811-1-1.html314集群【HC/HCS/HCSO】主备均衡https://bbs.huaweicloud.com/forum/thread-150166-1-1.html315集群【HC/HCS/HCSO】清理系统表https://bbs.huaweicloud.com/forum/thread-150164-1-1.html316集群【HC/HCS/HCSO】gs_replace修复实例https://bbs.huaweicloud.com/forum/thread-150101-1-1.html317集群重启集群https://bbs.huaweicloud.com/forum/thread-145772-1-1.html318集群主备均衡https://bbs.huaweicloud.com/forum/thread-145786-1-1.html319集群【gs_diagnose】集群故障诊断&&集群故障时间线梳理工具介绍https://bbs.huaweicloud.com/forum/thread-173152-1-1.html320变更扩容问题定位指南https://bbs.huaweicloud.com/forum/thread-116902-1-1.html321变更上传包报错,时间不同步,fcd的时间和swift时间https://bbs.huaweicloud.com/forum/thread-177763-1-1.html322变更C80SPC80x升级8.0.0.2升级集群42%报错,更新系统表失败updatacatalogfailedhttps://bbs.huaweicloud.com/forum/thread-175029-1-1.html323变更ECF-->Region:初始化Master虚拟机失败https://bbs.huaweicloud.com/forum/thread-168590-1-1.html324变更ECF-->Region:创建EI公共CDK集群安装失败https://bbs.huaweicloud.com/forum/thread-154104-1-1.html325变更老版本巡检工具speed_test残留排查方法https://bbs.huaweicloud.com/forum/thread-139009-1-1.html326变更添加主机第五步添加节点报diskmgt.service无法启动https://bbs.huaweicloud.com/forum/thread-139043-1-1.html327变更GaussDB(DWS)switchover标准步骤https://bbs.huaweicloud.com/forum/thread-140502-1-1.html328变更【8.1.1】某局点升级8.1.1在升级Manager步骤,DeployOMServer报错https://bbs.huaweicloud.com/forum/thread-145499-1-1.html329变更升级数据库报错,在【升级集群】步骤42%报错https://bbs.huaweicloud.com/forum/thread-148602-1-1.html330变更在33%RdsCreateInstance步骤失败https://bbs.huaweicloud.com/forum/thread-132763-1-1.html331变更租户面升级UpdatePreinstallTask失败https://bbs.huaweicloud.com/forum/thread-132748-1-1.html332变更报DWS.6004,BMS.0010,到30%失败,子任务执行到RdsCreateInstanceTaskhttps://bbs.huaweicloud.com/forum/thread-130122-1-1.html333变更报DWS.6000,到15%时创建失败,执行到RdsCreateResourceTenantVpcTaskhttps://bbs.huaweicloud.com/forum/thread-128955-1-1.html334变更升级数据库只读,DDL报错cannotexecutexinaread-onlytransactionhttps://bbs.huaweicloud.com/forum/thread-121738-1-1.html335变更升级停老集群阶段一个dn进程一直停不掉https://bbs.huaweicloud.com/forum/thread-121526-1-1.html336变更在升级集群前准备失败,升级日志报获取环境变量失败问题https://bbs.huaweicloud.com/forum/thread-120685-1-1.html337变更数据重分布重入时deletepgxc_redistb操作耗时长,3小时以上无法完成https://bbs.huaweicloud.com/forum/thread-116906-1-1.html338变更扩容问题定位方法解析https://bbs.huaweicloud.com/forum/thread-116903-1-1.html339变更重装主机FAQhttps://bbs.huaweicloud.com/forum/thread-116846-1-1.html340变更数据重分布报错pmk在个别dn上不存在https://bbs.huaweicloud.com/forum/thread-115557-1-1.html341变更【8.0.0.1】报错Failedtocheckusedspaceofthedatabaseusershttps://bbs.huaweicloud.com/forum/thread-115556-1-1.html342变更添加主机在初始化服务和实例失败,还原元数据报错optionfoldername存在非法字符https://bbs.huaweicloud.com/forum/thread-115555-1-1.html343标准方案更换ntp服务器https://bbs.huaweicloud.com/forum/thread-147725-1-1.html344标准方案修改iphttps://bbs.huaweicloud.com/forum/thread-145809-1-1.html345标准方案安装LVShttps://bbs.huaweicloud.com/forum/thread-145807-1-1.html346标准方案重装主机https://bbs.huaweicloud.com/forum/thread-145803-1-1.html347标准方案清理系统表https://bbs.huaweicloud.com/forum/thread-145800-1-1.html348标准方案gs_replace修复实例https://bbs.huaweicloud.com/forum/thread-145788-1-1.html349标准方案增加CNhttps://bbs.huaweicloud.com/forum/thread-145792-1-1.html350标准方案删除CNhttps://bbs.huaweicloud.com/forum/thread-145796-1-1.html351存储存储过程执行慢问题https://bbs.huaweicloud.com/forum/thread-153297-1-1.html352工具gsar网络监测工具使用及含义说明https://bbs.huaweicloud.com/forum/thread-121639-1-1.html353工具DWS监控脚本https://bbs.huaweicloud.com/forum/thread-135778-1-1.html354工具GaussDB(DWS)pg_xlogdump pagehack工具https://bbs.huaweicloud.com/forum/thread-142380-1-1.html355工具GaussDB(DWS)如何安装gdb/gstack/iotop工具https://bbs.huaweicloud.com/forum/thread-143096-1-1.html356工具GaussDB(DWS)calxid工具https://bbs.huaweicloud.com/forum/thread-147126-1-1.html357工具根据relfilenode查找Schema、表名,判断是表文件还是索引文件https://bbs.huaweicloud.com/forum/thread-173239-1-1.html358工具排查系统表索引、元组后置问题https://bbs.huaweicloud.com/forum/thread-171819-1-1.html359性能劣化DWS单点性能案例集锦https://bbs.huaweicloud.com/forum/thread-90331-1-1.html360性能劣化外表导入40G数据耗时1小时https://bbs.huaweicloud.com/forum/thread-177546-1-1.html361性能劣化常见GATHER慢问题集锦https://bbs.huaweicloud.com/forum/thread-161503-1-1.html362性能劣化DDL慢之系统表索引后置问题https://bbs.huaweicloud.com/forum/thread-161454-1-1.html363性能劣化列存小CU多导致的性能慢问题https://bbs.huaweicloud.com/forum/thread-161327-1-1.html364性能劣化GaussDB(DWS)为什么会出现普通用户比dbadmin用户执行的慢https://bbs.huaweicloud.com/forum/thread-116830-1-1.html365性能劣化GaussDB(DWS)第一次查询慢https://bbs.huaweicloud.com/forum/thread-116834-1-1.html366性能劣化批量绑定执行PBE形式语句性能分析https://bbs.huaweicloud.com/forum/thread-132681-1-1.html367性能劣化客户简单groupby查询慢,等待视图中有streamgetconnhttps://bbs.huaweicloud.com/forum/thread-136091-1-1.html368性能劣化性能问题之CN(Coordinator协调节点)hang问题汇总https://bbs.huaweicloud.com/forum/thread-136283-1-1.html369性能劣化explainperformance显示的执行时间短gsql返回的时间长https://bbs.huaweicloud.com/forum/thread-144153-1-1.html370性能劣化查询information_schema模式下的tables系统视图性能差https://bbs.huaweicloud.com/forum/thread-143470-1-1.html371性能劣化单点性能问题基础篇&实战篇&案例篇汇总https://bbs.huaweicloud.com/forum/thread-150120-1-1.html372性能劣化DWS系统级性能问题处理套路https://bbs.huaweicloud.com/forum/thread-150310-1-1.html373性能劣化未对ELK组件做操作,执行性能突然下降https://bbs.huaweicloud.com/forum/thread-146945-1-1.html374性能劣化短查询高并发导致性能下降https://bbs.huaweicloud.com/forum/thread-146934-1-1.html375性能劣化DWS性能问题之单节点IO高https://bbs.huaweicloud.com/forum/thread-152917-1-1.html376业务报错连接DWS集群报错theauthenticationtype5isnotsupportedhttps://bbs.huaweicloud.com/forum/thread-177553-1-1.html377业务报错随机DN频繁corehttps://bbs.huaweicloud.com/forum/thread-177550-1-1.html378业务报错gds报错unexpectedEOFonGDSconnection"gsfs://10.100.19.187:/500https://bbs.huaweicloud.com/forum/thread-177545-1-1.html379业务报错配置elb添加CN后,远程连接新CN执行DDL慢https://bbs.huaweicloud.com/forum/thread-177544-1-1.html380业务报错过多Savepoint导致查询慢https://bbs.huaweicloud.com/forum/thread-177388-1-1.html381业务报错表删除报错:relationdoesnotexistonDNhttps://bbs.huaweicloud.com/forum/thread-177376-1-1.html382业务报错作业报错:multipleupdatestoarowbyasinglequeryforcolumnstorhttps://bbs.huaweicloud.com/forum/thread-177250-1-1.html383业务报错DWS-10000告警https://bbs.huaweicloud.com/forum/thread-173717-1-1.html384业务报错部分监控面板没有信息https://bbs.huaweicloud.com/forum/thread-173708-1-1.html385业务报错SSH命令报错:"packet_write_wait:connectiontoport22:Brokenpipe"https://bbs.huaweicloud.com/forum/thread-169934-1-1.html386业务报错ECF-->Region:初始化Master虚拟机失败https://bbs.huaweicloud.com/forum/thread-168388-1-1.html387业务报错工作负载队列关联用户报错dnxxxx_xxxxpermspacepermspacelimithttps://bbs.huaweicloud.com/forum/thread-167044-1-1.html388业务报错工作负载队列接口异常https://bbs.huaweicloud.com/forum/thread-165343-1-1.html389业务报错集群ntp配置异常,节点时间有差异https://bbs.huaweicloud.com/forum/thread-164998-1-1.html390业务报错关于SmartRaid驱动问题导致DWS发放BMS集群失败的处理办法https://bbs.huaweicloud.com/forum/thread-162631-1-1.html391业务报错FI界面告警:gtm主备不同步或者断连https://bbs.huaweicloud.com/forum/thread-153822-1-1.html392业务报错使用mergeinto时,结果集不满足预期怎么办https://bbs.huaweicloud.com/forum/thread-153783-1-1.html393业务报错JDBC使用过程中的常见报错及处理方法https://bbs.huaweicloud.com/forum/thread-153750-1-1.html394业务报错数据库服务端编码是latin1,存入的字符格式是gbk,如何导出utf8格式的字符https://bbs.huaweicloud.com/forum/thread-153728-1-1.html395业务报错日志目录cm_agent/pg_log目录下javaudf函数打印大量日志https://bbs.huaweicloud.com/forum/thread-145332-1-1.html396业务报错GaussDB(DWS)pg_class中relpages页面估算严重不准https://bbs.huaweicloud.com/forum/thread-147133-1-1.html397业务报错【8.0.3】【DWS】【弹性EIP】解绑弹性IP报错,IP找不到,但EIP资源中该IP已处于解绑状态https://bbs.huaweicloud.com/forum/thread-147351-1-1.html398业务报错【8.0.3】【DWS】【连接实例】使用运维容器的connectTool连接实例,报错DecryptFailedhttps://bbs.huaweicloud.com/forum/thread-147084-1-1.html399业务报错copy入库失败,报错detail:1054SCTPconnectfailedhttps://bbs.huaweicloud.com/forum/thread-148605-1-1.html400业务报错update语句报错:multipleupdatestoarowbyasinglequeryforcolumhttps://bbs.huaweicloud.com/forum/thread-145415-1-1.html401业务报错spark连接dws报Theauthenticationtype5isnotsupporthttps://bbs.huaweicloud.com/forum/thread-140422-1-1.html402业务报错查询pg_rules系统表报错:unrecognizedquerycommandtype:7https://bbs.huaweicloud.com/forum/thread-141390-1-1.html403业务报错GaussDB(DWS)查询报错临时空间不足temporaryfilesizeexceedshttps://bbs.huaweicloud.com/forum/thread-140484-1-1.html404业务报错jdbc执行语句报错:preparedstatement"S_x"alreadyexistshttps://bbs.huaweicloud.com/forum/thread-132864-1-1.html405业务报错FusionInsightManager系统报错连接数据库失败,failedtoreadthedatabasehttps://bbs.huaweicloud.com/forum/thread-133442-1-1.html406业务报错内部连接场景一:pooler:Thenodedn_xx[xx]hasnoavailableslothttps://bbs.huaweicloud.com/forum/thread-125510-1-1.html407业务报错停止定时任务报错Cannotoperatethisjobduetorunningstatushttps://bbs.huaweicloud.com/forum/thread-119719-1-1.html408业务报错执行业务报错:Can'tfitxidintopagehttps://bbs.huaweicloud.com/forum/thread-116810-1-1.html409业务应急向elb监听器中增加后台云服务器组时报错ipaddressxxxisnotvalidIPforthespecihttps://bbs.huaweicloud.com/forum/thread-175760-1-1.html410业务应急通过容器登录DN失败报错:Load-Key“xxxxxxx”:Invalidformat;Mike@“ip”:Permishttps://bbs.huaweicloud.com/forum/thread-174755-1-1.html411业务应急HCS/HCSO形态DWS管控面故障案例总结https://bbs.huaweicloud.com/forum/thread-173841-1-1.html412业务应急DWSHCS场景netcardmonitor.sh脚本产生大量软终端,导致OS定期重启https://bbs.huaweicloud.com/forum/thread-173389-1-1.html413业务应急审计日志转储失败https://bbs.huaweicloud.com/forum/thread-171110-1-1.html414业务应急Dmsagent进程在长时间运行(4-5个月后)占用内存过多,导致内核无法分配内存,进程异常https://bbs.huaweicloud.com/forum/thread-168527-1-1.html415业务应急connectTool.sh连接cn节点超时port22:Connectiontimedouthttps://bbs.huaweicloud.com/forum/thread-155037-1-1.html416业务应急根目录满排查方法https://bbs.huaweicloud.com/forum/thread-154290-1-1.html417业务应急单实例重启或隔离https://bbs.huaweicloud.com/forum/thread-147713-1-1.html418业务应急单节点重启或隔离https://bbs.huaweicloud.com/forum/thread-147714-1-1.html419业务应急多个CN节点隔离https://bbs.huaweicloud.com/forum/thread-147718-1-1.html420业务应急升级数据库报错,You(omm)arenotallowedtousethisprogram(crontab)https://bbs.huaweicloud.com/forum/thread-144953-1-1.html421业务应急句柄不回收,空间不释放https://bbs.huaweicloud.com/forum/thread-145138-1-1.html422业务应急【HC/HCS/HCSO】查杀语句https://bbs.huaweicloud.com/forum/thread-150168-1-1.html423业务应急【HC/HCS/HCSO】单实例重启或隔离https://bbs.huaweicloud.com/forum/thread-150170-1-1.html424业务应急【HC/HCS/HCSO】单节点重启或隔离https://bbs.huaweicloud.com/forum/thread-150171-1-1.html425业务应急【HC/HCS/HCSO】重启集群https://bbs.huaweicloud.com/forum/thread-150174-1-1.html426业务应急【HC/HCS/HCSO】多个CN节点隔离https://bbs.huaweicloud.com/forum/thread-150172-1-1.html427业务应急如何查询残留线程https://bbs.huaweicloud.com/forum/thread-150382-1-1.html428业务应急某局点一个dn的pg_xlog一直增长https://bbs.huaweicloud.com/forum/thread-140434-1-1.html429业务应急DN线程残留导致表drop不掉的问题https://bbs.huaweicloud.com/forum/thread-143379-1-1.html430业务应急GaussDB(DWS)OMS节点上单机库的statscollector进程IO高https://bbs.huaweicloud.com/forum/thread-143389-1-1.html431应急系列【应急标准操作】【线下】查杀语句https://bbs.huaweicloud.com/forum/thread-147712-1-1.html432运维技巧【总结】GaussDB(DWS)现网运维常用命令,掌握这些就够了https://bbs.huaweicloud.com/forum/thread-140018-1-1.html【最新活动汇总】DWS活动火热进行中,互动好礼送不停(持续更新中) HOT 【推荐阅读】【博文汇总】GaussDB(DWS)博文汇总1,欢迎大家交流探讨~(持续更新中)【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1,欢迎大家交流探讨(持续更新中)【项目实践汇总】GaussDB(DWS)项目实践汇总贴,欢迎大家交流探讨(持续更新中)【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总,欢迎大家交流学习(持续更新中)【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习(持续更新中)扫码关注我哦,我在这
-
您好,请问一下: DGC平台使用的数据库是什么版本?是GaussDB(DWS)还是GaussDB V5? DGC上开发的脚本在Vastbase G100 v2.2可以运行吗? 如果不能运行有没有什么解决的办法?
-
您好,请问一下: DGC平台使用的数据库是什么版本?是GaussDB(DWS)还是GaussDB V5?
-
有没dws的交流群呢,微信或者qq都可以。还有公众号GaussDB DWS,里面有个dws小助手的微信,一直加不上。现在还有公众号还在用吗?
-
分类问题链接开发应用DataWarehouseServiceDWS管控面信息咨询https://bbs.huaweicloud.com/forum/thread-139300-1-1.htmlGaussDBA集群的license容量如果已满,对集群正常使用有哪些影响?https://bbs.huaweicloud.com/forum/thread-140004-1-1.htmlGaussDB(DWS)8.1.1集群从8.0升级到8.1.1后部分参数变化咨询https://bbs.huaweicloud.com/forum/thread-153723-1-1.html【高斯产品】【逻辑集群功能】逻辑集群之间的访问是如何的,重分布又是如何做的?https://bbs.huaweicloud.com/forum/thread-127448-1-1.htmlGaussBDA8.0.0.0GaussBD集群是否支持内存列式存储https://bbs.huaweicloud.com/forum/thread-106210-1-1.html【GaussDB逻辑集群】【功能】逻辑集群的最终目的是?https://bbs.huaweicloud.com/forum/thread-110577-1-1.htmlgaussdb8.0.0.1里面有没有对比两个表数据是否相同的函数或方法https://bbs.huaweicloud.com/forum/thread-162177-1-1.html【DWS产品】DWS查询DN上残留的会话显示业务SQL运行了7849days(21年)https://bbs.huaweicloud.com/forum/thread-142870-1-1.html【DWS产品】【限流】statement_timeout限制的语句包含idleintransaction状态的SQL?https://bbs.huaweicloud.com/forum/thread-155574-1-1.html【DWS产品】【负载管理功能】CCN是如何知道SQL是复杂作业还是简单作业?https://bbs.huaweicloud.com/forum/thread-133275-1-1.html性能调优【DWS产品】TOPSQL过程pg_catalog.pgxc_get_wlm_session_info_bytime查询慢问题https://bbs.huaweicloud.com/forum/thread-166410-1-1.htmlgaussDBrow_numberWindowAgg算子不下推,导致性能非常差,如何解决?https://bbs.huaweicloud.com/forum/thread-167610-1-1.html【DWS产品】【重分布功能】DWS集群中因Stream导致数据移动是否通过内部专用网络而非业务网?https://bbs.huaweicloud.com/forum/thread-123298-1-1.htmlcreatetableasselect语句导致数据倾斜https://bbs.huaweicloud.com/forum/thread-128394-1-1.htmlGaussDBA使用roach备份恢复性能调优,roach命令buffer-block-size应如何使用呢?https://bbs.huaweicloud.com/forum/thread-129660-1-1.html【GaussDB产品】【执行计划】关于执行计划顺序问题https://bbs.huaweicloud.com/forum/thread-112180-1-1.html【GaussDB产品】【更新功能】百万级数据与亿级别数据更新https://bbs.huaweicloud.com/forum/thread-112501-1-1.htmlTPC-DS并行执行调优https://bbs.huaweicloud.com/forum/thread-101855-1-1.html【DWS产品】【重分布功能】DWS集群中因Stream导致数据移动是否通过内部专用网络而非业务网?https://bbs.huaweicloud.com/forum/thread-123298-1-1.html运维管理GaussDBA8.0.0.1版本集群是否有方式或方法可以判断笛卡尔积sql?https://bbs.huaweicloud.com/forum/thread-140515-1-1.html【DWS产品】【GS_CLEAN功能】CN中会话已断开但DN中仍然存在的问题如何有效规避?https://bbs.huaweicloud.com/forum/thread-135481-1-1.htmlsession_timeout杀掉空闲连接调用的是哪个语句https://bbs.huaweicloud.com/forum/thread-133684-1-1.html【GaussdbA】表是支持创建离散Partitionhttps://bbs.huaweicloud.com/forum/thread-126346-1-1.html【高斯产品】【列存储功能】重分布(Redistribute)的时候内存中是行存还是列存?https://bbs.huaweicloud.com/forum/thread-127498-1-1.htmlpg_hba.conf文件怎么配置一段iphttps://bbs.huaweicloud.com/forum/thread-101332-1-1.htmlSQLmysql迁移到gaussdb语法咨询https://bbs.huaweicloud.com/forum/thread-133328-1-1.html执行sql报错https://bbs.huaweicloud.com/forum/thread-137366-1-1.html【GaussDB产品】【SQL语句兼容性】是否支持createtableasselectorderby语句https://bbs.huaweicloud.com/forum/thread-123446-1-1.htmlGaussDB(DWS)在建表中分区键varchar字段怎么实现自动分区https://bbs.huaweicloud.com/forum/thread-114963-1-1.html数据迁移工具DSC问题https://bbs.huaweicloud.com/forum/thread-101519-1-1.html【SQL优化器功能】CBO选择不同join方式的算法是什么https://bbs.huaweicloud.com/forum/thread-101633-1-1.html环境搭建求救!GaussDB200单机部署使用fusioninsightmanager搭建集群时找不到主机https://bbs.huaweicloud.com/forum/thread-130139-1-1.html【GaussDB产品】【添加CN功能】GaussDBcn实例添加逻辑https://bbs.huaweicloud.com/forum/thread-110758-1-1.html【GaussDB200产品】【LLD规划配置功能】LLD配置规划工具-集群参数配置CMS和GTM互为主备的要求问题https://bbs.huaweicloud.com/forum/thread-113220-1-1.html【GaussDB200产品】【搭建功能】集群安装最小内存、cpu、硬盘要求https://bbs.huaweicloud.com/forum/thread-113869-1-1.html其他问题【DWS产品】【TIMEZone参数】线下GuassDB和云上DWS为什么要设置不同默认timezone?https://bbs.huaweicloud.com/forum/thread-131373-1-1.html【DWS8.0.1产品】DWS的元数据怎么存放,数据存储到硬盘上怎么存放https://bbs.huaweicloud.com/forum/thread-113234-1-1.html比如限制一个用户只能看表的前十行结果,该用户select*就只能查询出十条。可以实现么https://bbs.huaweicloud.com/forum/thread-122237-1-1.html【GaussDB200产品】【负载均衡功能】GaussDB200cn节点是否支持F5做负载均衡https://bbs.huaweicloud.com/forum/thread-103819-1-1.html【GaussDB(DWS)】explainperformance下盘相关名词具体意思https://bbs.huaweicloud.com/forum/thread-107681-1-1.html【GaussDBA产品】【数据实时同步功能】Oracle数据库与GaussDB200的实时同步问题https://bbs.huaweicloud.com/forum/thread-107695-1-1.htmlGaussDB产品】【SQL语句兼容性】是否支持createtableasselectorderby语句https://bbs.huaweicloud.com/forum/thread-123446-1-1.html
-
【摘要】 数据仓库服务GaussDB(DWS)使用OBS作为集群数据与外部数据互相转化的平台,支持用户将数据从集群外导入到集群中,快速将样例数据从OBS导入集群。 本示例将加载8.9亿条交通卡口车辆通行模拟数据到数据仓库单个数据库表中,并进行车辆精确查询和车辆模糊查询,展示GaussDB(DWS)对于历史详单数据的高性能查询能力。准备工作已注册华为云账号,且在使用GaussDB(DWS) 前检查账号状态,账号不能处于欠费或冻结状态。已下载客户端并连接到集群。已预先将样例数据上传到OBS桶的“traffic-data”文件夹中,并给所有华为云用户赋予了该OBS桶的只读访问权限。导入交通卡口样例数据使用SQL客户端工具连接到集群后,就可以在SQL客户端工具中,执行以下步骤导入交通卡口车辆通行的样例数据并执行查询。执行以下语句,创建traffic数据库。create database traffic encoding 'utf8' template template0;执行以下步骤切换为连接新建的数据库。在Data Studio客户端的“对象浏览器”窗口,右键单击数据库连接名称,在弹出菜单中单击“刷新”,刷新后就可以看到新建的数据库。右键单击“traffic”数据库名称,在弹出菜单中单击“打开连接”。右键单击“traffic”数据库名称,在弹出菜单中单击“打开新的终端”,即可打开连接到指定数据库的SQL命令窗口,后面的步骤,请全部在该命令窗口中执行。执行以下语句,创建用于存储卡口车辆信息的数据库表。create schema traffic_data; set current_schema= traffic_data; drop table if exists GCJL; CREATE TABLE GCJL ( kkbh VARCHAR(20), hphm VARCHAR(20), gcsj DATE , cplx VARCHAR(8), cllx VARCHAR(8), csys VARCHAR(8) ) with (orientation = column, COMPRESSION=MIDDLE) distribute by hash(hphm);创建外表。外表用于识别和关联OBS上的源数据。<Access_Key_Id>和<Secret_Access_Key>替换为实际值,在创建访问密钥(AK和SK)中获取。create schema tpchobs; set current_schema = 'tpchobs'; drop FOREIGN table if exists GCJL_OBS; CREATE FOREIGN TABLE GCJL_OBS ( like traffic_data.GCJL ) SERVER gsmpp_server OPTIONS ( encoding 'utf8', location 'obs://dws-demo-cn-north-4/traffic-data/gcxx', format 'text', delimiter ',', access_key '<Access_Key_Id>', secret_access_key '<Secret_Access_Key>', chunksize '64', IGNORE_EXTRA_DATA 'on' );执行以下语句,将数据从外表导入到数据库表中。insert into traffic_data.GCJL select * from tpchobs.GCJL_OBS;导入数据需要一些时间,请耐心等待。车辆分析执行Analyze用于收集与数据库中普通表内容相关的统计信息,统计结果存储在系统表PG_STATISTIC中。执行计划生成器会使用这些统计数据,以生成最有效的查询执行计划。执行以下语句生成表统计信息:Analyze;查询数据表中的数据量执行如下语句,可以查看已加载的数据条数。set current_schema= traffic_data; Select count(*) from traffic_data.gcjl;车辆精确查询执行以下语句,指定车牌号码和时间段查询车辆轨迹。GaussDB(DWS) 在应对点查时秒级响应。set current_schema= traffic_data; select hphm, kkbh, gcsj from traffic_data.gcjl where hphm = '粤D12345' and gcsj between '2016-01-06' and '2016-01-07' order by gcsj desc;车辆模糊查询执行以下语句,指定车牌号码和时间段查询车辆轨迹,GaussDB(DWS) 在应对模糊查询时秒级响应。set current_schema= traffic_data; select hphm, kkbh, gcsj from traffic_data.gcjl where hphm like '%A23F%' and kkbh in('508', '1125', '2120') and gcsj between '2016-01-01' and '2016-01-07' order by hphm,gcsj desc;转自https://bbs.huaweicloud.com/blogs/195410
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签