大数据融合分析时代，GaussDB(DWS)如需访问MRS数据源，该如何实现？本期云小课带您开启MRS数据源之门，通过远程读取MRS集群Hive上的ORC数据表完成数据导入DWS。准备环境需确保MRS和DWS集群在同一个区域、可用区、同一VPC子网内，确保集群网络互通。基本流程1、创建MRS分析集群（选择Hive组件）。2、通过将本地txt数据文件上传至OBS桶，再通过OBS桶导入Hive，并由txt存储表导入ORC存储表。3、创建MRS数据源连接。4、创建外部服务器。5、创建外表。6、通过外表导入DWS本地表。创建MRS分析集群登录华为云控制台，选择“EI企业智能 > MapReduce服务”，单击“购买集群”，选择“自定义购买”，填写软件配置参数，单击“下一步”。表1 软件配置参数项取值区域华北-北京四集群名称MRS01集群版本MRS 3.0.5集群类型分析集群填写硬件配置参数，单击“下一步”。表1 硬件配置参数项取值计费模式按需计费可用区可用区2虚拟私有云vpc-01子网subnet-01安全组自动创建弹性公网IP10.x.x.x企业项目defaultMaster节点打开“集群高可用”分析Core节点3分析Task节点0填写高级配置参数，单击“立即购买”，等待约15分钟，集群创建成功。表1 高级配置参数项取值标签test01委托保持默认即可告警保持默认即可规则名称保持默认即可主题名称保持默认即可Kerberos认证默认打开用户名admin密码设置密码，例如：Huawei@12345。该密码用于登录集群管理页面。确认密码再次输入设置admin用户密码登录方式密码用户名root密码设置密码，例如：Huawei_12345。该密码用于远程登录ECS机器。确认密码再次输入设置的root用户密码通信安全授权勾选“确认授权”准备MRS的ORC表数据源本地PC新建一个product_info.txt，并拷贝以下数据，保存到本地。100,XHDK-A-1293-#fJ3,2017-09-01,A,2017 Autumn New Shirt Women,red,M,328,2017-09-04,715,good 205,KDKE-B-9947-#kL5,2017-09-01,A,2017 Autumn New Knitwear Women,pink,L,584,2017-09-05,406,very good! 300,JODL-X-1937-#pV7,2017-09-01,A,2017 autumn new T-shirt men,red,XL,1245,2017-09-03,502,Bad. 310,QQPX-R-3956-#aD8,2017-09-02,B,2017 autumn new jacket women,red,L,411,2017-09-05,436,It's really super nice 150,ABEF-C-1820-#mC6,2017-09-03,B,2017 Autumn New Jeans Women,blue,M,1223,2017-09-06,1200,The seller's packaging is exquisite 200,BCQP-E-2365-#qE4,2017-09-04,B,2017 autumn new casual pants men,black,L,997,2017-09-10,301,The clothes are of good quality. 250,EABE-D-1476-#oB1,2017-09-10,A,2017 autumn new dress women,black,S,841,2017-09-15,299,Follow the store for a long time. 108,CDXK-F-1527-#pL2,2017-09-11,A,2017 autumn new dress women,red,M,85,2017-09-14,22,It's really amazing to buy 450,MMCE-H-4728-#nP9,2017-09-11,A,2017 autumn new jacket women,white,M,114,2017-09-14,22,Open the package and the clothes have no odor 260,OCDA-G-2817-#bD3,2017-09-12,B,2017 autumn new woolen coat women,red,L,2004,2017-09-15,826,Very favorite clothes 980,ZKDS-J-5490-#cW4,2017-09-13,B,2017 Autumn New Women's Cotton Clothing,red,M,112,2017-09-16,219,The clothes are small 98,FKQB-I-2564-#dA5,2017-09-15,B,2017 autumn new shoes men,green,M,4345,2017-09-18,5473,The clothes are thick and it's better this winter. 150,DMQY-K-6579-#eS6,2017-09-21,A,2017 autumn new underwear men,yellow,37,2840,2017-09-25,5831,This price is very cost effective 200,GKLW-l-2897-#wQ7,2017-09-22,A,2017 Autumn New Jeans Men,blue,39,5879,2017-09-25,7200,The clothes are very comfortable to wear 300,HWEC-L-2531-#xP8,2017-09-23,A,2017 autumn new shoes women,brown,M,403,2017-09-26,607,good 100,IQPD-M-3214-#yQ1,2017-09-24,B,2017 Autumn New Wide Leg Pants Women,black,M,3045,2017-09-27,5021,very good. 350,LPEC-N-4572-#zX2,2017-09-25,B,2017 Autumn New Underwear Women,red,M,239,2017-09-28,407,The seller's service is very good 110,NQAB-O-3768-#sM3,2017-09-26,B,2017 autumn new underwear women,red,S,6089,2017-09-29,7021,The color is very good 210,HWNB-P-7879-#tN4,2017-09-27,B,2017 autumn new underwear women,red,L,3201,2017-09-30,4059,I like it very much and the quality is good. 230,JKHU-Q-8865-#uO5,2017-09-29,C,2017 Autumn New Clothes with Chiffon Shirt,black,M,2056,2017-10-02,3842,very good 登录OBS控制台，单击“创建桶”，填写以下参数，单击“立即创建”。表1 桶参数参数项取值区域华北-北京四数据冗余存储策略单AZ存储桶mrs-datasource存储类别标准存储桶策略私有默认加密关闭归档数据直读关闭企业项目default标签-等待桶创建好，单击桶名称，选择“对象 > 上传对象”，将product_info.txt上传至OBS桶。切换回MRS控制台，单击创建好的MRS集群名称，进入“概览”，单击“IAM用户同步”所在行的“单击同步”，等待约5分钟同步完成。回到MRS集群页面，单击“节点管理”，单击任意一台master节点，进入该节点页面，切换到“弹性公网IP”，单击“绑定弹性公网IP”，勾选已有弹性IP并单击“确定”，如果没有，请创建。记录此公网IP。确认主master节点。使用SSH工具以root用户登录以上节点，root密码为Huawei_12345，切换到omm用户。su - omm执行以下命令查询主master节点，回显信息中“HAActive”参数值为“active”的节点为主master节点。sh ${BIGDATA_HOME}/om-0.0.1/sbin/status-oms.sh使用root用户登录主master节点，切换到omm用户，并进入Hive客户端所在目录。su - ommcd /opt/client在Hive上创建存储类型为TEXTFILE的表product_info。在/opt/client路径下，导入环境变量。source bigdata_env登录Hive客户端。beeline依次执行以下SQL语句创建demo数据库及表product_info。CREATE DATABASE demo; USE demo; DROP TABLE product_info; CREATE TABLE product_info ( product_price int not null, product_id char(30) not null, product_time date , product_level char(10) , product_name varchar(200) , product_type1 varchar(20) , product_type2 char(10) , product_monthly_sales_cnt int , product_comment_time date , product_comment_num int , product_comment_content varchar(200) ) row format delimited fields terminated by ',' stored as TEXTFILE 将product_info.txt数据文件导入Hive。切回到MRS集群，单击“文件管理”，单击“导入数据”。OBS路径：选择上面创建好的OBS桶名，找到product_info.txt文件，单击“是”。HDFS路径：选择/user/hive/warehouse/demo.db/product_info/，单击“是”。单击“确定”，等待导入成功，此时product_info的表数据已导入成功。创建ORC表，并将数据导入ORC表。执行以下SQL语句创建ORC表。DROP TABLE product_info_orc; CREATE TABLE product_info_orc ( product_price int not null, product_id char(30) not null, product_time date , product_level char(10) , product_name varchar(200) , product_type1 varchar(20) , product_type2 char(10) , product_monthly_sales_cnt int , product_comment_time date , product_comment_num int , product_comment_content varchar(200) ) row format delimited fields terminated by ',' stored as orc; 将product_info表的数据插入到Hive ORC表product_info_orc中。insert into product_info_orc select * from product_info; 查询ORC表数据导入成功。select * from product_info_orc; 创建MRS数据源连接登录DWS管理控制台，单击已创建好的DWS集群，确保DWS集群与MRS在同一个区域、可用分区，并且在同一VPC子网下。切换到“MRS数据源”，单击“创建MRS数据源连接”。选择前序步骤创建名为的“MRS01”数据源，用户名：admin，密码：Huawei@12345，单击“确定”，创建成功。创建外部服务器使用Data Studio连接已创建好的DWS集群。新建一个具有创建数据库权限的用户dbuser：CREATE USER dbuser WITH CREATEDB PASSWORD "Bigdata@123"; 切换为新建的dbuser用户：SET ROLE dbuser PASSWORD "Bigdata@123"; 创建新的mydatabase数据库：CREATE DATABASE mydatabase; 执行以下步骤切换为连接新建的mydatabase数据库。在Data Studio客户端的“对象浏览器”窗口，右键单击数据库连接名称，在弹出菜单中单击“刷新”，刷新后就可以看到新建的数据库。右键单击“mydatabase”数据库名称，在弹出菜单中单击“打开连接”。右键单击“mydatabase”数据库名称，在弹出菜单中单击“打开新的终端”，即可打开连接到指定数据库的SQL命令窗口，后面的步骤，请全部在该命令窗口中执行。为dbuser用户授予创建外部服务器的权限：GRANT ALL ON FOREIGN DATA WRAPPER hdfs_fdw TO dbuser; 其中FOREIGN DATA WRAPPER的名字只能是hdfs_fdw，dbuser为创建SERVER的用户名。执行以下命令赋予用户使用外表的权限。ALTER USER dbuser USEFT; 切换回Postgres系统数据库，查询创建MRS数据源后系统自动创建的外部服务器。SELECT * FROM pg_foreign_server; 返回结果如： srvname | srvowner | srvfdw | srvtype | srvversion | srvacl | srvoptions --------------------------------------------------+----------+--------+---------+------------+--------+--------------------------------------------------------------------------------------------------------------------- gsmpp_server | 10 | 13673 | | | | gsmpp_errorinfo_server | 10 | 13678 | | | | hdfs_server_8f79ada0_d998_4026_9020_80d6de2692ca | 16476 | 13685 | | | | {"address=192.168.1.245:9820,192.168.1.218:9820",hdfscfgpath=/MRS/8f79ada0-d998-4026-9020-80d6de2692ca,type=hdfs} (3 rows) 切换到mydatabase数据库，并切换到dbuser用户。SET ROLE dbuser PASSWORD "Bigdata@123"; 创建外部服务器。SERVER名字、地址、配置路径保持与8一致即可。CREATE SERVER hdfs_server_8f79ada0_d998_4026_9020_80d6de2692ca FOREIGN DATA WRAPPER HDFS_FDW OPTIONS ( address '192.168.1.245:9820,192.168.1.218:9820', //MRS管理面的Master主备节点的内网IP，可与DWS通讯。 hdfscfgpath '/MRS/8f79ada0-d998-4026-9020-80d6de2692ca', type 'hdfs' ); 查看外部服务器。SELECT * FROM pg_foreign_server WHERE srvname='hdfs_server_8f79ada0_d998_4026_9020_80d6de2692ca'; 返回结果如下所示，表示已经创建成功： srvname | srvowner | srvfdw | srvtype | srvversion | srvacl | srvoptions --------------------------------------------------+----------+--------+---------+------------+--------+--------------------------------------------------------------------------------------------------------------------- hdfs_server_8f79ada0_d998_4026_9020_80d6de2692ca | 16476 | 13685 | | | | {"address=192.168.1.245:9820,192.168.1.218:29820",hdfscfgpath=/MRS/8f79ada0-d998-4026-9020-80d6de2692ca,type=hdfs} (1 row) 创建外表获取Hive的product_info_orc的文件路径。登录MRS管理控制台。选择“集群列表 > 现有集群”，单击要查看的集群名称，进入集群基本信息页面。单击“文件管理”，选择“HDFS文件列表”。进入您要导入到GaussDB(DWS)集群的数据的存储目录，并记录其路径。创建外表。 SERVER名字填写10创建的外部服务器名称，foldername填写1查到的路径。DROP FOREIGN TABLE IF EXISTS foreign_product_info; CREATE FOREIGN TABLE foreign_product_info ( product_price integer not null, product_id char(30) not null, product_time date , product_level char(10) , product_name varchar(200) , product_type1 varchar(20) , product_type2 char(10) , product_monthly_sales_cnt integer , product_comment_time date , product_comment_num integer , product_comment_content varchar(200) ) SERVER hdfs_server_8f79ada0_d998_4026_9020_80d6de2692ca OPTIONS ( format 'orc', encoding 'utf8', foldername '/user/hive/warehouse/demo.db/product_info_orc/' ) DISTRIBUTE BY ROUNDROBIN; 执行数据导入创建本地目标表。DROP TABLE IF EXISTS product_info; CREATE TABLE product_info ( product_price integer not null, product_id char(30) not null, product_time date , product_level char(10) , product_name varchar(200) , product_type1 varchar(20) , product_type2 char(10) , product_monthly_sales_cnt integer , product_comment_time date , product_comment_num integer , product_comment_content varchar(200) ) with ( orientation = column, compression=middle ) DISTRIBUTE BY HASH (product_id); 从外表导入目标表。INSERT INTO product_info SELECT * FROM foreign_product_info; 查询导入结果。SELECT * FROM product_info; 想了解更多GaussDB(DWS)，请猛戳

        4月25日，在华为开发者大会（Cloud）“鹏城论剑，共话数据库前沿技术和趋势”峰会上，华为云数据库总裁苏光牛邀请了中国信通院大数据与区块链副主任姜春宇、云和恩墨创始人盖国强、海量数据总裁肖枫、金蝶中国生态产品部产品总监匡唐喜、电子科技大学副教授孙明、湖北民族大学副教授向军、讯方西南培训交付中心技术总监陆克斯、青软创新科技集团副总裁丁璟、极数云舟创始人&CEO ArKDB总架构师周彦伟、MongoDB中文社区主席&Tapdata CTO唐建法、openGauss技术委员会主席及首席架构师田文罡、华为云数据库首席架构师彭立勋等在内的数据库领域重量级大咖，共同宣布了2021年第三届华为云GaussDB数据库挑战赛正式启动。 与开发者同行，共促行业新发展 苏光牛现场介绍到，数据库是典型的硬核科技，是企业核心系统的核心，系统、技术、理论、生态等元素缺一不可。华为十分重视数据库人才培养和生态建设，目前GaussDB数据库已经和74所高校建立课程合作关系，课程共覆盖了5万+学生。 开发者作为改变世界的重要一环，是企业创新和发展的源动力。华为每年组织的线下线上开发者技术交流活动有100+场，技术沙龙和培训赋能超过50场，通过技术赋能，不断提升开发者的开发能力，助其打造更具创新力、实践性的优秀产品。目前华为云数据库开发者数量累计已达10万，并在不断增加中。 创办数据库挑战赛，搭建技术交流平台 除了教育、培训，华为云数据库在2019年面向全行业首次发起华为云数据库挑战赛，旨在提供一个技术交流平台，与行业精英与数据库爱好者共同探索数据库领域的创新技术与工程实现。从2019到2021，华为云数据库挑战赛已经举办了三个年头。2019年，第一届华为云数据库挑战赛有近千人组成400多支队伍展开竞争，经过3个月激烈角逐，提交了近6000次作品。 2020年，第二届华为云数据库挑战赛在开发者和伙伴们的高涨呼声中再次启动。近3000人参与竞赛，涵括250+高校、30+行业，同比首届人数增长了2倍多。第二届特设极客组和商业组两大赛道，秉承着“开发者改变世界，商业化加速前行”的理念，极客组面向全社会开放，聚焦工程型的问题，培养数据库工程类人才；商业组面向合作伙伴开放，聚焦工具、解决方案及应用，满足数据库领域商业需求。 开放数据库生态，共创智能新未来 生态开放对数据库发展至关重要，可以说代表了数据库的未来。因为开放的生态，可以让企业的业务具备更好的连续性，更好保护客户的投资，而封闭的数据库生态是没有活力的，因此，华为十分重视生态开放。 华为云数据库一直致力于携手更多领域开发者共建一个开放、合作、共赢的产业生态，基于华为云数据库挑战赛为开发者提供一个技术交流、人才培养、机遇共创的平台，共研技术新方向，共创智能新未来。所以，华为把openGauss单机主备版本进行了开源，并鼓励广大开发者、数据库厂商深入了解和使用openGauss，也欢迎千行百业的客户使用基于openGauss的商业发行版，加速数字化转型进程。 会议最后，苏光牛邀请了众多数据库领域大咖，共同发布了第三届华为云GaussDB数据库挑战赛启动仪式。本届大赛将以GaussDB分布式数据库相关特性为重点课题，由华为资深专家团出题，面向全社会开放（包括企业、高校、创客团队、个人开发者），并非常有诚意的准备了丰厚奖品池和云资源体验券。奖品丰富，精彩多多，欢迎大家踊跃报名！大赛报名通道已开启，点击链接即可报名>> https://competition.huaweicloud.com/information/1000041405/introduction

【摘要】 本文章先描述了常用的索引，并针对B-tree和Psort两种索引具体介绍，下面给出索引的利与弊。除了索引，还介绍了分区、PCK等其他查询提速的手段。最后给出各种索引和调优手段的使用场景。    索引能干什么呢，一言以蔽之：查询加速。常见的索引有下面几种：1. 常用索引介绍1.1 B-btree索引B-tree存储结构示意如下：B-tree是平衡树，有序存储索引KEY值和TID；对于索引上的过滤条件，通过KEY快速找到对应的叶子节点，然后再通过TID找到实际记录；索引中的数据以非递减的顺序存储（页之间以及页内都是这种顺序），同级的数据页由双向链表连接；支持单列索引和复合（多列）索引，多列复合索引适用于多列组合查询，B-tree索引对于查询条件的顺序有要求；B-tree索引可以处理等值和范围查询；索引页面不存储事务信息；    在数据库里面举个例子，如何创建B-tree索引：1.2 Psort索引    Psort索引数据结构示意如下图所示：Psort索引本身是个列存表，包含索引列和tid，在索引列上局部排序，利用MIN/MAX块过滤加速TID获取；Psort索引本身有可见性，但删除、更新数据不会作用到Psort索引；Psort索引更适合做范围过滤，点查询速度较差；批量导入场景下有效，对于单条导入无效；    横向对比B-tree、Psort如下：1.3 特殊索引表达式索引    比如对于查询“select * from test1 where lower(col1) = ‘value’;”可以建立在Lower表达式之上的索引“create index on test1(lower(col1));”，后续对于类似在lower(col1)表达式上的过滤条件，就可以直接使用这个索引加速，对于其他表达式该索引不会对查询生效。但需要注意的是：索引表达式的维护代价较为昂贵，因为在每一个行**入或更新时都得为它重新计算相应的表达式。部分索引    比如创建一个部分索引“create index idx2 on test1(ip) where not (ip > ’10.185.178.100’ and ip < ’10.185.178.200’);”，使用该缩影加速的典型查询是这样“select * from test1 where ip = ’10.185.178.150’”，但是对于查询“select * from test1 where ip = ’10.185.178.50’”就不能使用该索引。部分索引用来减少索引的大小，排除掉查询不感兴趣的数据，同时可以加速索引的检索效率.唯一索引    （1）只有B-tree索引支持唯一索引；    （2）当一个索引被声明为唯一时，索引中不允许多个表行具有相同的索引值；    （3）空值被视为不相同，一个多列唯一索引将会拒绝在所有索引列上具有相同组合值的表行；    （4）对于主键列会自动创建一个唯一索引；    （5）唯一性检查会影响索引插入性能；1.4 索引的利与弊    索引的优点如下：点查询提速显著，直接定位到需要的位置，减少无效IO；多条件组合查询，过滤大量数据，缩小扫描范围；利用倒排索引加速全文检索；利用等值条件索引查询速度快的优势，结合nestloop提高多表join效率；提供主键和唯一性约束，满足业务需要；利用btree索引天然有序的特点，优化查询计划；    索引的缺点如下：索引页面占用额外空间，导致一定的磁盘膨胀；每次数据导入同时需要更新索引，影响导入性能；索引页面没有可见性，存在垃圾数据，需要定期清理；索引扫描性能并不总是比顺序扫描性能更好，一旦优化器判断有误，可能导致查询性能反向劣化；索引需要记录XLOG，增加日志量；每个索引至少一个文件，增加备份恢复、扩容等操作的代价；    鉴于索引的使用是一把双刃剑，创建索引要谨慎，只给有需要的列创建，不能过滤大量数据的条件列不要创建索引。除了索引可以优化查询效率，存储层还有没有其他优化手段呢？下面给大家再介绍几种DWS查询提速的手段。2. DWS查询提速2.1 分区    分区是最常用的提速手段之一，而且效果很好，推荐大家结合场景多多使用。目前支持的分区是range分区，分区支持merge、split、exchange等操作；在时间维度或者空间维度等具有一定数据规律的列上创建分区，分区列上的过滤条件会先做分区剪枝，减少物理扫描量；相比较索引，分区直接把原始数据物理划分，一旦分区剪枝生效，会极大的减少IO；使用分区和使用索引并不冲突，可以给分区创建索引；    使用分区的注意事项如下：分区对于导入的影响是增加内存使用（内存不足时会下盘），但不产生额外的磁盘占用；使用分区一定要注意分区列的选择和分区数量的控制，分区过多会导致小文件问题，分区数量建议最多不超过1600个；分区剪枝适合范围查询，对于点查询效率提升有限；下面举个例子，分别创建同样数据类型的分区表和非分区表，导入相同的数据640万条，用同样的查询会看到分区剪枝对性能提高了7倍多，准备数据：    分区和非分区查询耗时对比，其中test1是分区表，test2是非分区表，test1的查询scan耗时6ms，test2的查询scan耗时46ms，差距7倍还多：2.2 PCK(partial cluster key)    PCK的本质就是通过排序提升查询过滤的效率，创建表时指定PCK列，该列上的数据会局部排序，有序的数据带来更好的数据聚簇性，每个数据块的min/max等稀疏索引就能更好的发挥作用，粗过滤掉大量的数据，提升IO效率，默认情况下420万行数据局部排序。    注意事项如下：只有列存表支持PCK，局部排序对每次导入的批量数据生效，不会做全排序；PCK更适用于范围查询，点查场景下配套使用PCK和索引可以达到最佳效果；带PCK导入因为排序的原因会使用更多的内存，影响导入速度，需要权衡导入和查询性能；    举个例子，对于查询select * from tab where col > 65，如果不使用PCK，很可能一个CU都无法过滤掉，但如果使用了PCK，下图所示的5个CU就能过滤掉一半还多，提升查询性能至少50%：    再用上面分区的那组数据横向对比PCK的性能表现：    （1）列存表，非分区，无PCK，scan耗时46ms    （2）列存表，非分区，有PCK，scan耗时1.7ms    （3）列存表，有PCK，再创建btree索引，scan耗时0.1ms    PCK结合索引，可以将类似这种点查的性能提升100倍以上。2.3 智能过滤    列存表数据从文件读出来，到反馈给执行层，中间会智能识别自动多层过滤，对用户完全透明，如下图所示：3. 索引使用场景推荐【推荐阅读】【最新活动汇总】DWS活动火热进行中，互动好礼送不停（持续更新中）  HOT  【博文汇总】GaussDB(DWS)博文汇总1，欢迎大家交流探讨~（持续更新中）【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1，欢迎大家交流探讨（持续更新中）【项目实践汇总】GaussDB(DWS)项目实践汇总贴，欢迎大家交流探讨（持续更新中）【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总，欢迎大家交流学习（持续更新中）【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习（持续更新中）扫码关注我哦，我在这里↓↓↓

【问题现象】          在HCS环境中DWS服务安装完成后在创建集群页面不显示DWS规格信息，导致无法创建DWS集群。【分析过程】         参考已有案例：https://bbs.huaweicloud.com/forum/thread-93562-1-1.html         1.登录cdk检查页面，在dwscontroller中搜索enableBMSFlavor参数，确定参数值为true         2.登录serviceOM，找到对应的规格，查看自定义标签，cond:operation:az 的标签值，是否包含对应的az【解决方案】         1.若enableBMSFlavor参数值不为true，则修改为true，将IMAGE_NAME恢复默认值，升级dwscontroller，然后重启dwscontroller         重启dwscontroller是在cdk master节点root用户下找到dwscontroller容器，使用kubectl delete pod xx -n dws逐个删除dwscontroller容器，删除后会重新拉起，等拉起后，在界面重试         2.查看标签值如果没有包含对应的az，比如az.dc1(normal),多个则用逗号分开az.dc1(normal),az.dc2(normal)

数据发生倾斜后，gaussdb能够自动修复吗？

4月26日，在华为开发者大会（Cloud）上，华为云数据使能DAYU主力产品GaussDB(DWS)首席架构师解读了GaussDB(DWS)的一站式数据分析能力。随着大数据观念逐步深入，数据分析带来的价值愈发被大家重视起来。从PC时代，到互联网时代、移动互联网时代，数据应用不再是简单的分析和挖掘，而是更加智能化。典型企业分析场景主要分为实时分析处理，批量分析处理以及交互式查询处理。当前常见的解决方案用不同技术解决不同问题：使用Hana，Oracle Exadata处理实时分析场景；使用Teradata，Greenplum处理批量分析场景；使用Oracle和SQL Server等处理交互式查询场景。从单一场景来看都是不错的选择，但是站在整体数据域视角去看，这种搭积木式的方案带来诸多问题 ，例如组件多，开发方式不统一，数据格式不统一，反复转换消耗算力和存储空间；组件间的数据流转开发复杂，流转效率低；跨集群，跨组件数据一致性差等。华为云GaussDB(DWS)从两个维度构筑能力，为企业用户提供一站式分析能力：在全并行分布式架构上，无缝融合时序引擎、OLAP引擎、CEP引擎，同时支撑实时分析、批量分析和交互式查询等不同业务负载，达到开发统一、部署统一、维护统一、数据格式统一，真正做到一个产品包办的一站式分析；异构平台数据融合、协同分析，构筑全域数据一体化。当前企业IT系统不会是白纸一张，在不同阶段曾经采用不同技术建设的多套系统承载着不同的业务，这些系统还未完成历史使命，将延续使用相当长一段时间。华为云GaussDB(DWS)支持多样性的数据融合分析能力，无缝融合并协同分析企业现有平台数据，让老IT系统产生的数据焕发新价值。一、T+0实时分析业务场景中实时数据源种类繁多，针对不同数据源采用不同实时处理技术。时序引擎支持时序数据分析，内置100多种时序分析算法，将时序数据接入后实时合并；流引擎接入基于Kafka/Flink等流组件产生的流式数据，支持对流数据自定义持续计算。二、全并行批量分析基于Share-nothing分布式架构，华为云Gauss DB(DWS)天然具备大规模的分布式并行处理能力。多层级并行技术将系统性能推至极致，包括节点间并行、节点内SMP并行，CPU指令级并行以及动态编译技术。同时，通过自研TCP多流、多线程包合并、通信代理等技术，将scale-out能力推至极致，华为云GaussDB(DWS)也是目前唯一通过信通院2048节点大集群权威认证的分布式数据库产品。三、多场景交互式查询对短查询做了全流程梳理，从接入、SQL解析、计划发送、执行和数据扫描进行了一系列优化；由于Ad-hoc查询的负载具有不可预见性，经常可能会出现单一查询拖慢甚至拖垮整个集群的情况，华为云GaussDB(DWS)内置动态智能负载管理组件，实时监控运行状态和资源消耗，对异常作业自动预警并智能干预，例如内存占用过高，运行时间过长，大量数据广播等异常情况，系统会自动查杀等。以银行业务为例，“手机银行用户实时数据查询”与“网银系统交易流水批量作业”是最常见的业务场景，采用2套技术方案或2个平台分别处理，则会出现资源重复投入。使用华为云GaussDB(DWS)实现2个业务场景需求，数据无需反复转换和流转，提升了业务处理效率，节省运维成本。2小时可完成7万个核心业务的银行日增量数据归档和数据加工，同时支持手机银行终端7x24小时实时查询；当上千万个人用户与几十万企业用户同时使用系统，并发进行日间批量作业10万个的批量高峰期，实时查询可在3秒内响应，真正做到跑批和实时作业互不影响。华为云GaussDB(DWS) 面向未来，构筑新一代、全场景、云数据仓库，一站式数据分析，释放非凡数据价值，做企业数字化转型的最佳伙伴。【推荐阅读】【最新活动汇总】DWS活动火热进行中，互动好礼送不停（持续更新中）  HOT  【博文汇总】GaussDB(DWS)博文汇总1，欢迎大家交流探讨~（持续更新中）【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1，欢迎大家交流探讨（持续更新中）【项目实践汇总】GaussDB(DWS)项目实践汇总贴，欢迎大家交流探讨（持续更新中）【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总，欢迎大家交流学习（持续更新中）【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习（持续更新中） 扫码关注我哦，我在这里↓↓↓ 

DWS有没有考虑高校场景。目前DWS的费用在学校较难接受。

业务上在从一个数据库往另一个数据库中导入数据时，报了如下的错误：报错打印如下：could not disable timer for session timeout这个报错是FATAL级的：线程没有退出。初步判断是用户在执行语句的时候，由于这个线程超时时没有退出，导致复用了这个会话。查看过设置的session_timeout为50分钟。针对该报错的出现，具体该如何解决？

【功能模块】bI工具链接上没问题，查询数据时报错，这是啥问题？【操作步骤&问题现象】Caused by: com.huawei.gauss200.jdbc.util.PSQLException: ERROR: pooler: failed to create connections in parallel mode for thread 140348292585216, Error Message: GSSAPI continuation error, more than 10 times    at com.huawei.gauss200.jdbc.core.v3.QueryExecutorImpl.receiveErrorResponse(QueryExecutorImpl.java:2769) ~[?:?]    at com.huawei.gauss200.jdbc.core.v3.QueryExecutorImpl.processResults(QueryExecutorImpl.java:2508) ~[?:?]    at com.huawei.gauss200.jdbc.core.v3.QueryExecutorImpl.execute(QueryExecutorImpl.java:320) ~[?:?]    at com.huawei.gauss200.jdbc.jdbc.PgStatement.executeInternal(PgStatement.java:453) ~[?:?]    at com.huawei.gauss200.jdbc.jdbc.PgStatement.execute(PgStatement.java:377) ~[?:?]    at com.huawei.gauss200.jdbc.jdbc.PgPreparedStatement.executeWithFlags(PgPreparedStatement.java:147) ~[?:?]    at com.huawei.gauss200.jdbc.jdbc.PgPreparedStatement.executeQuery(PgPreparedStatement.java:110) ~[?:?]

GaussDB Kernel V500R001C20  这个版本分布式数据库如何进行物理备份，是用roach工具吗，和以前的高斯200分布式集群备份有差别吗

GaussDB(DWS)测试主题博文汇总，欢迎在评论区交流探讨~序号主题分类博文题目博文链接1测试DWS的SCHEMA介绍https://bbs.huaweicloud.com/blogs/1745982测试DWS表对象VACUUM FULL实践https://bbs.huaweicloud.com/blogs/1749783测试DWS日期时间类型格式设置及不同格式时间数据入库指导https://bbs.huaweicloud.com/blogs/1783894测试GaussDB(DWS)负载管理核心技术解密三： 工作负载管理测试分析https://bbs.huaweicloud.com/blogs/1809685测试华为云数仓GaussDB(DWS)备份恢复的实现https://bbs.huaweicloud.com/blogs/1859286测试GaussDB(DWS)透明加密介绍https://bbs.huaweicloud.com/blogs/1763717测试常用测试模型：TPCDShttps://bbs.huaweicloud.com/blogs/1980878测试GaussDB(DWS) 扩容加节点介绍https://bbs.huaweicloud.com/blogs/2091549测试GaussDB(DWS)自定义函数返回多结果集https://bbs.huaweicloud.com/blogs/20596410测试GaussDB(DWS)基础实践：MRS数据导入DWShttps://bbs.huaweicloud.com/blogs/21510511测试GaussDB(DWS)流式数据入库实践一：Python接口https://bbs.huaweicloud.com/blogs/21510712测试GaussDB for DWS 负载管理核心技术解密四： 工作负载计划解密https://bbs.huaweicloud.com/blogs/22291513测试GaussDB(DWS)流式数据入库实践二：C接口https://bbs.huaweicloud.com/blogs/22687014测试GaussDB(DWS)流式数据入库实践三：Java接口https://bbs.huaweicloud.com/blogs/22687115测试GaussDB(DWS)全文检索特性初探https://bbs.huaweicloud.com/blogs/23125016测试GaussDB(DWS)典型数据仓库业务之拉链表模型https://bbs.huaweicloud.com/blogs/23307917测试GaussDB(DWS)高可用之单点故障业务不中断https://bbs.huaweicloud.com/blogs/23656118测试GaussDB 加解密函数简介https://bbs.huaweicloud.com/blogs/23798319测试Sql ON Anywhere之数据篇https://bbs.huaweicloud.com/blogs/23798420测试GaussDB(DWS) 基于disk双集群容灾场景介绍https://bbs.huaweicloud.com/blogs/23879721测试GaussDB(DWS)执行计划_REMOTE_XXX_QUERY_信息解读https://bbs.huaweicloud.com/blogs/24203622测试GaussDB(DWS)大集群集群运维技巧https://bbs.huaweicloud.com/blogs/24249623测试GaussDB(DWS) 集群管理(CM)介绍(一)https://bbs.huaweicloud.com/blogs/24435524测试GaussDB(DWS)纳管集群安装部署类问题定位指南https://bbs.huaweicloud.com/blogs/24578225测试GaussDB for DWS 资源监控核心技术解密： TopSQL查询监控解密https://bbs.huaweicloud.com/blogs/24622626测试GaussDB(DWS)通信视图监控分析https://bbs.huaweicloud.com/blogs/24754327测试GaussDB A 审计功能简介https://bbs.huaweicloud.com/blogs/25026528测试GaussDB(DWS)：备机DN重建https://bbs.huaweicloud.com/blogs/25151129测试GaussDB(DWS)基于OBS备份恢复场景介绍https://bbs.huaweicloud.com/blogs/25534430测试GaussDB(DWS)连接池自动重连功能https://bbs.huaweicloud.com/blogs/25758331测试GaussDB(DWS)巡检之日常巡检介绍https://bbs.huaweicloud.com/blogs/257555【推荐阅读】【最新活动汇总】DWS活动火热进行中，互动好礼送不停（持续更新中）  HOT  【博文汇总】GaussDB(DWS)博文汇总1，欢迎大家交流探讨~（持续更新中）【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1，欢迎大家交流探讨（持续更新中）【项目实践汇总】GaussDB(DWS)项目实践汇总贴，欢迎大家交流探讨（持续更新中）【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总，欢迎大家交流学习（持续更新中）【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习（持续更新中） 扫码关注我哦，我在这里↓↓↓ 

序号主题分类博文题目博文链接1POC并发场景低效SQL检测方法https://bbs.huaweicloud.com/blogs/1746272POC【GaussDB(DWS)】资源管控方案技术分享https://bbs.huaweicloud.com/blogs/1746373POCMPP架构下数据倾斜率分析https://bbs.huaweicloud.com/blogs/1750084POC数据仓库日常巡检策略总结https://bbs.huaweicloud.com/blogs/1750095POCGaussDB(DWS)性能优化最佳实践https://bbs.huaweicloud.com/blogs/1952636POC【数据仓库】双集群系统方案探讨https://bbs.huaweicloud.com/blogs/175372 7POC【GaussDB(DWS)】数据仓库自动化清理功能实现https://bbs.huaweicloud.com/blogs/1754408POC华为云数仓GaussDB(DWS)】SQL语句上线验收操作指导https://bbs.huaweicloud.com/blogs/1881629POCDWS数据库用户权限设计与管理https://bbs.huaweicloud.com/blogs/17617810POCGaussDB(DWS)之数据库对象设计https://bbs.huaweicloud.com/blogs/19585611POCGaussDB(DWS)存储过程实现作业执行过程日志记录方法示例https://bbs.huaweicloud.com/blogs/19585312POC【GaussDB(DWS)】如何调整表的分布列https://bbs.huaweicloud.com/blogs/17634613POCGaussDB(DWS) 字符集浅谈https://bbs.huaweicloud.com/blogs/17635414POC华为商城（Vmall）背后的黑科技https://bbs.huaweicloud.com/blogs/17736215POCDWS权限管理概述https://bbs.huaweicloud.com/blogs/17518616POCDWS资源负载管理原理概述https://bbs.huaweicloud.com/blogs/17547117POCGaussDB(DWS)&TD分区表设计原理和使用对比https://bbs.huaweicloud.com/blogs/17722618POC8种ETL算法汇总大全！看完你就全明白了https://bbs.huaweicloud.com/blogs/17723519POCDWS与Greenplum一些语法差异总结https://bbs.huaweicloud.com/blogs/17739620POCGaussDB(DWS)中GTM组件对sequence管理https://bbs.huaweicloud.com/blogs/18083321POCGaussDB(DWS) gds线下迁移https://bbs.huaweicloud.com/blogs/18084822POCRoach备份恢复GaussDB(DWS)https://bbs.huaweicloud.com/blogs/17980423POCGaussDB(DWS) 一些常见参数调优分享https://bbs.huaweicloud.com/blogs/17900924POCGaussDB(DWS) 车辆检索与技战法浅析https://bbs.huaweicloud.com/blogs/19284025POC主流Web中间件与GaussDB(DWS) 对接介绍https://bbs.huaweicloud.com/blogs/18356826POC7*24国际运维节：运维人的那些事儿，你知道吗？https://bbs.huaweicloud.com/blogs/18912627POCGaussDB(DWS)表级锁功能实操与思考https://bbs.huaweicloud.com/blogs/19309528POCORACLE CONNECT_BY_ROOT,CONNECT_BY_ISLEAF等在GaussDB(DWS)上实现https://bbs.huaweicloud.com/blogs/19609429POC解密华为数据仓库产品GaussDB(DWS)https://bbs.huaweicloud.com/blogs/17900230POCORACLE 触发器在GaussDB(DWS)上的实现https://bbs.huaweicloud.com/blogs/19652731POCGaussDB(DWS)“表信息查询”与“分布列等信息修改”的一个方便脚本https://bbs.huaweicloud.com/blogs/196729 32POCGaussDB(DWS)对被视图引用的表进行DDL操作步骤https://bbs.huaweicloud.com/blogs/19699233POC【GaussDB (DWS)】业务表拆分显示策略分享https://bbs.huaweicloud.com/blogs/20045034POC如何把GIS（地理信息）迁移至DWS——抛转引玉https://bbs.huaweicloud.com/blogs/**7235POCGaussDB(DWS)通过GDS导出的文件竟然无法重新导入到源表？原来是分隔符与字符集不兼容搞的鬼https://bbs.huaweicloud.com/blogs/19887536POCGaussDB A 集群安装过程及部分问题解决方案https://bbs.huaweicloud.com/blogs/20864737POC【数仓搬迁】gsql结合python交互应用的实用技巧https://bbs.huaweicloud.com/blogs/21207838POC【数仓搬迁】数据一致性比对解决方案https://bbs.huaweicloud.com/blogs/21207539POCSQL下盘导致磁盘IO高问题分析https://bbs.huaweicloud.com/blogs/21273340POCDWS数据脏页统计及空间回收介绍https://bbs.huaweicloud.com/blogs/21367441POCGaussDB(DWS)工作负载管理实战https://bbs.huaweicloud.com/blogs/21319642POCDWS服务参数优化https://bbs.huaweicloud.com/blogs/21415643POCDWS历史sql资源消耗分析方法https://bbs.huaweicloud.com/blogs/21415744POC【Linux】 top 命令详解https://bbs.huaweicloud.com/blogs/21415845POCDWS服务sql不下推问题总结https://bbs.huaweicloud.com/blogs/21415946POC关于DWS 空间释放(vacuum full) 最佳实践https://bbs.huaweicloud.com/blogs/21416047POCDWS开发指导https://bbs.huaweicloud.com/blogs/21416348POCADB for mysql 【INSERT [IGNORE] INTO table_name】迁移 DWS 改写方法https://bbs.huaweicloud.com/blogs/22154249POCTD常用字典视图在GaussDB(DWS)上实现https://bbs.huaweicloud.com/blogs/22729250POC使用Python连接GaussDB（DWS）https://bbs.huaweicloud.com/blogs/22729051POC由两个问题引发的对GaussDB(DWS)负载均衡的思考https://bbs.huaweicloud.com/blogs/22749652POC使用DWS访问存算分离的MRS集群的数据https://bbs.huaweicloud.com/blogs/22804853POCGaussDB(DWS) Flink实时流入库简单介绍https://bbs.huaweicloud.com/blogs/23307354POCGaussDB(DWS)与OGG对接https://bbs.huaweicloud.com/blogs/23308455POCSQL执行流程https://bbs.huaweicloud.com/blogs/23482456POCInformatica10.2与GaussDB A8.0对接https://bbs.huaweicloud.com/blogs/23522957POCAIX服务器安装psql工具连接GaussDBhttps://bbs.huaweicloud.com/blogs/23525958POCCognos11.0.12 对接GaussDB Ahttps://bbs.huaweicloud.com/blogs/23558159POCGaussDB(DWS)与SAP_IDP&UPD对接配置https://bbs.huaweicloud.com/blogs/23734060POCGAUSSDB(DWS)对接OBIEE指导https://bbs.huaweicloud.com/blogs/23733261POCGaussDB(DWS)与Kettle对接指导https://bbs.huaweicloud.com/blogs/23875362POCGaussDB(DWS)与HVR对接测试https://bbs.huaweicloud.com/blogs/23874963POCDWS运维常用SQLhttps://bbs.huaweicloud.com/blogs/24229864POCGauss DB对接Tableauhttps://bbs.huaweicloud.com/blogs/24248965POC华为云DWS与阿里云ADB（MySQL）的差异总结https://bbs.huaweicloud.com/blogs/24269866POCGaussDB(DWS) 震惊！复杂语句的SQL优化竟然是?https://bbs.huaweicloud.com/blogs/24433167POCperl通过ODBC连接GaussDB(DWS)https://bbs.huaweicloud.com/blogs/24490668POCGaussDB(DWS)运维的那些事？ ——关于释放磁盘异常占用空间的经验总结https://bbs.huaweicloud.com/blogs/24512569POCGauss DB A数据库安装使用的端口号https://bbs.huaweicloud.com/blogs/24534870POCGaussDB(DWS)对接系列-BI工具BIP对接https://bbs.huaweicloud.com/blogs/24585371POCGauss DB（DWS）对接系列-BI工具SAS对接https://bbs.huaweicloud.com/blogs/24588072POCGaussDB(DWS)对接系列-BI工具BIEE对接https://bbs.huaweicloud.com/blogs/24592873POCGaussDB(DWS)常见的三种公共模式https://bbs.huaweicloud.com/blogs/24590174POC配置SQL ON OBS桶策略，实现DWS访问分离https://bbs.huaweicloud.com/blogs/24615775POCDWS console 配置参数说明https://bbs.huaweicloud.com/blogs/24613276POC【GaussDB(DWS)实践系列】数据倾斜检查与修改方法https://bbs.huaweicloud.com/blogs/24619577POCGaussDB(DWS)中Oracle不兼容语法修改集https://bbs.huaweicloud.com/blogs/24751578POCGaussDB A(DWS)多租户资源管理配置实例https://bbs.huaweicloud.com/blogs/24784979POCGaussDB(DWS)对接系列-数据可视化工具Grafana 7.4.3版本对接https://bbs.huaweicloud.com/blogs/24968780POC【数仓迁移】TD迁移GaussDB(DWS)之DDL迁移对照https://bbs.huaweicloud.com/blogs/25052881POC【易运维】GaussDB(DWS)审计日志转储实践https://bbs.huaweicloud.com/blogs/25053282POCGaussDB(DWS)实践系列 DWS与OBS数据互导https://bbs.huaweicloud.com/blogs/25150783POC数据仓库服务（DWS）事件管理记录为空的问题解决方案https://bbs.huaweicloud.com/blogs/25590284POCGaussDB(DWS)记录数据表操纵日志--系统日志提取方案https://bbs.huaweicloud.com/blogs/25660485POCDWS Power BI对接指导https://bbs.huaweicloud.com/blogs/25754486POC逻辑集群中的用户权限https://bbs.huaweicloud.com/blogs/25845287POCGaussDB(DWS)实践系列-常用命令FAQhttps://bbs.huaweicloud.com/blogs/26147688POC谁阻塞了谁的前进--锁等待监控查询https://bbs.huaweicloud.com/blogs/26146089POC【TD迁移】【函数迁移之一】因字符集变化引起的函数适配https://bbs.huaweicloud.com/blogs/261503【推荐阅读】【最新活动汇总】DWS活动火热进行中，互动好礼送不停（持续更新中）  HOT  【博文汇总】GaussDB(DWS)博文汇总1，欢迎大家交流探讨~（持续更新中）【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1，欢迎大家交流探讨（持续更新中）【项目实践汇总】GaussDB(DWS)项目实践汇总贴，欢迎大家交流探讨（持续更新中）【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总，欢迎大家交流学习（持续更新中）【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习（持续更新中） 扫码关注我哦，我在这里↓↓↓ 

GaussDB(DWS) 维护主题博文汇总，欢迎在评论区交流探讨~序号主题分类博文题目博文链接1维护磁盘使用率相关问题定位指南https://bbs.huaweicloud.com/blogs/1748062维护详解GaussDB(DWS)数据库查询关联的广播和重分布https://bbs.huaweicloud.com/blogs/1747963维护GaussDB(DWS) Hang问题定位指南https://bbs.huaweicloud.com/blogs/1747954维护JDBC问题定位指南https://bbs.huaweicloud.com/blogs/1747935维护GaussDB(DWS)集群启停问题定位指南https://bbs.huaweicloud.com/blogs/1748086维护GaussDB(DWS)线程残留定位手段https://bbs.huaweicloud.com/blogs/1744927维护GaussDB(DWS)多租户技术深入讲解https://bbs.huaweicloud.com/blogs/1751918维护GaussDB(DWS)生产应急指导https://bbs.huaweicloud.com/blogs/1763399维护GaussDB(DWS)增删CN操作总结https://bbs.huaweicloud.com/blogs/17634110维护蒲公英的约定——等待事务synhttps://bbs.huaweicloud.com/blogs/19526711维护GaussDB for DWS实例故障修复https://bbs.huaweicloud.com/blogs/17633812维护GaussDB(DWS)delete误删数据后如何恢复https://bbs.huaweicloud.com/blogs/19798813维护GaussDB(DWS)扩容问题定位指南（一）https://bbs.huaweicloud.com/blogs/20042014维护GaussDB(DWS)扩容问题定位指南（二）https://bbs.huaweicloud.com/blogs/20042215维护GaussDB (DWS)高可用问题定位指南https://bbs.huaweicloud.com/blogs/19873316维护GaussDB(DWS)升级问题定位指南（一）https://bbs.huaweicloud.com/blogs/20323817维护GaussDB(DWS)升级问题定位指南（二）https://bbs.huaweicloud.com/blogs/20324118维护GaussDB(DWS)升级问题定位指南（三）https://bbs.huaweicloud.com/blogs/20324219维护GaussDB(DWS)主备均衡指南https://bbs.huaweicloud.com/blogs/20595920维护GaussDB(DWS)补丁问题定位指南https://bbs.huaweicloud.com/blogs/20595821维护GaussDB(DWS)NTP变更指南https://bbs.huaweicloud.com/blogs/21140322维护GaussDB(DWS)系统表清理指南https://bbs.huaweicloud.com/blogs/21272323维护GaussDB(DWS)数据重分布原理https://bbs.huaweicloud.com/blogs/21908524维护GaussDB(DWS)vacuum full专题——vacuum full执行慢怎么办？https://bbs.huaweicloud.com/blogs/22203325维护GaussDB(DWS)修改IP问题定位指南https://bbs.huaweicloud.com/blogs/22335226维护GaussDB(DWS) 负载管理简单介绍以及作业排队处理方法https://bbs.huaweicloud.com/blogs/22201727维护GaussDB(DWS)节点替换&实例修复问题定位指南https://bbs.huaweicloud.com/blogs/22489828维护GaussDB常规锁简介https://bbs.huaweicloud.com/blogs/22880929维护列存表如何查看CU信息https://bbs.huaweicloud.com/blogs/23310930维护内存不可用报错：memory temporarily unavailable 的排查方法https://bbs.huaweicloud.com/blogs/23310831维护gs_replace修复节点时容易遇到的坑https://bbs.huaweicloud.com/blogs/23310632维护suse 12.3 操作系统问题导致cn卡死或频繁重启https://bbs.huaweicloud.com/blogs/23310733维护GaussDB网络重传/丢包问题定位总结https://bbs.huaweicloud.com/blogs/23523734维护代码 or 指令，浅析ARM架构下的函数的调用过程https://bbs.huaweicloud.com/blogs/23940135维护GaussDB外部连接报错汇总https://bbs.huaweicloud.com/blogs/23947136维护GaussDB(DWS)数据重分布跳表方案https://bbs.huaweicloud.com/blogs/23963837维护【维护案例】绝对表空间使用不规范致使内存异常https://bbs.huaweicloud.com/blogs/23966038维护GaussDB(DWS)网卡多队列未配置告警处理指南https://bbs.huaweicloud.com/blogs/23986639维护【维护案例】新装、扩容集群通信报错：data/control channel disconnecthttps://bbs.huaweicloud.com/blogs/23986440维护GaussDB重要通信参数汇总https://bbs.huaweicloud.com/blogs/23986341维护GaussDB通信原理总结https://bbs.huaweicloud.com/blogs/23997142维护GaussDB(DWS)实例长期处于catchup问题分析https://bbs.huaweicloud.com/blogs/24226943维护GaussDB(DWS)lvs部署指南https://bbs.huaweicloud.com/blogs/24434044维护GaussDB(DWS)JDBC连接报错案例集锦https://bbs.huaweicloud.com/blogs/24434845维护升级&扩容变更咨询问题FAQhttps://bbs.huaweicloud.com/blogs/24435446维护GaussDB(DWS) license常见咨询问题https://bbs.huaweicloud.com/blogs/24436747维护GaussDB(DWS)安装问题案例集锦https://bbs.huaweicloud.com/blogs/24436848维护GaussDB(DWS)资源管理配置问题定位指南https://bbs.huaweicloud.com/blogs/24467149维护DWS日常巡检FAQhttps://bbs.huaweicloud.com/blogs/24592450维护GaussDB(DWS)LVS问题定位思路及案例分享https://bbs.huaweicloud.com/blogs/24726751维护GaussDB通信性能问题定位总结https://bbs.huaweicloud.com/blogs/24884352维护GaussDB集群问题总纲https://bbs.huaweicloud.com/blogs/24884553维护GaussDB(DWS)之查询为什么没有走索引https://bbs.huaweicloud.com/blogs/24885154维护GaussDB(DWS)函数下推属性介绍https://bbs.huaweicloud.com/blogs/25035155维护GaussDB(DWS)资源负载管理参数配置全解https://bbs.huaweicloud.com/blogs/25151556维护集群创建业务及集群创建失败案例案例整理https://bbs.huaweicloud.com/blogs/24716057维护列存表并发更新时时的锁等待问题原理https://bbs.huaweicloud.com/blogs/25589558维护GaussDB(DWS)对象依赖案例集锦https://bbs.huaweicloud.com/blogs/25924759维护GaussDB(DWS)快速上手 支撑现网变更https://bbs.huaweicloud.com/blogs/25846660维护GaussDB DWS存储类问题汇总https://bbs.huaweicloud.com/blogs/258243【推荐阅读】【最新活动汇总】DWS活动火热进行中，互动好礼送不停（持续更新中）  HOT  【博文汇总】GaussDB(DWS)博文汇总1，欢迎大家交流探讨~（持续更新中）【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1，欢迎大家交流探讨（持续更新中）【项目实践汇总】GaussDB(DWS)项目实践汇总贴，欢迎大家交流探讨（持续更新中）【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总，欢迎大家交流学习（持续更新中）【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习（持续更新中） 扫码关注我哦，我在这里↓↓↓ 

GaussDB(DWS) 集群&DWS主题博文汇总，欢迎在评论区交流探讨~序号主题分类博文题目博文链接1集群GaussDB(DWS)负载管理核心技术解密一：全景图及解决的场景https://bbs.huaweicloud.com/blogs/1749992集群GaussDB(DWS)负载管理核心技术解密二： 白话历史资源监视https://bbs.huaweicloud.com/blogs/1776793集群GaussDB(DWS)高可用之主备从HA技术https://bbs.huaweicloud.com/blogs/1752494集群GaussDB(DWS)运维管理系列基础篇一：升级介绍与展望https://bbs.huaweicloud.com/blogs/1982135集群GaussDB(DWS)集群通信系列一：pooler连接池https://bbs.huaweicloud.com/blogs/2009096集群GaussDB(DWS) 集群通信系列三：集群通信常用视图https://bbs.huaweicloud.com/blogs/2091127集群GaussDB(DWS) 集群通信系列二：通信报错定位思路https://bbs.huaweicloud.com/blogs/2059708集群GaussDB(DWS) 运维接口集成简介https://bbs.huaweicloud.com/blogs/2108529集群GaussDB(DWS) 资源监控系列一：作业级别的监控（TopSQL）https://bbs.huaweicloud.com/blogs/21567310集群GaussDB(DWS) TCP的KeepAlive（Windows、Linux）https://bbs.huaweicloud.com/blogs/21365111集群GaussDB(DWS)运维管理系列基础篇三：数据仓库之变形金刚（集群resize原理介绍）https://bbs.huaweicloud.com/blogs/21908712集群GaussDB (DWS) 集群管理系列：CM组件介绍（架构和部署形态）https://bbs.huaweicloud.com/blogs/22332113集群GaussDB (DWS) 集群管理系列：CM组件介绍（核心功能）https://bbs.huaweicloud.com/blogs/22400514集群GaussDB(DWS) 集群扩容系列一：集群扩容与数据重分布https://bbs.huaweicloud.com/blogs/22845615集群GaussDB (DWS) 集群管理系列：CM启停功能的原理、流程和关键日志https://bbs.huaweicloud.com/blogs/23344216集群GaussDB for DWS 数据融合系列第一期：云端数据接入（CDM）https://bbs.huaweicloud.com/blogs/23736817集群GaussDB(DWS) 资源管理系列一：CPU资源管理https://bbs.huaweicloud.com/blogs/23755018集群GaussDB(DWS) 逻辑集群系列一：逻辑集群简介https://bbs.huaweicloud.com/blogs/23771619集群GaussDB(DWS) DMS历史监控数据聚合算法java实现https://bbs.huaweicloud.com/blogs/23797620集群LVS基本原理和日志打印：incomplete startup packethttps://bbs.huaweicloud.com/blogs/23862121集群从DIS导入流式数据到GaussDB(DWS)https://bbs.huaweicloud.com/blogs/23920422集群GaussDB(DWS) 数据库智能监控运维服务介绍https://bbs.huaweicloud.com/blogs/23984823集群GaussDB(DWS)资源负载管理最佳配置指南https://bbs.huaweicloud.com/blogs/23996024集群GaussDB for DWS数据融合系列第三期：MRS数据导入DWShttps://bbs.huaweicloud.com/blogs/23996125集群GaussDB (DWS) 集群管理系列: CMS通信机制介绍https://bbs.huaweicloud.com/blogs/24185326集群GaussDB for DWS 数据融合系列第四期：OBS导入数据https://bbs.huaweicloud.com/blogs/24225427集群GaussDB(DWS)裸金属集群创建问题总结https://bbs.huaweicloud.com/blogs/24435028集群GaussDB(DWS) 逻辑集群系列二：DWS逻辑集群管理使用详解https://bbs.huaweicloud.com/blogs/24537029集群GaussDB for DWS数据融合系列第六期：GDS导入数据https://bbs.huaweicloud.com/blogs/24576730集群GaussDB(DWS) 物理机纳管模式简介https://bbs.huaweicloud.com/blogs/24573131集群GaussDB单节点集群安装方法https://bbs.huaweicloud.com/blogs/24576132集群GaussDB for DWS数据融合系列第七期：CDM导出数据https://bbs.huaweicloud.com/blogs/24584833集群GaussDB(DWS) 资源管理技术浅析https://bbs.huaweicloud.com/blogs/24296434集群ISO/OSI模型https://bbs.huaweicloud.com/blogs/24755035集群GaussDB (DWS) 集群管理系列：单节点故障RTO机制分析（集群状态恢复篇）https://bbs.huaweicloud.com/blogs/24807736集群GaussDB for DWS 数据融合系列第九期：Oracle数据迁移到DWShttps://bbs.huaweicloud.com/blogs/24885337集群GaussDB(DWS) 升级能力简介https://bbs.huaweicloud.com/blogs/24970638集群 GaussDB(DWS)数据融合系列第十期：Oracle数据迁移到DWShttps://bbs.huaweicloud.com/blogs/24987939集群GaussDB(DWS)内存管理技术简介https://bbs.huaweicloud.com/blogs/25150040集群GaussDB(DWS)数据融合系列第十一期：第三方调度工具Kettle介绍https://bbs.huaweicloud.com/blogs/25370941集群GaussDB(DWS)数据融合系列第八期：云端GaussDB(DWS)迁移https://bbs.huaweicloud.com/blogs/25452142集群GaussDB(DWS) 资源管理 TopSQL 简析https://bbs.huaweicloud.com/blogs/25533943集群GaussDB(DWS) 多租户管理https://bbs.huaweicloud.com/blogs/25588044集群GaussDB(DWS)智能运维框架-调度框架基础命令介绍https://bbs.huaweicloud.com/blogs/25757545DWSGaussDB(DWS)云端运维系列第九期：集群安全(三权分立)https://bbs.huaweicloud.com/blogs/26196946DWSGaussDB(DWS)中的时区 https://bbs.huaweicloud.com/blogs/17514347DWSGaussDB(DWS)数据库安全设置之三权分立https://bbs.huaweicloud.com/blogs/18097548DWSDWS优秀实践之数据库性能提升https://bbs.huaweicloud.com/blogs/17722249DWSGaussDB(DWS) 云端运维系列第一期：集群基本功能https://bbs.huaweicloud.com/blogs/19871250DWSGaussDB(DWS)云端运维系列第二期：集群扩容https://bbs.huaweicloud.com/blogs/20091351DWSGaussDB(DWS) 云端运维系列第四期：集群安全（SSL连接，三权分立）https://bbs.huaweicloud.com/blogs/20596152DWSGaussDB(DWS) 云端运维系列第三期：集群监控https://bbs.huaweicloud.com/blogs/20438653DWSGaussDB(DWS) 云端运维系列第六期：参数调整（参数组，单集群参数调整）https://bbs.huaweicloud.com/blogs/21271254DWSGaussDB(DWS) 云端运维系列第七期：数据库维护（VACUUM，ANALYZE，倾斜检查）https://bbs.huaweicloud.com/blogs/21561855DWSGaussDB(DWS)云端运维系列第八期：服务权限控制(RBAC,细粒度)https://bbs.huaweicloud.com/blogs/22044156DWSGaussDB(DWS) 云端运维系列第五期：集群安全(审计日志，审计日志转储)https://bbs.huaweicloud.com/blogs/22367057DWS数据仓库服务公有云计费介绍https://bbs.huaweicloud.com/blogs/23306758DWSGaussDB(DWS) 云端运维系列第十期：加密集群https://bbs.huaweicloud.com/blogs/23311159DWSGaussDB(DWS)数据库智能监控运维服务系列介绍二:慢节点检测https://bbs.huaweicloud.com/blogs/25590660DWSGaussDB(DWS)数据融合系列第六期：GDS导入数据https://bbs.huaweicloud.com/blogs/25923361DWSGaussDB(DWS) 数据仓库服务API Explorer的使用https://bbs.huaweicloud.com/blogs/259863【推荐阅读】【最新活动汇总】DWS活动火热进行中，互动好礼送不停（持续更新中）  HOT  【博文汇总】GaussDB(DWS)博文汇总1，欢迎大家交流探讨~（持续更新中）【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1，欢迎大家交流探讨（持续更新中）【项目实践汇总】GaussDB(DWS)项目实践汇总贴，欢迎大家交流探讨（持续更新中）【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总，欢迎大家交流学习（持续更新中）【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习（持续更新中） 扫码关注我哦，我在这里↓↓↓ 

GaussDB(DWS)  存储主题博文汇总，欢迎在评论区交流探讨~序号主题分类博文题目博文链接1存储EXT4文件系统损坏导致的实例无法启动的排查与修复https://bbs.huaweicloud.com/blogs/1749452存储GaussDB(DWS)高可用之数据复制https://bbs.huaweicloud.com/blogs/1752343存储GaussDB(DWS)高可用之备机重建https://bbs.huaweicloud.com/blogs/1772164存储GaussDB(DWS)高可用之CN&GTM组件高可用介绍https://bbs.huaweicloud.com/blogs/1773615存储GaussDB对接NBU备份环境配置指南https://bbs.huaweicloud.com/blogs/1774066存储Linux的Zombie进程的成因以及优化方法https://bbs.huaweicloud.com/blogs/1788687存储数仓GaussDB（DWS）GTM总结https://bbs.huaweicloud.com/blogs/1982438存储侵略如火，GaussDB(DWS)数仓高可用容灾利器之逻辑备份https://bbs.huaweicloud.com/blogs/1984619存储GaussDB中两阶段事务的故障与恢复https://bbs.huaweicloud.com/blogs/20122110存储GaussDB(DWS)数据同步状态查看方法https://bbs.huaweicloud.com/blogs/19853611存储GaussDB(DWS) SQL On Anywhere之外表https://bbs.huaweicloud.com/blogs/20915712存储GaussDB(DWS)存储系列之行存表https://bbs.huaweicloud.com/blogs/20772113存储GaussDB(DWS)的容灾应该如何设计https://bbs.huaweicloud.com/blogs/21315714存储未雨绸缪，数据保护之NBU介质备份https://bbs.huaweicloud.com/blogs/22397315存储GaussDB(DWS) GDS导入容错详解https://bbs.huaweicloud.com/blogs/22447316存储GaussDB(DWS) 锁管理介绍https://bbs.huaweicloud.com/blogs/22806217存储Gauss行列存储压缩总结https://bbs.huaweicloud.com/blogs/23343018存储GaussDB DWS的SQL ON ANYWHERE技术解密https://bbs.huaweicloud.com/blogs/23772119存储GaussDB(DWS)数据利器GDS探析https://bbs.huaweicloud.com/blogs/23797320存储GaussDB(DWS)创建行存表的最佳实践https://bbs.huaweicloud.com/blogs/23844321存储GaussDB(DWS)集群状态可不用，实例状态处于Promoting状态问题分析https://bbs.huaweicloud.com/blogs/23986722存储GaussDB(DWS)备份容灾之分盘存储https://bbs.huaweicloud.com/blogs/23996323存储数仓GaussDB(DWS)全量备份总结https://bbs.huaweicloud.com/blogs/24269424存储GaussDB(DWS)存储系列之pagehack&pg_xlogdump工具使用方法总结https://bbs.huaweicloud.com/blogs/24433025存储非侵入式备份及其在NBU上的应用https://bbs.huaweicloud.com/blogs/24577226存储GaussDB(DWS) VACUUM总结https://bbs.huaweicloud.com/blogs/24583527存储GaussDB(DWS)系统表简介&一致性要求https://bbs.huaweicloud.com/blogs/24632628存储GaussDB(DWS)行存表的数据膨胀与空间重用https://bbs.huaweicloud.com/blogs/24988229存储GaussDB(DWS)高可用之备机重建介绍https://bbs.huaweicloud.com/blogs/25151030存储GaussDB(DWS) 特殊对象名https://bbs.huaweicloud.com/blogs/25369331存储GaussDB(DWS)问题定位常用SQLhttps://bbs.huaweicloud.com/blogs/25825132存储GaussDB(DWS)事务隔离级别简介https://bbs.huaweicloud.com/blogs/258253【推荐阅读】【最新活动汇总】DWS活动火热进行中，互动好礼送不停（持续更新中）  HOT  【博文汇总】GaussDB(DWS)博文汇总1，欢迎大家交流探讨~（持续更新中）【维护宝典汇总】GaussDB(DWS)维护宝典汇总贴1，欢迎大家交流探讨（持续更新中）【项目实践汇总】GaussDB(DWS)项目实践汇总贴，欢迎大家交流探讨（持续更新中）【DevRun直播汇总】GaussDB(DWS)黑科技直播汇总，欢迎大家交流学习（持续更新中）【培训视频汇总】GaussDB(DWS) 培训视频汇总,欢迎大家交流学习（持续更新中） 扫码关注我哦，我在这里↓↓↓