- 为了保护用户的数据安全，避免系统管理员拥有过度集中的权利带来高风险，DWS支持使用不同类型的用户分别控制不同权限的三权分立模式。开启此模式后将系统管理员的权限分立给安全管理员和审计管理员。 为了保护用户的数据安全，避免系统管理员拥有过度集中的权利带来高风险，DWS支持使用不同类型的用户分别控制不同权限的三权分立模式。开启此模式后将系统管理员的权限分立给安全管理员和审计管理员。
- 问题场景：某个需求里，需要使用calcite， 将优化后的calcite逻辑计划树转成sql语句。 static String toSql(RelNode root, DataSourceType dataSourceType) { SqlDialect dialect; // 根据对应数据库类型决定dialect dialect = dat... 问题场景：某个需求里，需要使用calcite， 将优化后的calcite逻辑计划树转成sql语句。 static String toSql(RelNode root, DataSourceType dataSourceType) { SqlDialect dialect; // 根据对应数据库类型决定dialect dialect = dat...
- 在DWS中，通过锁以及多版本并发控制可以保护数据的一致性等，例如A正在查询数据，B就无法对A访问的对象执行DDL。A正在更新某条记录，B就不能删除或更新这条记录；锁本身是数据库自动管理的，同时数据库还提供了LOCK语法，允许用户自己控制锁。 当然，如果应用业务的程序逻辑设计不合理，就可能导致严重的锁等待现象，或者死锁的产生。如果你发现SQL请求大多数时候处于等待... 在DWS中，通过锁以及多版本并发控制可以保护数据的一致性等，例如A正在查询数据，B就无法对A访问的对象执行DDL。A正在更新某条记录，B就不能删除或更新这条记录；锁本身是数据库自动管理的，同时数据库还提供了LOCK语法，允许用户自己控制锁。 当然，如果应用业务的程序逻辑设计不合理，就可能导致严重的锁等待现象，或者死锁的产生。如果你发现SQL请求大多数时候处于等待...
- 在kafka-0.8.2之后，producer不再区分同步(sync)和异步方式(async)，所有的请求以异步方式发送，这样提升了客户端效率。producer请求会返回一个应答对象，包括偏移量或者错误信。这种异步方地批量的发送消息到kafka broker节点，因而可以减少server端资源的开销。新的producer和所有的服务器网络通信都是异步地，在ack=-1模式下需要等待所有的re... 在kafka-0.8.2之后，producer不再区分同步(sync)和异步方式(async)，所有的请求以异步方式发送，这样提升了客户端效率。producer请求会返回一个应答对象，包括偏移量或者错误信。这种异步方地批量的发送消息到kafka broker节点，因而可以减少server端资源的开销。新的producer和所有的服务器网络通信都是异步地，在ack=-1模式下需要等待所有的re...
- 首先让我们先来总结一下用户修改块时，Oracle内部都发生了什么：1、如果块不在Buffer cache，将块读入Buffer cache2、先生成重做记录，并记入日志缓存，在用户提交时写到日志文件中3、在Buffer cache中修改块4、在Buffer cache中设置块的脏标志位，标志块变成脏块，同时在检查点队列末尾增加一个新节点，记录这个新脏块的信息，信息包括：脏块在Buffer c... 首先让我们先来总结一下用户修改块时，Oracle内部都发生了什么：1、如果块不在Buffer cache，将块读入Buffer cache2、先生成重做记录，并记入日志缓存，在用户提交时写到日志文件中3、在Buffer cache中修改块4、在Buffer cache中设置块的脏标志位，标志块变成脏块，同时在检查点队列末尾增加一个新节点，记录这个新脏块的信息，信息包括：脏块在Buffer c...
- 本文为现网变更支撑工作入门篇，通过本文熟悉DWS产品现网变更的主要工作，目的是可以快速上手支撑变更。 本文为现网变更支撑工作入门篇，通过本文熟悉DWS产品现网变更的主要工作，目的是可以快速上手支撑变更。
- 调度框架的目标是，根据用户注册的运维任务计划，在合适的时间调起相关任务，并自动感知用户业务负载，动态地调整运维任务并发，并对运维任务过程中产生的错误进行报警、跳过错误项等处理，减轻一线运维人员工作强度。 调度框架的目标是，根据用户注册的运维任务计划，在合适的时间调起相关任务，并自动感知用户业务负载，动态地调整运维任务并发，并对运维任务过程中产生的错误进行报警、跳过错误项等处理，减轻一线运维人员工作强度。
- 背景前面博客已经介绍了如何配置Hadoop和Hive运行环境。即本文开始前，本地已经顺利运行Hive，并可以提交hive on mr任务。在hive领域中，tez是其中一款比较常用的执行引擎。其支持DAG作业模式，可以将多个有依赖的作业转换为一个作业从而大幅提升DAG作业的性能。Hive也有一部分优化特性基于tez实现。本文介绍如何让hive能够启动执行tez任务。下面内容有一部分依赖WS... 背景前面博客已经介绍了如何配置Hadoop和Hive运行环境。即本文开始前，本地已经顺利运行Hive，并可以提交hive on mr任务。在hive领域中，tez是其中一款比较常用的执行引擎。其支持DAG作业模式，可以将多个有依赖的作业转换为一个作业从而大幅提升DAG作业的性能。Hive也有一部分优化特性基于tez实现。本文介绍如何让hive能够启动执行tez任务。下面内容有一部分依赖WS...
- 客户要求获取数据库表数据操纵的实时日志信息，包括对具体表的增删改操作，并且需要保留具体参数的值，我们通过参数log_statement的值调整系统日志记录内容，使系统日志中记录表数据操作信息，再将这客户所需部分信息提取出来另行保存。 客户要求获取数据库表数据操纵的实时日志信息，包括对具体表的增删改操作，并且需要保留具体参数的值，我们通过参数log_statement的值调整系统日志记录内容，使系统日志中记录表数据操作信息，再将这客户所需部分信息提取出来另行保存。
- GaussDB在大规模集群上运行的过程中，随着时间推移，部分节点可能会出现性能严重下降的情况。此时这些节点仍然能对外提供服务，但响应明显变慢，处理同样的请求所需时间较其他正常节点大很多，从而影响了整个集群的性能。这样的节点称为“亚健康节点”，或“慢节点”。 GaussDB在大规模集群上运行的过程中，随着时间推移，部分节点可能会出现性能严重下降的情况。此时这些节点仍然能对外提供服务，但响应明显变慢，处理同样的请求所需时间较其他正常节点大很多，从而影响了整个集群的性能。这样的节点称为“亚健康节点”，或“慢节点”。
- 问题现象：用户在创建、扩容、删除dws集群时，在事件管理的菜单目录上查询不到操作的事件记录排查思路：1.检查serviceCM =》consoleframework服务配置 =》silvan配置信息 =》region关联service 里面有没有配置当前局点的eventservice服务，并且检查lb地址以及端口是否为31417。consoleframework服务配置2.登录部署dws服务... 问题现象：用户在创建、扩容、删除dws集群时，在事件管理的菜单目录上查询不到操作的事件记录排查思路：1.检查serviceCM =》consoleframework服务配置 =》silvan配置信息 =》region关联service 里面有没有配置当前局点的eventservice服务，并且检查lb地址以及端口是否为31417。consoleframework服务配置2.登录部署dws服务...
- Sphinx自动生成Python文档sphinx是一种基于Python的文档工具，它可以令人轻松的撰写出清晰且优美的文档，由Georg Brandl在BSD许可证下开发。新版的Python3文档就是由sphinx生成的，其他诸如机器学习库scikit-learn、Jupyter Notebook也是基于sphinx生成的。 安装sphinx包pip install sphinx 尝试1）新... Sphinx自动生成Python文档sphinx是一种基于Python的文档工具，它可以令人轻松的撰写出清晰且优美的文档，由Georg Brandl在BSD许可证下开发。新版的Python3文档就是由sphinx生成的，其他诸如机器学习库scikit-learn、Jupyter Notebook也是基于sphinx生成的。 安装sphinx包pip install sphinx 尝试1）新...
- 万字长文总结特征工程干货 1. 简介（ Feature Engineering） 1.1问题定义“Feature engineering is the art part of data science” —Sergey YurgensonFeature engineering is the process of using domain knowledge to extract feat... 万字长文总结特征工程干货 1. 简介（ Feature Engineering） 1.1问题定义“Feature engineering is the art part of data science” —Sergey YurgensonFeature engineering is the process of using domain knowledge to extract feat...
- TopSQL简析，TopSQL视图，TopSQL流程 TopSQL简析，TopSQL视图，TopSQL流程
- GuassDB(DWS)支持多种方式实现云端数据迁移，包括EC外表，CDM迁移，备份恢复，OBS导入导出等，其中EC外表，CDM迁移，OBS导入导出的方式在其他博文已经有详细介绍，本节将主要介绍如何使用快照恢复的方式实现云端集群间的数据迁移 GuassDB(DWS)支持多种方式实现云端数据迁移，包括EC外表，CDM迁移，备份恢复，OBS导入导出等，其中EC外表，CDM迁移，OBS导入导出的方式在其他博文已经有详细介绍，本节将主要介绍如何使用快照恢复的方式实现云端集群间的数据迁移
上滑加载中
推荐直播
-
AI编码实干派，“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国，深圳，2026年2月26日】，以“AI编码实干派，码力全开”为主题的华为云码道（CodeArts）代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布，为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw，在线养虾2026/03/11 周三 19:00-21:00
刘昱，华为云高级工程师/谈心，华为云技术专家/李海仑，上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈，华为云码道最新推出 Skill ——开发者只需输入一句口令，即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道，玩转OpenClaw
回顾中 -
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力，华为云开发者生态运营总监/姚圣伟，华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发，看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw，让小艺成为你的AI助理。
回顾中
热门标签