- FusionInsight 8.0 MRS在6月30日发布全新版本,HetuEngine提供高性能交互式查询;支持Flink On Hive,增强批流融合能力;Hive支持Tez引擎,提升任务运行效率;CarbonData提供丰富的索引和物化视图,提升Spark/Hive性能;支持事务ACID,实现全量数据T+0入湖;增强细粒度安全控制,以及提供全新的大数据组件版本,提高各行业大数据应用场景能力 FusionInsight 8.0 MRS在6月30日发布全新版本,HetuEngine提供高性能交互式查询;支持Flink On Hive,增强批流融合能力;Hive支持Tez引擎,提升任务运行效率;CarbonData提供丰富的索引和物化视图,提升Spark/Hive性能;支持事务ACID,实现全量数据T+0入湖;增强细粒度安全控制,以及提供全新的大数据组件版本,提高各行业大数据应用场景能力
- 问题背景使用CDM迁移华为Gauss DB A的数据,建立连接时报错,网络已打通。问题分析GaussDB 是基于PG的,PG数据库默认只允许本机通过访问数据库,CDM作为远程客户端无法访问。问题解决1. 修改postgresql.conf在pg的安装目录下找到postgresql.conf 文件,打开该文件并找到如下一行将其修改为listen_addresses='*' # 允许任意ip访... 问题背景使用CDM迁移华为Gauss DB A的数据,建立连接时报错,网络已打通。问题分析GaussDB 是基于PG的,PG数据库默认只允许本机通过访问数据库,CDM作为远程客户端无法访问。问题解决1. 修改postgresql.conf在pg的安装目录下找到postgresql.conf 文件,打开该文件并找到如下一行将其修改为listen_addresses='*' # 允许任意ip访...
- 集群的调优涉及到方方面面,对于没设置过参数的人来说刚一接触可能会有些迷茫。这篇文章旨在介绍一些常用参数与设置推荐。 集群的调优涉及到方方面面,对于没设置过参数的人来说刚一接触可能会有些迷茫。这篇文章旨在介绍一些常用参数与设置推荐。
- 华为国产数仓品牌GaussDB 自 2019年5月正式面世以来,已经经历了十年的发展,逐渐发展为了业界领先的企业级云分布式数据仓库服务。十年的历程中,名字也变化,服务策略也在变化,通过本文,旨在为大家带来GaussDB for DWS的发展历程及基础的产品,技术方面的介绍,以及介绍一些了解产品的渠道,让大家可以共同见证GaussDB的成长和强大。 华为国产数仓品牌GaussDB 自 2019年5月正式面世以来,已经经历了十年的发展,逐渐发展为了业界领先的企业级云分布式数据仓库服务。十年的历程中,名字也变化,服务策略也在变化,通过本文,旨在为大家带来GaussDB for DWS的发展历程及基础的产品,技术方面的介绍,以及介绍一些了解产品的渠道,让大家可以共同见证GaussDB的成长和强大。
- 假设MySQL数据库dbss_test的“test”表中的“device_name”属于重要敏感数据,我们需要对该列数据的查看、修改和删除的所有动作都进行监控。本文将详细介绍该场景下完成数据库活动监控规则的配置和查看监控日志的操作。如何配置数据库活动监控策略数据库活动监控也被称为数据库审计。HexaTier提供多维度的数据库审计线索,包括源IP、用户身份、应用程序、访问时间、请求的数据库、原... 假设MySQL数据库dbss_test的“test”表中的“device_name”属于重要敏感数据,我们需要对该列数据的查看、修改和删除的所有动作都进行监控。本文将详细介绍该场景下完成数据库活动监控规则的配置和查看监控日志的操作。如何配置数据库活动监控策略数据库活动监控也被称为数据库审计。HexaTier提供多维度的数据库审计线索,包括源IP、用户身份、应用程序、访问时间、请求的数据库、原...
- 一、方案简介本方案旨在指导实施人员完成数据库分布键优化改造。二、适用场景针对数据库中大量表含有XXX字段并且XXX字段不为分布键的表,将分布键批量刷新为XXX字段。三、修改分布键(一) 原数据库数据导出1. 原数据库用户数据导出使用omm用户登录原数据库服务器,导出集群用户信息,执行:gs_dumpall -s -g -p 25308 -f olddb... 一、方案简介本方案旨在指导实施人员完成数据库分布键优化改造。二、适用场景针对数据库中大量表含有XXX字段并且XXX字段不为分布键的表,将分布键批量刷新为XXX字段。三、修改分布键(一) 原数据库数据导出1. 原数据库用户数据导出使用omm用户登录原数据库服务器,导出集群用户信息,执行:gs_dumpall -s -g -p 25308 -f olddb...
- 1. 等保合规要求等保2.0的技术要求中对数据的备份与恢复提出了明确的要求,从二级到四级的要求如下:2. 应对措施分析同时在安全管理制度中也列出了备份与恢复管理相关的运维管理要求,在此不做累述。从华为云用户的角度,应该采用何种手段来构建数据备份恢复能力,满足合规要求,下面做一个简单分析。技术部分可概括为数据的高可靠与系统的高可用两个点,数据为配置数据和业务数据... 1. 等保合规要求等保2.0的技术要求中对数据的备份与恢复提出了明确的要求,从二级到四级的要求如下:2. 应对措施分析同时在安全管理制度中也列出了备份与恢复管理相关的运维管理要求,在此不做累述。从华为云用户的角度,应该采用何种手段来构建数据备份恢复能力,满足合规要求,下面做一个简单分析。技术部分可概括为数据的高可靠与系统的高可用两个点,数据为配置数据和业务数据...
- 01等保合规要求等保2.0的技术要求中对数据的备份与恢复提出了明确的要求,从二级到四级的要求如下:同时在安全管理制度中也列出了备份与恢复管理相关的运维管理要求,在此不做累述。从华为云用户的角度,应该采用何种手段来构建数据备份恢复能力,满足合规要求,下面做一个简单分析。02 应对措施分析技术部分可概括为数据的高可靠与系统的高可用两个点,数据为配置数据和业务数据,存储容器为数据库和磁盘,前者应该... 01等保合规要求等保2.0的技术要求中对数据的备份与恢复提出了明确的要求,从二级到四级的要求如下:同时在安全管理制度中也列出了备份与恢复管理相关的运维管理要求,在此不做累述。从华为云用户的角度,应该采用何种手段来构建数据备份恢复能力,满足合规要求,下面做一个简单分析。02 应对措施分析技术部分可概括为数据的高可靠与系统的高可用两个点,数据为配置数据和业务数据,存储容器为数据库和磁盘,前者应该...
- 一、问题描述 安装6.5.1版本的GaussDB集群时,在安装OMS的步骤遇到 step7:configuring and starting agent [fail] 报错出现在“安装双机manager”阶段,使用的安装包信息如下 使用环境是centOS 7.4 二、问题分析1. 当前安装oms失败的问题原因是由于oms节点ldap启... 一、问题描述 安装6.5.1版本的GaussDB集群时,在安装OMS的步骤遇到 step7:configuring and starting agent [fail] 报错出现在“安装双机manager”阶段,使用的安装包信息如下 使用环境是centOS 7.4 二、问题分析1. 当前安装oms失败的问题原因是由于oms节点ldap启...
- 冗余会话清理现场通常使用Data Studio进行DWS数据库连接,很多人使用关闭后不关闭窗口,导致数据库连接仍然存在,后台大量堆积Data Studio查询作业,导致DWS集群查询无响应。可以参照以下超长会话清理方式进行操作。 冗余会话清理现场通常使用Data Studio进行DWS数据库连接,很多人使用关闭后不关闭窗口,导致数据库连接仍然存在,后台大量堆积Data Studio查询作业,导致DWS集群查询无响应。可以参照以下超长会话清理方式进行操作。
- 字符集(Character set):是一个系统支持的所有抽象字符的集合。字符是各种文字和符号的总称,包括各国家文字、标点符号、图形符号、数字等。常见的字符集有ASCII、ZHS16GBK 、ZHT16BIG5、 ZHS32GB18030字符集、Unicode字符集等。 字符编码(Character Encoding):是一套法则,使用该法则能够对... 字符集(Character set):是一个系统支持的所有抽象字符的集合。字符是各种文字和符号的总称,包括各国家文字、标点符号、图形符号、数字等。常见的字符集有ASCII、ZHS16GBK 、ZHT16BIG5、 ZHS32GB18030字符集、Unicode字符集等。 字符编码(Character Encoding):是一套法则,使用该法则能够对...
- 在数据仓库类型的数据库中,大表的分布列选择对于数据库和语句查询性能都有至关重要的影响。 如果表的分布列选择不当,在数据导入后有可能出现数据分布倾斜,进而导致某些磁盘的使用明显高于其他磁盘,极端情况下会导致集群 只读。 对于Hash分表策略,存在数据倾斜情况下,查询时出现部分DN的I/O短板,从而影响整体查询性能。 在对已经创建的表,该如何进行分布列的调整,也是我们经常思考的课题。 在数据仓库类型的数据库中,大表的分布列选择对于数据库和语句查询性能都有至关重要的影响。 如果表的分布列选择不当,在数据导入后有可能出现数据分布倾斜,进而导致某些磁盘的使用明显高于其他磁盘,极端情况下会导致集群 只读。 对于Hash分表策略,存在数据倾斜情况下,查询时出现部分DN的I/O短板,从而影响整体查询性能。 在对已经创建的表,该如何进行分布列的调整,也是我们经常思考的课题。
- GaussDB(DWS)引入了内存自适应控制的技术,在SQL语句复杂、处理数据量大的AP场景下,能够对运行的作业进行内存级的管控,避免高并发场景下内存不足产生的各种问题。 GaussDB(DWS)引入了内存自适应控制的技术,在SQL语句复杂、处理数据量大的AP场景下,能够对运行的作业进行内存级的管控,避免高并发场景下内存不足产生的各种问题。
- DWS数据库用户权限设计与管理前言本文将介绍DWS基于RBAC(Role-Based Access Control,基于角色的访问控制)的数据库用户权限管理。简单地说,一个用户拥有若干角色,每一个角色拥有若干权限。这样,就构造成“用户-角色-权限”的授权模型。在这种模型中,用户与角色之间,角色与权限之间,一般是多对多的关系。通过本节,我们将学习到DWS数据库权限管理的相关知识并进一步学会如何... DWS数据库用户权限设计与管理前言本文将介绍DWS基于RBAC(Role-Based Access Control,基于角色的访问控制)的数据库用户权限管理。简单地说,一个用户拥有若干角色,每一个角色拥有若干权限。这样,就构造成“用户-角色-权限”的授权模型。在这种模型中,用户与角色之间,角色与权限之间,一般是多对多的关系。通过本节,我们将学习到DWS数据库权限管理的相关知识并进一步学会如何...
- 图的可视化作为图数据库的一环非常重要。开发者可能着眼的是图数据库的内核与算法,但是客户往往更关心的是展示在他们眼前的东西,这方面来说,可视化了的图数据更有表现力。而且由于人的大脑善于分析图像数据,将图可视化,我们往往能发现更多直观且有价值的信息。但是当前的可视化技术还难以在有限的空间上有效地展示大规模图数据的丰富含义,而对大规模图数据的查询与分析能力正是GES的特点和优势! 图的可视化作为图数据库的一环非常重要。开发者可能着眼的是图数据库的内核与算法,但是客户往往更关心的是展示在他们眼前的东西,这方面来说,可视化了的图数据更有表现力。而且由于人的大脑善于分析图像数据,将图可视化,我们往往能发现更多直观且有价值的信息。但是当前的可视化技术还难以在有限的空间上有效地展示大规模图数据的丰富含义,而对大规模图数据的查询与分析能力正是GES的特点和优势!
上滑加载中
推荐直播
-
华为云码道 × 仓颉编程:工程化AI编码探索2026/05/27 周三 19:00-21:00
刘俊杰-华为云仓颉语言专家/李炎-华为云码道技术专家/王智鹏-OpenCangjie开源社区发起人
本场直播围绕华为云仓颉语言与华为云码道的深度结合,展示华为云智能编程从零基础到高效落地的完整生态能力。以华为云码道为引擎,仓颉语言为载体,带给大家日常提效、趣味创新到极速量产的开发体验。
回顾中 -
一个AI团队帮你写代码:华为云码道Agent Space实战2026/06/25 周四 19:00-21:00
张翰文-华为云码道工程师/郭英旭-青软创新科技集团股份有限公司 软件架构师
本场直播聚焦华为云码道Agent Space两大模式:研发办公、代码开发,亲身体验从需求到代码的AI自动化能力。实操演示基于华为 CodeArts CLI,依托 OpenSpec 规格体系从零搭建业务项目。
回顾中
热门标签