- 我们谈论数据中台之前, 我们也听到过数据平台、数据仓库、数据湖的相关概念,它们都与数据有关系,但他们和数据中台有什么样的区别, 下面我们将围绕数据平台、数据仓库、数据湖和数据中台的区别进行介绍。 数据仓库数据仓库(Data Warehouse),也称为企业数据仓库,它是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合存储系统,它将来自不同来源的结构化数据聚合起来,用于业务智能领域的... 我们谈论数据中台之前, 我们也听到过数据平台、数据仓库、数据湖的相关概念,它们都与数据有关系,但他们和数据中台有什么样的区别, 下面我们将围绕数据平台、数据仓库、数据湖和数据中台的区别进行介绍。 数据仓库数据仓库(Data Warehouse),也称为企业数据仓库,它是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合存储系统,它将来自不同来源的结构化数据聚合起来,用于业务智能领域的...
- HANG检测是集群管理组件CM对实例进行phony dead(假死)检查的一种检测手段。在检测到实例出现异常时,进行相应的仲裁,以期恢复集群的正常功能。本文对HANG检测插件的配置和机制做了介绍。 HANG检测是集群管理组件CM对实例进行phony dead(假死)检查的一种检测手段。在检测到实例出现异常时,进行相应的仲裁,以期恢复集群的正常功能。本文对HANG检测插件的配置和机制做了介绍。
- 通过一些自定义的视图或者查询语句,批量识别集群的sequence相关问题 通过一些自定义的视图或者查询语句,批量识别集群的sequence相关问题
- 等待视图wait_status常见状态介绍 等待视图wait_status常见状态介绍
- 本文目标在于,讲述使用GaussDB(DWS)时,如何使用TPC-DS/TPC-H等标准数据模型,获取DWS的查询性能数据。主要包括,整体流程概述,DWS集群和ECS弹性云服务器环境准备,TPC-DS/TPC-H造数,建表与数据导入,执行查询与结果收集四个章节。 本文目标在于,讲述使用GaussDB(DWS)时,如何使用TPC-DS/TPC-H等标准数据模型,获取DWS的查询性能数据。主要包括,整体流程概述,DWS集群和ECS弹性云服务器环境准备,TPC-DS/TPC-H造数,建表与数据导入,执行查询与结果收集四个章节。
- 上一节我们介绍了RDMA技术引进的必要性,可以将RDMA的特性总结为:零拷贝:用户态&内核态之间零拷贝。内核旁路:从用户态到网卡绕过内核OS栈CPU卸载:数据搬运不需要CPU参与RDMA协议标准,包含InfiniBand , RoCE , iWARP三种,其中最原始的为InfiniBand标准,其协议栈完全为IB网络;RoCE特点是复用了部分IB网络协议,有点事成本低,兼容性更高;iWARP... 上一节我们介绍了RDMA技术引进的必要性,可以将RDMA的特性总结为:零拷贝:用户态&内核态之间零拷贝。内核旁路:从用户态到网卡绕过内核OS栈CPU卸载:数据搬运不需要CPU参与RDMA协议标准,包含InfiniBand , RoCE , iWARP三种,其中最原始的为InfiniBand标准,其协议栈完全为IB网络;RoCE特点是复用了部分IB网络协议,有点事成本低,兼容性更高;iWARP...
- 本文主要对GaussDB(DWS)资源监控原理进行了简要介绍,并对资源监控常用视图应用进行了介绍。由于篇幅有限,本文主要介绍内存、IO和CPU资源监控,同时重点介绍用户和资源池维度的资源监控视图应用。本文基于GaussDB(DWS) 最新版本进行介绍,老版本可能有偏差,可以参考对应版本产品文档了解。 本文主要对GaussDB(DWS)资源监控原理进行了简要介绍,并对资源监控常用视图应用进行了介绍。由于篇幅有限,本文主要介绍内存、IO和CPU资源监控,同时重点介绍用户和资源池维度的资源监控视图应用。本文基于GaussDB(DWS) 最新版本进行介绍,老版本可能有偏差,可以参考对应版本产品文档了解。
- 安全测试之SSRF漏洞1. 什么是SSRF漏洞SSRF (Server-Side Request Forgery,服务器端请求伪造)是指由攻击者构造请求,然后利用服务器的漏洞以服务端的身份向内网发送请求对内网发起攻击。一般情况下,SSRF攻击的目标是外网无法访问的内部系统,因为请求是服务端发起的,所以服务端就能请求到与其网络通畅而与外网隔离的内网系统。SSRF漏洞的形成大多是因为服... 安全测试之SSRF漏洞1. 什么是SSRF漏洞SSRF (Server-Side Request Forgery,服务器端请求伪造)是指由攻击者构造请求,然后利用服务器的漏洞以服务端的身份向内网发送请求对内网发起攻击。一般情况下,SSRF攻击的目标是外网无法访问的内部系统,因为请求是服务端发起的,所以服务端就能请求到与其网络通畅而与外网隔离的内网系统。SSRF漏洞的形成大多是因为服...
- CM的异常检测框架支持载入异常检测插件,对实例进行异常检测,本文对CM的异常检测框架及插件的参数及设置进行了介绍。 CM的异常检测框架支持载入异常检测插件,对实例进行异常检测,本文对CM的异常检测框架及插件的参数及设置进行了介绍。
- 表触发器 表触发器
- 如何终止正在执行的sql语句呢,本文介绍以下几种方式:1. 客户端自带的取消/终止功能已DataStudio为例,可通过如下方式终止:https://support.huaweicloud.com/tg-dws/DWS_DS_123.html2. 通过pg_terminate_backend(pid)或pg_cancel_backend(pid)终止通过查询pgxc_stat_activit... 如何终止正在执行的sql语句呢,本文介绍以下几种方式:1. 客户端自带的取消/终止功能已DataStudio为例,可通过如下方式终止:https://support.huaweicloud.com/tg-dws/DWS_DS_123.html2. 通过pg_terminate_backend(pid)或pg_cancel_backend(pid)终止通过查询pgxc_stat_activit...
- 一、计算机系统回顾 & 总线事务计算机操作系统可以看作是CPU、内存、系统总线、和I/O设备的组合,其中,数组通过总线在上述模块中传输的过程称之为总线事务。我们以网络传输举例介绍总线事务,首先是数据从内存->网络。内存传输到网络需要由cpu参与将数据搬运到寄存器中,再由CPU将数据经过系统总线搬运至网络适配器。类似的,从网络到内存也需要CPU参与,共经历三个步骤:1、网卡通知CPU数据到达;... 一、计算机系统回顾 & 总线事务计算机操作系统可以看作是CPU、内存、系统总线、和I/O设备的组合,其中,数组通过总线在上述模块中传输的过程称之为总线事务。我们以网络传输举例介绍总线事务,首先是数据从内存->网络。内存传输到网络需要由cpu参与将数据搬运到寄存器中,再由CPU将数据经过系统总线搬运至网络适配器。类似的,从网络到内存也需要CPU参与,共经历三个步骤:1、网卡通知CPU数据到达;...
- 近年来,随着Python版本的不断更新和快速发展,快速占领流行编程语言排行榜,开始用于大型项目的开发。多个数据仓库使用场景中也使用Python开发,使用Python驱动连接数据库。本博文结合故障模式下psycopg2驱动不支持CN Retry特性的问题分析过程介绍psycopg2驱动的使用和问题定位方法。 近年来,随着Python版本的不断更新和快速发展,快速占领流行编程语言排行榜,开始用于大型项目的开发。多个数据仓库使用场景中也使用Python开发,使用Python驱动连接数据库。本博文结合故障模式下psycopg2驱动不支持CN Retry特性的问题分析过程介绍psycopg2驱动的使用和问题定位方法。
- GaussDB(DWS)设计了双集群容灾的方案:分别部署两套同构的集群,集群间通过容灾任务进行周期性的物理数据同步。其中主集群提供正常的业务,进行周期性备份,并将备份文件同步给灾备集群(亦称“备集群”),备集群用主集群传来的备份进行周期性恢复。备集群在恢复期间不可用,在非恢复期作为主集群的热备份存在,提供只读服务。当主集群不可用时,灾备集群可以代替主集群正常提供业务。 GaussDB(DWS)设计了双集群容灾的方案:分别部署两套同构的集群,集群间通过容灾任务进行周期性的物理数据同步。其中主集群提供正常的业务,进行周期性备份,并将备份文件同步给灾备集群(亦称“备集群”),备集群用主集群传来的备份进行周期性恢复。备集群在恢复期间不可用,在非恢复期作为主集群的热备份存在,提供只读服务。当主集群不可用时,灾备集群可以代替主集群正常提供业务。
- 本文旨在介绍DWS中存在的一些大小写不敏感函数,介绍大小写敏感GUC参数设置的使用和对应大小写敏感函数的结果展示。 本文旨在介绍DWS中存在的一些大小写不敏感函数,介绍大小写敏感GUC参数设置的使用和对应大小写敏感函数的结果展示。
上滑加载中
推荐直播
-
DeepSeek行业运用方案
2025/02/25 周二 16:30-17:30
阿肯-华为云生态技术讲师
本期课程将带您揭秘DeepSeek在多行业的创新方案,手把手演示如何通过ModelArts在华为云上构建方案。
回顾中 -
华为云 x DeepSeek:AI驱动云上应用创新
2025/02/26 周三 16:00-18:00
华为云 AI专家大咖团
在 AI 技术飞速发展之际,DeepSeek 备受关注。它凭借哪些技术与理念脱颖而出?华为云与 DeepSeek 合作,将如何重塑产品与应用模式,助力企业数字化转型?在华为开发者空间,怎样高效部署 DeepSeek,搭建专属服务器?基于华为云平台,又该如何挖掘 DeepSeek 潜力,实现智能化升级?本期直播围绕DeepSeek在云上的应用案例,与DTSE布道师们一起探讨如何利用AI 驱动云上应用创新。
去报名
热门标签