- 雏形开始于2002年的Apache的Nutch,Nutch是一个开源Java 实现的搜索引擎 雏形开始于2002年的Apache的Nutch,Nutch是一个开源Java 实现的搜索引擎
- 本文接 [数据仓库]双集群系统方案探讨 展开讨论一下GaussDB(DWS)的容灾应该如何设计。 日志同步技术: 列存数据不记日志无法通过日志来同步支持列存xlog后会导致导入性能劣化,xlog数据量大,同时会影响日志同步效率 备份增量同步技术:无法达到 RPO = 0备集群只能读,无法支持写操作 逻辑数据同步技术:列存数据需要支持逻辑解码,需要从列存XLog的方向进行演进分布式事务,DDL... 本文接 [数据仓库]双集群系统方案探讨 展开讨论一下GaussDB(DWS)的容灾应该如何设计。 日志同步技术: 列存数据不记日志无法通过日志来同步支持列存xlog后会导致导入性能劣化,xlog数据量大,同时会影响日志同步效率 备份增量同步技术:无法达到 RPO = 0备集群只能读,无法支持写操作 逻辑数据同步技术:列存数据需要支持逻辑解码,需要从列存XLog的方向进行演进分布式事务,DDL...
- 背景及现象描述(Background and Symptom)*1. 环境信息:GaussDB A 8.0.0版本12节点集群2. 问题现象:客户反映业务执行慢,原本几分钟的业务一个小时都跑不完,造成大量业务累计。 3. 分析过程1. 初步分析为客户连接数过高导致IO高,限制连接数后IO稍有回落,后续IO又升高至95%以上且限制连接数后严重影响用户... 背景及现象描述(Background and Symptom)*1. 环境信息:GaussDB A 8.0.0版本12节点集群2. 问题现象:客户反映业务执行慢,原本几分钟的业务一个小时都跑不完,造成大量业务累计。 3. 分析过程1. 初步分析为客户连接数过高导致IO高,限制连接数后IO稍有回落,后续IO又升高至95%以上且限制连接数后严重影响用户...
- 介绍了系统表膨胀时的清理方法及注意事项。 介绍了系统表膨胀时的清理方法及注意事项。
- 为了方便您配置数据库参数,GaussDB(DWS) 提供了参数模板的功能,参数模板中包含了一些常用的数据库参数。您可以直接在GaussDB(DWS) 管理控制台上管理参数模板,将参数模板应用到集群后,可以直接在集群的“参数修改”页面中修改参数。一、参数模板概述 参数模板是一组适用于数据仓库的参数,模板中的参数都设置了默认值,这些参数包括会话超时时间、日期和时间格式等。通过调整... 为了方便您配置数据库参数,GaussDB(DWS) 提供了参数模板的功能,参数模板中包含了一些常用的数据库参数。您可以直接在GaussDB(DWS) 管理控制台上管理参数模板,将参数模板应用到集群后,可以直接在集群的“参数修改”页面中修改参数。一、参数模板概述 参数模板是一组适用于数据仓库的参数,模板中的参数都设置了默认值,这些参数包括会话超时时间、日期和时间格式等。通过调整...
- Spark on RDMA指在Spark计算的shuffle过程中采用RDMA的技术来加快shuffle数据的传输以加快数据处理的计算性能。而目前常用的RDMA设备由IB及Mellanox,本文中采用的为Mellanox的网卡及SparkRDMA套件。1.SparkRDMA及Hibench套件的下载SparkRDMA的下载地址为 https://github.com/Mellanox/Spa... Spark on RDMA指在Spark计算的shuffle过程中采用RDMA的技术来加快shuffle数据的传输以加快数据处理的计算性能。而目前常用的RDMA设备由IB及Mellanox,本文中采用的为Mellanox的网卡及SparkRDMA套件。1.SparkRDMA及Hibench套件的下载SparkRDMA的下载地址为 https://github.com/Mellanox/Spa...
- 安全威胁以及解决方法(横线后面的就是解决方法)§ Spoofing 仿冒——认证搞一个克隆的手机号, 接入到公用wifi中看违反视频干违法之事,然后另一个人背锅了 ( 外部交互方)—— 手机短信验证码接入, 或者ssl证书双向认证公用wifi被我替换成了仿冒的同名假wifi, 其他手机就误接进来了,我就能偷偷知道谁在下小黄片了 (处理过程), 或者是搞了个假的淘宝,让别人点进来—— ssl双... 安全威胁以及解决方法(横线后面的就是解决方法)§ Spoofing 仿冒——认证搞一个克隆的手机号, 接入到公用wifi中看违反视频干违法之事,然后另一个人背锅了 ( 外部交互方)—— 手机短信验证码接入, 或者ssl证书双向认证公用wifi被我替换成了仿冒的同名假wifi, 其他手机就误接进来了,我就能偷偷知道谁在下小黄片了 (处理过程), 或者是搞了个假的淘宝,让别人点进来—— ssl双...
- Q:有几种方式可以启动安全管理器?A:两种方式隐式启动: 启动命令里加-Djava.security.manager, 即可开启安全管理器。显示启动: 代码里自己new一个SecurityManager或者继承一个新子类, 然后用System.setSecurityManager(xxxSecurityManager)来设置看以下代码:public class SecurityManager... Q:有几种方式可以启动安全管理器?A:两种方式隐式启动: 启动命令里加-Djava.security.manager, 即可开启安全管理器。显示启动: 代码里自己new一个SecurityManager或者继承一个新子类, 然后用System.setSecurityManager(xxxSecurityManager)来设置看以下代码:public class SecurityManager...
- TICS, 可信智能计算 TICS, 可信智能计算
- 在常规python程序使用gsql交互数据时,每次都需要重新连接数据库,然后再执行查询SQL,特别是Select,查询结果还想继续和数据库交互时,利用以下方式实现。 在常规python程序使用gsql交互数据时,每次都需要重新连接数据库,然后再执行查询SQL,特别是Select,查询结果还想继续和数据库交互时,利用以下方式实现。
- 数据仓库搬迁过程中,数据一致性校验比对解决方案阐述 数据仓库搬迁过程中,数据一致性校验比对解决方案阐述
- 在交通运输行业,民用航空无疑是“高大上”的典型代表。资料显示,全球航空业年直接产出超过 7 千亿美元,带动经济总量 2.7 万亿美元,是工业领域的重要支柱之一,也是传统行业中的明星与骄傲。近年来,随着云计算、大数据、人工智能等技术在 IT 产业掀起热潮,飞机制造商、航空公司和机场运营方都希望借助新一代 IT 技术解决业内现存的诸多困难与障碍,提供更加安全高效、成本合理的运输服务。在航空业数字... 在交通运输行业,民用航空无疑是“高大上”的典型代表。资料显示,全球航空业年直接产出超过 7 千亿美元,带动经济总量 2.7 万亿美元,是工业领域的重要支柱之一,也是传统行业中的明星与骄傲。近年来,随着云计算、大数据、人工智能等技术在 IT 产业掀起热潮,飞机制造商、航空公司和机场运营方都希望借助新一代 IT 技术解决业内现存的诸多困难与障碍,提供更加安全高效、成本合理的运输服务。在航空业数字...
- 机器学习之xgboost的优缺点 机器学习之xgboost的优缺点
- 背景 相关篇:Windows10配置运行Hadoop(非WSL模式)Hive的运行依赖HDFS,需要先准备好Hadoop部分的配置。 版本 OS:Windows 10 Pro 1903Java:1.8.0_231Hive:Hive-3.1.0.tar.gz(Apache官方源下载 https://archive.apache.org/dist/hive/hive-3.1.0/ )derby:... 背景 相关篇:Windows10配置运行Hadoop(非WSL模式)Hive的运行依赖HDFS,需要先准备好Hadoop部分的配置。 版本 OS:Windows 10 Pro 1903Java:1.8.0_231Hive:Hive-3.1.0.tar.gz(Apache官方源下载 https://archive.apache.org/dist/hive/hive-3.1.0/ )derby:...
- 介绍了NTP变更的实施方案及问题定位 介绍了NTP变更的实施方案及问题定位
上滑加载中
推荐直播
-
AI编码实干派,“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国,深圳,2026年2月26日】,以“AI编码实干派,码力全开”为主题的华为云码道(CodeArts)代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布,为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw,在线养虾2026/03/11 周三 19:00-21:00
刘昱,华为云高级工程师/谈心,华为云技术专家/李海仑,上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈,华为云码道最新推出 Skill ——开发者只需输入一句口令,即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道,玩转OpenClaw
回顾中 -
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力,华为云开发者生态运营总监/姚圣伟,华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发,看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw,让小艺成为你的AI助理。
回顾中
热门标签