- 本文主要是自动重建功能与REPLACE的使用场景与使用方法的介绍。 本文主要是自动重建功能与REPLACE的使用场景与使用方法的介绍。
- Spark 开源新特性：Catalyst 优化流程裁剪 1. 问题背景上图是典型的Spark Catalyst优化器的布局，一条由用户输入的SQL，到真实可调度执行的RDD DAG任务，需要经历以下五个阶段：Parser: 将SQL解析成相应的抽象语法树(AST)，spark也称为 Unresolved Logical Plan；Analyzer: 通过查找Metadata的Catalog... Spark 开源新特性：Catalyst 优化流程裁剪 1. 问题背景上图是典型的Spark Catalyst优化器的布局，一条由用户输入的SQL，到真实可调度执行的RDD DAG任务，需要经历以下五个阶段：Parser: 将SQL解析成相应的抽象语法树(AST)，spark也称为 Unresolved Logical Plan；Analyzer: 通过查找Metadata的Catalog...
- 1.LLVM是什么？LLVM这个名字最早源于底层虚拟机（Low Level VirTual Machine）的首字母缩写，但随着LLVM项目的演进，底层虚拟机的含义已经不再适用于LLVM。现在谈到LLVM，广义上讲就是指LLVM本身，它是一套用于开发编译前段与后端的工具套件，狭义上讲LLVM就是指整个编译套件的优化器及后端，而CLANG可以认为是C/C++的前端。 2.LLVM的优势？传统... 1.LLVM是什么？LLVM这个名字最早源于底层虚拟机（Low Level VirTual Machine）的首字母缩写，但随着LLVM项目的演进，底层虚拟机的含义已经不再适用于LLVM。现在谈到LLVM，广义上讲就是指LLVM本身，它是一套用于开发编译前段与后端的工具套件，狭义上讲LLVM就是指整个编译套件的优化器及后端，而CLANG可以认为是C/C++的前端。 2.LLVM的优势？传统...
- 该文章从内核角度介绍负载管控逻辑。重点介绍内存和并发管控。 该文章从内核角度介绍负载管控逻辑。重点介绍内存和并发管控。
- HBase是Hadoop Database的简称，是建立在Hadoop文件系统之上的分布式面向列的数据库，它具有高可靠、高性能、面向列和可伸缩的特性，提供快速随机访问海量数据能力。 当HBase集群规模越来越大时，发现故障恢复时间较长。本文重点分析了故障恢复问题和耗时阶段，针对耗时进行了对应优化；最后总结了优化配置提升HBase MTTR效率。 HBase是Hadoop Database的简称，是建立在Hadoop文件系统之上的分布式面向列的数据库，它具有高可靠、高性能、面向列和可伸缩的特性，提供快速随机访问海量数据能力。 当HBase集群规模越来越大时，发现故障恢复时间较长。本文重点分析了故障恢复问题和耗时阶段，针对耗时进行了对应优化；最后总结了优化配置提升HBase MTTR效率。
- 在大家练习算法题的收获， 究竟应该从中收获什么？ 在大家练习算法题的收获， 究竟应该从中收获什么？
- 1. DeepWalkDeepWalk算法开创性的将NLP领域词嵌入的思想引入了图结构，基于Word2vec模型，将图中各节点用一个低维向量表示。为了配合Skip-gram模型的输入要求，DeepWalk算法中利用Random walk采样方法来对每一节点进行采样，将采样得到的节点序列当作NLP中的语句送入Skip-gram模型进行训练，从而得到各节点的d-dim低维嵌入式表示。2. Nod... 1. DeepWalkDeepWalk算法开创性的将NLP领域词嵌入的思想引入了图结构，基于Word2vec模型，将图中各节点用一个低维向量表示。为了配合Skip-gram模型的输入要求，DeepWalk算法中利用Random walk采样方法来对每一节点进行采样，将采样得到的节点序列当作NLP中的语句送入Skip-gram模型进行训练，从而得到各节点的d-dim低维嵌入式表示。2. Nod...
- 数据库智能运维（DMS）是一个为GaussDB（DWS）数据库提供多维度监控服务的系统，能够对数据库运行所依赖的磁盘、网络、操作系统及其运行的关键性能指标进行收集和监控，再经过综合分析和处理，将数据库各类原子指标、派生指标和组合指标呈现给用户，并对数据库主机、实例、业务SQL等进行诊断，及时暴露出数据库中关键故障及性能问题，指导用户进行优化和解决。 数据库智能运维（DMS）是一个为GaussDB（DWS）数据库提供多维度监控服务的系统，能够对数据库运行所依赖的磁盘、网络、操作系统及其运行的关键性能指标进行收集和监控，再经过综合分析和处理，将数据库各类原子指标、派生指标和组合指标呈现给用户，并对数据库主机、实例、业务SQL等进行诊断，及时暴露出数据库中关键故障及性能问题，指导用户进行优化和解决。
- 在部署dws中，常规方案一般是pod区+rds数据库，本次部署使用了，pod区+dbm数据库部署的方式，相对特殊。 在部署dws中，常规方案一般是pod区+rds数据库，本次部署使用了，pod区+dbm数据库部署的方式，相对特殊。
- 由于历史原因，在集群做增量备份的场景下，CN仍然采用全量的备份方式。这样随着数据量的增加，CN总是以全量进行备份必然会成为容灾性能的短板。因此，为了解决Roach的性能问题，提出了CN增量备份手段，从而达到进一步优化RPO目的. 由于历史原因，在集群做增量备份的场景下，CN仍然采用全量的备份方式。这样随着数据量的增加，CN总是以全量进行备份必然会成为容灾性能的短板。因此，为了解决Roach的性能问题，提出了CN增量备份手段，从而达到进一步优化RPO目的.
- GaussDB(DWS）作为一款运行在华为云上的核心数据仓库，客户大量的数据存储在DWS的数据节点中，DWS不仅拥有海量数据查询的极致性能，在安全方面还需要有加固防护措施。当前数据库都是多个用户共同访问数据，这些数据都具有重要价值，关系到用户的核心资产和用户隐私，如何禁止别有用心的用户窃取以及黑客攻击，本课程给您提供数据的安全管理方法。云数仓安全层层防护云数仓外部：由华为云的云安全管理产品保... GaussDB(DWS）作为一款运行在华为云上的核心数据仓库，客户大量的数据存储在DWS的数据节点中，DWS不仅拥有海量数据查询的极致性能，在安全方面还需要有加固防护措施。当前数据库都是多个用户共同访问数据，这些数据都具有重要价值，关系到用户的核心资产和用户隐私，如何禁止别有用心的用户窃取以及黑客攻击，本课程给您提供数据的安全管理方法。云数仓安全层层防护云数仓外部：由华为云的云安全管理产品保...
- NULL（空值）是数据库中对数据属性未知或缺失的一种标识，用于指示数据库中不存在的数据值。当图数据库中图数据的某个节点或边的属性值缺失或未定义时，该属性值即为NULL。 NULL（空值）是数据库中对数据属性未知或缺失的一种标识，用于指示数据库中不存在的数据值。当图数据库中图数据的某个节点或边的属性值缺失或未定义时，该属性值即为NULL。
- 华为HiLens是端云协同多模态AI开发应用平台，提供给开发者的多语言类集成开发环境HiLens Studio，开发者可以在HiLens Studio 中编写和调试技能代码。HiLens Studio分为基础版和专业版，您可以根据业务所需选择订购。 华为HiLens是端云协同多模态AI开发应用平台，提供给开发者的多语言类集成开发环境HiLens Studio，开发者可以在HiLens Studio 中编写和调试技能代码。HiLens Studio分为基础版和专业版，您可以根据业务所需选择订购。
- Nodeagent是GaussDB(DWS)管理系统Fi Manager采集数据节点状态信息，运维操作（如启停集群、启停实例）下发命令到数据节点的重要工作线程。 Controller按30秒周期检测NodeAgent心跳。当Controller未接收到某一个NodeAgent的心跳，则尝试重启该NodeAgent进程，如果连续三次重启失败，认为该节点产生故障。 Nodeagent是GaussDB(DWS)管理系统Fi Manager采集数据节点状态信息，运维操作（如启停集群、启停实例）下发命令到数据节点的重要工作线程。 Controller按30秒周期检测NodeAgent心跳。当Controller未接收到某一个NodeAgent的心跳，则尝试重启该NodeAgent进程，如果连续三次重启失败，认为该节点产生故障。
- 数据膨胀，指的是物理数据文件的大小明显高于实际存储的数据量。甚至某些特殊场景下，一个表中只有一条简单的数据，但是表对应的物理文件可能已经达到M级甚至G级。为了解决数据膨胀，GaussDB(DWS)通过vacuum和FSM来清理和重用物理空间。本文简单介绍FSM的设计和原理，并通过一个例子对FSM功能进行简单的测试和验证。 数据膨胀，指的是物理数据文件的大小明显高于实际存储的数据量。甚至某些特殊场景下，一个表中只有一条简单的数据，但是表对应的物理文件可能已经达到M级甚至G级。为了解决数据膨胀，GaussDB(DWS)通过vacuum和FSM来清理和重用物理空间。本文简单介绍FSM的设计和原理，并通过一个例子对FSM功能进行简单的测试和验证。
上滑加载中
推荐直播
-
GaussDB管理平台TPOPS，DBA高效运维的一站式解决方案2024/12/24 周二 16:30-18:00
Leo 华为云数据库DTSE技术布道师
数据库的复杂运维，是否让你感到头疼不已？今天，华为云GaussDB管理平台将彻底来改观！本期直播，我们将深入探索GaussDB管理平台的TPOPS功能，带你感受一键式部署安装的便捷，和智能化运维管理的高效，让复杂的运维、管理变得简单，让简单变得可靠。
回顾中 -
DTT年度收官盛典：华为开发者空间大咖汇，共探云端开发创新2025/01/08 周三 16:30-18:00
Yawei 华为云开发工具和效率首席专家 Edwin 华为开发者空间产品总监
数字化转型进程持续加速，驱动着技术革新发展，华为开发者空间如何巧妙整合鸿蒙、昇腾、鲲鹏等核心资源，打破平台间的壁垒，实现跨平台协同？在科技迅猛发展的今天，开发者们如何迅速把握机遇，实现高效、创新的技术突破？DTT 年度收官盛典，将与大家共同探索华为开发者空间的创新奥秘。
回顾中
热门标签