- 华为云最强参会攻略，不容错过！ 华为云最强参会攻略，不容错过！
- 问题描述：有hiveserver反复处于恢复中，分析该hiveserver日志发现频繁的FullGC，hiveserver的GC配置为64GB。问题分析：1. 观察hiveserver监控，发现在较短时间内hiveserver内存使用率快速升高。根据内存骤升初步推测为业务导致。2. 取得hiveserver故障节点对应的内存dump日志 及 hiveserver运行日志进... 问题描述：有hiveserver反复处于恢复中，分析该hiveserver日志发现频繁的FullGC，hiveserver的GC配置为64GB。问题分析：1. 观察hiveserver监控，发现在较短时间内hiveserver内存使用率快速升高。根据内存骤升初步推测为业务导致。2. 取得hiveserver故障节点对应的内存dump日志 及 hiveserver运行日志进...
- 2021年4月21日，中国太平洋保险集团联合华为云完成全球首例大数据集群跨多版本滚动升级，突破传统方案需离线停机多次升级模式，一次性将现网集群由FusionInsight HD C70升级到FusionInsight MRS 8.0.2，横跨C80、6.5.1两个版本，同时完成了大数据集群从物理机向云服务的模式转变，实现同业首例突破，升级过程业务无感，全程集群作业无中断、性能无影响。 2021年4月21日，中国太平洋保险集团联合华为云完成全球首例大数据集群跨多版本滚动升级，突破传统方案需离线停机多次升级模式，一次性将现网集群由FusionInsight HD C70升级到FusionInsight MRS 8.0.2，横跨C80、6.5.1两个版本，同时完成了大数据集群从物理机向云服务的模式转变，实现同业首例突破，升级过程业务无感，全程集群作业无中断、性能无影响。
- 易筋经源于我国古代中医导引术,具有强健体魄、预防疾病的效果,长期以来在佛家及民间习武人士之间广为流传。算法练习的本质也在于锻炼编程思维，强化程序员的内力。因此给自己后面会持续更新的算法技巧内容简称算法易筋经。无论你使用什么语言开始训练算法， 总是得掌握基本的。 我这边只以java举例，其他语言类似。以leetcode类型的平台为主。 java数组和list互转有时候给定的输入是个数组，中间过... 易筋经源于我国古代中医导引术,具有强健体魄、预防疾病的效果,长期以来在佛家及民间习武人士之间广为流传。算法练习的本质也在于锻炼编程思维，强化程序员的内力。因此给自己后面会持续更新的算法技巧内容简称算法易筋经。无论你使用什么语言开始训练算法， 总是得掌握基本的。 我这边只以java举例，其他语言类似。以leetcode类型的平台为主。 java数组和list互转有时候给定的输入是个数组，中间过...
- MRS3.1.1-LTS版HetuEngine新特性: 新增UDF SQL语法，支持Remote UDF计算下推. 是跨源跨域解决方案的关键部分，满足无限膨胀的第三方异构数据源UDF匹配需求. 同时, 在使用新语法CREATE/DROP FUNCTION语法后,不需要重启任何的服务或者计算集群就能生效, 减少使用的成本。 MRS3.1.1-LTS版HetuEngine新特性: 新增UDF SQL语法，支持Remote UDF计算下推. 是跨源跨域解决方案的关键部分，满足无限膨胀的第三方异构数据源UDF匹配需求. 同时, 在使用新语法CREATE/DROP FUNCTION语法后,不需要重启任何的服务或者计算集群就能生效, 减少使用的成本。
- 定时任务在数据库运维的很多场景下，是一个十分重要的工具，例如用户希望周期性地执行某个运维操作，或者为了不影响白天的正常业务，希望将某个运维操作放到深夜自动执行。针对这些场景，GaussDB(DWS) 内置了定时任务功能。用户创建的定时任务能够周期性地自动触发，从而减少了用户的工作量。 如何使用？GaussDB(DWS) 中对定时任务的各种操作，被封装成了函数，放在 DBMS_JOB 高级包中... 定时任务在数据库运维的很多场景下，是一个十分重要的工具，例如用户希望周期性地执行某个运维操作，或者为了不影响白天的正常业务，希望将某个运维操作放到深夜自动执行。针对这些场景，GaussDB(DWS) 内置了定时任务功能。用户创建的定时任务能够周期性地自动触发，从而减少了用户的工作量。 如何使用？GaussDB(DWS) 中对定时任务的各种操作，被封装成了函数，放在 DBMS_JOB 高级包中...
- HetuEngine依托Hadoop集群中的Yarn-Service进行资源管理，实现计算实例的租户级资源隔离。用户在某些业务场景下需要经常对计算实例或者数据源进行增删改查和批量更新，此类频繁操作需要以非界面方式实现，HetuEngine开放了相关REST API，便于对计算实例和数据源管理。具体接口内容请参考《华为云Stack 8.0.3 MapReduce服务（3.1.1-LTS）Het... HetuEngine依托Hadoop集群中的Yarn-Service进行资源管理，实现计算实例的租户级资源隔离。用户在某些业务场景下需要经常对计算实例或者数据源进行增删改查和批量更新，此类频繁操作需要以非界面方式实现，HetuEngine开放了相关REST API，便于对计算实例和数据源管理。具体接口内容请参考《华为云Stack 8.0.3 MapReduce服务（3.1.1-LTS）Het...
- 1、概述 GDS是DWS的并行加载工具。原理是通过gds与dn建立连接、发送数据到dn端，然后dn端再通过hash算法对数据进行redistribute，从而实现数据入库，核心思想是充分利用所有节点的计算能力和I/O能力，以提升性能。GaussDB(DWS)的数据并行导入实现了对指定格式（支持CSV/TEXT格式）的外部数据高速、并行入库。所谓高速、并行入库是和传统的使用INSERT语句... 1、概述 GDS是DWS的并行加载工具。原理是通过gds与dn建立连接、发送数据到dn端，然后dn端再通过hash算法对数据进行redistribute，从而实现数据入库，核心思想是充分利用所有节点的计算能力和I/O能力，以提升性能。GaussDB(DWS)的数据并行导入实现了对指定格式（支持CSV/TEXT格式）的外部数据高速、并行入库。所谓高速、并行入库是和传统的使用INSERT语句...
- GaussDB(DWS) 的负荷诊断报告（Workload Diagnosis Report，以下简称WDR）功能，可以提供指定时间段内的性能数据，以html网页报告的形式呈现给用户。通过分析该报告，能够帮助用户发现异常、诊断问题、优化性能等，其内容丰富直观，是数据库调优的利器。本文对WDR的原理和使用方法进行简要介绍。通过本文，读者可知晓什么是WDR，如何创建性能数据快照生成报告。 GaussDB(DWS) 的负荷诊断报告（Workload Diagnosis Report，以下简称WDR）功能，可以提供指定时间段内的性能数据，以html网页报告的形式呈现给用户。通过分析该报告，能够帮助用户发现异常、诊断问题、优化性能等，其内容丰富直观，是数据库调优的利器。本文对WDR的原理和使用方法进行简要介绍。通过本文，读者可知晓什么是WDR，如何创建性能数据快照生成报告。
- 文档版式分析任务中，文档的视觉信息、文本信息、各版式部件间的关系信息都对分析过程具有很重要的作用。本文提出一种融合视觉、文本、关系多模态信息的版式分析架构VSR。 文档版式分析任务中，文档的视觉信息、文本信息、各版式部件间的关系信息都对分析过程具有很重要的作用。本文提出一种融合视觉、文本、关系多模态信息的版式分析架构VSR。
- DLI权限管理主要分为3块，DLI服务权限控制、IAM用户权限控制、企业项目权限控制。只要存在deny的权限则鉴权结果为deny；如果没有deny，并且存在allow则鉴权结果为allow；如果没有deny，也没有allow则鉴权结果也为deny。 用户信息：用户界面的me接口会返回用户信息以及一些角色信息。角色中有op_ecp说明在企业项目授权了。op_fine_grained说明支持细粒... DLI权限管理主要分为3块，DLI服务权限控制、IAM用户权限控制、企业项目权限控制。只要存在deny的权限则鉴权结果为deny；如果没有deny，并且存在allow则鉴权结果为allow；如果没有deny，也没有allow则鉴权结果也为deny。 用户信息：用户界面的me接口会返回用户信息以及一些角色信息。角色中有op_ecp说明在企业项目授权了。op_fine_grained说明支持细粒...
- 1. TransETransE是为了解决知识图谱中关系数据而提出的算法，其核心思想是将知识图谱中的关系relation和实体entity进行向量化表示，通过不断学习调整head、relation、tail的向量表示，使head + relation尽可能与tail相等，即head + relation = tail。适用于将知识图谱中的每条知识进行低维稠密化表示。2. TransH3. Tr... 1. TransETransE是为了解决知识图谱中关系数据而提出的算法，其核心思想是将知识图谱中的关系relation和实体entity进行向量化表示，通过不断学习调整head、relation、tail的向量表示，使head + relation尽可能与tail相等，即head + relation = tail。适用于将知识图谱中的每条知识进行低维稠密化表示。2. TransH3. Tr...
- 一、什么是分区表分区表是将数据基于范围映射到每一个分区，范围在是由创建时指定的分区键决定的，通常分区键采用时间、日期等。同时普通表无法转换为分区表，只能通过创建新的分区表将普通表中的数据导入到分区表中。所以需要根据业务提前规划是否使用分区表。二、分区表的优势分区表相比较普通表的优势十分显著，主要包括一些几个方面。改善查询性能：对分区对象的查询可以仅搜索自己关心的分区，很大程度上提高检索效率。 一、什么是分区表分区表是将数据基于范围映射到每一个分区，范围在是由创建时指定的分区键决定的，通常分区键采用时间、日期等。同时普通表无法转换为分区表，只能通过创建新的分区表将普通表中的数据导入到分区表中。所以需要根据业务提前规划是否使用分区表。二、分区表的优势分区表相比较普通表的优势十分显著，主要包括一些几个方面。改善查询性能：对分区对象的查询可以仅搜索自己关心的分区，很大程度上提高检索效率。
- 1 Hive分区分桶1.1 分区分区概念在逻辑上分区表与未分区表没有区别，在物理上分区表会将数据按照分区键的列值存储在表目录的子目录中，目录名=“分区键=键值”。其中需要注意的是分区键的值不一定要基于表的某一列（字段），它可以指定任意值，只要查询的时候指定相应的分区键来查询即可。我们可以对分区进行添加、删除、重命名、清空等操作。分为静态分区和动态分区两种，静态分区与动态分区的主要区别在于静... 1 Hive分区分桶1.1 分区分区概念在逻辑上分区表与未分区表没有区别，在物理上分区表会将数据按照分区键的列值存储在表目录的子目录中，目录名=“分区键=键值”。其中需要注意的是分区键的值不一定要基于表的某一列（字段），它可以指定任意值，只要查询的时候指定相应的分区键来查询即可。我们可以对分区进行添加、删除、重命名、清空等操作。分为静态分区和动态分区两种，静态分区与动态分区的主要区别在于静...
- 本文基于MRS-3.1.0 版本的HetuEngine样例代码https://github.com/huaweicloud/huaweicloud-mrs-example/blob/mrs-3.1.0/src/hetu-examples/hetu-examples-security/src/main/java/com/huawei/presto/JDBCExampleBroker.java使... 本文基于MRS-3.1.0 版本的HetuEngine样例代码https://github.com/huaweicloud/huaweicloud-mrs-example/blob/mrs-3.1.0/src/hetu-examples/hetu-examples-security/src/main/java/com/huawei/presto/JDBCExampleBroker.java使...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新，构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间，华为云展示了Serverless与MCP融合创新的解决方案，本期访谈直播，由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持，华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中，探讨处理器生态的关键要素及其联系，分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源，3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源，3步轻松管理成本，帮助提升日常管理效率！
回顾中
热门标签