- 华为云的 数据湖Catalog(DLCatalog)是基于华为云的 统一身份认证(IAM)进行的用户管理和认证,那么对于非华为云IAM体系的外部用户(例如 Hadoop Kerberos 用户),如何来访问DLCatalog服务并实现DLCatalog服务的访问控制呢?对DLCatalog而言,在内部使用IAM的DLCatalog策略实现DLCatalog资源的细粒度访问控制;那么从外部来看... 华为云的 数据湖Catalog(DLCatalog)是基于华为云的 统一身份认证(IAM)进行的用户管理和认证,那么对于非华为云IAM体系的外部用户(例如 Hadoop Kerberos 用户),如何来访问DLCatalog服务并实现DLCatalog服务的访问控制呢?对DLCatalog而言,在内部使用IAM的DLCatalog策略实现DLCatalog资源的细粒度访问控制;那么从外部来看...
- 实时TopSQL,历史TopSQL 实时TopSQL,历史TopSQL
- 数据湖探索(DLI)服务是一站式的流处理、批处理分析的Serverless融合处理分析服务,对于PySpark是原生支持的,那么在DLI中我们如何更好的运行复杂PySpark程序呢? 对于数据分析来说Python是很自然的选择,而在大数据分析中PySpark无疑是不二选择。对于JVM语言系的程序我们通常会把程序打成Jar包并依赖其他一些第三方的Jar,同样的Py... 数据湖探索(DLI)服务是一站式的流处理、批处理分析的Serverless融合处理分析服务,对于PySpark是原生支持的,那么在DLI中我们如何更好的运行复杂PySpark程序呢? 对于数据分析来说Python是很自然的选择,而在大数据分析中PySpark无疑是不二选择。对于JVM语言系的程序我们通常会把程序打成Jar包并依赖其他一些第三方的Jar,同样的Py...
- VACUUM回收表或B-Tree索引中已经删除的行所占据的存储空间。 ANAL用于收集与数据库中普通表内容相关的统计信息,统计结果存储在系统表PG_STATISTIC下。执行计划生成器会使用这些统计数据,以确定最有效的执行计划。 数据倾斜会造成查询表性能下降。 VACUUM回收表或B-Tree索引中已经删除的行所占据的存储空间。 ANAL用于收集与数据库中普通表内容相关的统计信息,统计结果存储在系统表PG_STATISTIC下。执行计划生成器会使用这些统计数据,以确定最有效的执行计划。 数据倾斜会造成查询表性能下降。
- 华为云弹性云服务器的ECS主机有多种flavor可供选择,当用户选择的ECS主机包含两块及以上网卡的时候,如图所示,该机器配有三块网卡,为了与外网通讯,会给某块网卡配置EIP,一般情况下,当配置完EIP后服务即可进行正常的网络访问请求,但有一种情况需要考虑,当服务所监听的网卡和EIP不在一块网卡上时,会出现服务请求失败的情况,此时需要根据实际情况定位问题。首先要看服务进程有没有起来,ps -... 华为云弹性云服务器的ECS主机有多种flavor可供选择,当用户选择的ECS主机包含两块及以上网卡的时候,如图所示,该机器配有三块网卡,为了与外网通讯,会给某块网卡配置EIP,一般情况下,当配置完EIP后服务即可进行正常的网络访问请求,但有一种情况需要考虑,当服务所监听的网卡和EIP不在一块网卡上时,会出现服务请求失败的情况,此时需要根据实际情况定位问题。首先要看服务进程有没有起来,ps -...
- 在规范设计-模型设计功能中,用户除了可以使用我们内置的表属性项以外,也可以按需使用自定义项功能,为表添加属性。表的自定义项也会作为用户的业务资产属性,同步至数据资产模块。目前,支持该项功能的对象有:关系建模-业务表、维度建模-维度(表)、维度建模-事实表以及维度建模-汇总表。如何使用该功能?请参考以下步骤:在规范设计左边导航栏中,选择进入配置中心;在顶部标签中选择模型配置;点击"表自定义项"... 在规范设计-模型设计功能中,用户除了可以使用我们内置的表属性项以外,也可以按需使用自定义项功能,为表添加属性。表的自定义项也会作为用户的业务资产属性,同步至数据资产模块。目前,支持该项功能的对象有:关系建模-业务表、维度建模-维度(表)、维度建模-事实表以及维度建模-汇总表。如何使用该功能?请参考以下步骤:在规范设计左边导航栏中,选择进入配置中心;在顶部标签中选择模型配置;点击"表自定义项"...
- 前提:已有同一VPC下MRS、DWS集群1、创建好MRS数据源后,进入MRS数据源详情页面,可以看到节点信息,2、 点击Master1,设置安全组(在安全组中设置any规则);绑定弹性IP3.1 从Master1绑定的EIP,远程登录到Master1节点或者可以用MobaXterm工具连接MRS绑定的EIP:常见错误 :Eip能ping通,但是ssh linux@EIP登录失败 可以采用私有... 前提:已有同一VPC下MRS、DWS集群1、创建好MRS数据源后,进入MRS数据源详情页面,可以看到节点信息,2、 点击Master1,设置安全组(在安全组中设置any规则);绑定弹性IP3.1 从Master1绑定的EIP,远程登录到Master1节点或者可以用MobaXterm工具连接MRS绑定的EIP:常见错误 :Eip能ping通,但是ssh linux@EIP登录失败 可以采用私有...
- DAYU通过开放架构,联合伙伴,共同帮助客户实现数字化转型。 DAYU的开放性体现在: 支持模型资产沉淀 、 支持通过标准API与伙伴集成。 DAYU 数据开发模块中三种和外部系统对接的方式:提供数据开发API、提供RestClient算子、提供事件驱动调度能力。 DAYU通过开放架构,联合伙伴,共同帮助客户实现数字化转型。 DAYU的开放性体现在: 支持模型资产沉淀 、 支持通过标准API与伙伴集成。 DAYU 数据开发模块中三种和外部系统对接的方式:提供数据开发API、提供RestClient算子、提供事件驱动调度能力。
- HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。HBase设计目标是用来解决关系型数据库在处理海量数据时的局限性。本文介绍 HBase thrift接口调用样例。 HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。HBase设计目标是用来解决关系型数据库在处理海量数据时的局限性。本文介绍 HBase thrift接口调用样例。
- HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。HBase设计目标是用来解决关系型数据库在处理海量数据时的局限性。本文介绍HBase Rest接口调用样例。 HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。HBase设计目标是用来解决关系型数据库在处理海量数据时的局限性。本文介绍HBase Rest接口调用样例。
- HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。HBase设计目标是用来解决关系型数据库在处理海量数据时的局限性。本文介绍HBase 通用API样例。 HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。HBase设计目标是用来解决关系型数据库在处理海量数据时的局限性。本文介绍HBase 通用API样例。
- HetuEngine是一个高性能的分布式SQL查询引擎,支持多集群的Hive数据源的交叉查询,支持CLI和JDBC客户端两种访问模式。本文介绍Hetu的JDBC接口调用样例。 HetuEngine是一个高性能的分布式SQL查询引擎,支持多集群的Hive数据源的交叉查询,支持CLI和JDBC客户端两种访问模式。本文介绍Hetu的JDBC接口调用样例。
- Hive是一个开源的,建立在Hadoop上的数据仓库框架,提供类似SQL的HQL语言操作结构化数据,其基本原理是将HQL语言自动转换成Mapreduce任务或Spark任务,从而完成对Hadoop集群中存储的海量数据进行查询和分析。本文介绍Hive的JDBC接口调用样例。 Hive是一个开源的,建立在Hadoop上的数据仓库框架,提供类似SQL的HQL语言操作结构化数据,其基本原理是将HQL语言自动转换成Mapreduce任务或Spark任务,从而完成对Hadoop集群中存储的海量数据进行查询和分析。本文介绍Hive的JDBC接口调用样例。
- Hive是一个开源的,建立在Hadoop上的数据仓库框架,提供类似SQL的HQL语言操作结构化数据,其基本原理是将HQL语言自动转换成Mapreduce任务或Spark任务,从而完成对Hadoop集群中存储的海量数据进行查询和分析。本文介绍Hive的HCatalog接口调用样例。 Hive是一个开源的,建立在Hadoop上的数据仓库框架,提供类似SQL的HQL语言操作结构化数据,其基本原理是将HQL语言自动转换成Mapreduce任务或Spark任务,从而完成对Hadoop集群中存储的海量数据进行查询和分析。本文介绍Hive的HCatalog接口调用样例。
- MapReduce是一个并行计算软件框架,,一个MapReduce作业(application/job)通常会把输入的数据集切分为若干独立的数据块,由map任务(task)以完全并行的方式来处理。框架会对map的输出先进行排序,然后把结果输入给reduce任务,最后返回给客户端。本文介绍MapReduce多组件样例。 MapReduce是一个并行计算软件框架,,一个MapReduce作业(application/job)通常会把输入的数据集切分为若干独立的数据块,由map任务(task)以完全并行的方式来处理。框架会对map的输出先进行排序,然后把结果输入给reduce任务,最后返回给客户端。本文介绍MapReduce多组件样例。
上滑加载中
推荐直播
-
AI编码实干派,“码”力全开2026/02/26 周四 15:00-16:30
谈宗玮/于邦旭/丁俊卿/陈云亮/王一男
【中国,深圳,2026年2月26日】,以“AI编码实干派,码力全开”为主题的华为云码道(CodeArts)代码智能体新春发布会在线上成功召开。华为云码道公测版正式发布,为开发者和企业提供具备工程化能力的智能编码解决方案。
回顾中 -
华为云码道-玩转OpenClaw,在线养虾2026/03/11 周三 19:00-21:00
刘昱,华为云高级工程师/谈心,华为云技术专家/李海仑,上海圭卓智能科技有限公司CEO
OpenClaw 火爆开发者圈,华为云码道最新推出 Skill ——开发者只需输入一句口令,即可部署一个功能完整的「小龙虾」智能体。直播带你玩转华为云码道,玩转OpenClaw
回顾中 -
华为云码道-AI时代应用开发利器2026/03/18 周三 19:00-20:00
童得力,华为云开发者生态运营总监/姚圣伟,华为云HCDE开发者专家
本次直播由华为专家带你实战应用开发,看华为云码道(CodeArts)代码智能体如何在AI时代让你的创意应用快速落地。更有华为云HCDE开发者专家带你用码道玩转JiuwenClaw,让小艺成为你的AI助理。
回顾中
热门标签