- CarbonData中的物化视图的简单介绍及使用方法 CarbonData中的物化视图的简单介绍及使用方法
- 本文主要是通过Spark代码走读来了解spark-submit的流程 本文主要是通过Spark代码走读来了解spark-submit的流程
- 服务功能更新1.【新功能】支持交互式分析能力基于openLooKeng引擎，推出交互式查询能力，兼容业界著名的开源SQL引擎Presto生态，并持续在融合场景查询、跨数据中心/云、数据源扩展、性能、可靠性、安全性等方面发展，让数据治理、使用更简单。2．【新特性】Flink作业支持1.7/1.10多版本新上线Flink多版本能力，用户在提交作业时可以选择使用Flink1.7或者1.10版本，丰... 服务功能更新1.【新功能】支持交互式分析能力基于openLooKeng引擎，推出交互式查询能力，兼容业界著名的开源SQL引擎Presto生态，并持续在融合场景查询、跨数据中心/云、数据源扩展、性能、可靠性、安全性等方面发展，让数据治理、使用更简单。2．【新特性】Flink作业支持1.7/1.10多版本新上线Flink多版本能力，用户在提交作业时可以选择使用Flink1.7或者1.10版本，丰...
- ECS节点添加永久路由方法，亲测有效 ECS节点添加永久路由方法，亲测有效
- 当我们需要同时执行多个任务、并且不会因为其中一个任务的执行时间漫长而陷入阻塞，就需要用到并发，也即多线程。Java中的并发实现主要在java.util.concurrent包中，Future这个概念其实Java里也有。Scala是在Java的基础上实现的函数式编程语言，所以Scala也可以调用Java API。今天会介绍Scala并发中应用比较多的两个概念——Future、ExecutionCon 当我们需要同时执行多个任务、并且不会因为其中一个任务的执行时间漫长而陷入阻塞，就需要用到并发，也即多线程。Java中的并发实现主要在java.util.concurrent包中，Future这个概念其实Java里也有。Scala是在Java的基础上实现的函数式编程语言，所以Scala也可以调用Java API。今天会介绍Scala并发中应用比较多的两个概念——Future、ExecutionCon
- Metastore client自动解析域名问题 Metastore client自动解析域名问题
- 华为云的 数据湖Catalog（DLCatalog）是基于华为云的 统一身份认证（IAM）进行的用户管理和认证，那么对于非华为云IAM体系的外部用户（例如 Hadoop Kerberos 用户），如何来访问DLCatalog服务并实现DLCatalog服务的访问控制呢？对DLCatalog而言，在内部使用IAM的DLCatalog策略实现DLCatalog资源的细粒度访问控制；那么从外部来看... 华为云的 数据湖Catalog（DLCatalog）是基于华为云的 统一身份认证（IAM）进行的用户管理和认证，那么对于非华为云IAM体系的外部用户（例如 Hadoop Kerberos 用户），如何来访问DLCatalog服务并实现DLCatalog服务的访问控制呢？对DLCatalog而言，在内部使用IAM的DLCatalog策略实现DLCatalog资源的细粒度访问控制；那么从外部来看...
- 华为云弹性云服务器的ECS主机有多种flavor可供选择，当用户选择的ECS主机包含两块及以上网卡的时候，如图所示，该机器配有三块网卡，为了与外网通讯，会给某块网卡配置EIP，一般情况下，当配置完EIP后服务即可进行正常的网络访问请求，但有一种情况需要考虑，当服务所监听的网卡和EIP不在一块网卡上时，会出现服务请求失败的情况，此时需要根据实际情况定位问题。首先要看服务进程有没有起来，ps -... 华为云弹性云服务器的ECS主机有多种flavor可供选择，当用户选择的ECS主机包含两块及以上网卡的时候，如图所示，该机器配有三块网卡，为了与外网通讯，会给某块网卡配置EIP，一般情况下，当配置完EIP后服务即可进行正常的网络访问请求，但有一种情况需要考虑，当服务所监听的网卡和EIP不在一块网卡上时，会出现服务请求失败的情况，此时需要根据实际情况定位问题。首先要看服务进程有没有起来，ps -...
- “流动的数据才能产生价值”。我们所有数据的接入、汇聚、治理、分析，最终的目的都是为了把数据更好地开放出去，实现“数据使能”。数据开放主要有三种形式：数据服务、数据共享交换以及可信智能计算。 “流动的数据才能产生价值”。我们所有数据的接入、汇聚、治理、分析，最终的目的都是为了把数据更好地开放出去，实现“数据使能”。数据开放主要有三种形式：数据服务、数据共享交换以及可信智能计算。
- 在规范设计-模型设计功能中，用户除了可以使用我们内置的表属性项以外，也可以按需使用自定义项功能，为表添加属性。表的自定义项也会作为用户的业务资产属性，同步至数据资产模块。目前，支持该项功能的对象有：关系建模-业务表、维度建模-维度(表)、维度建模-事实表以及维度建模-汇总表。如何使用该功能？请参考以下步骤：在规范设计左边导航栏中，选择进入配置中心；在顶部标签中选择模型配置；点击"表自定义项"... 在规范设计-模型设计功能中，用户除了可以使用我们内置的表属性项以外，也可以按需使用自定义项功能，为表添加属性。表的自定义项也会作为用户的业务资产属性，同步至数据资产模块。目前，支持该项功能的对象有：关系建模-业务表、维度建模-维度(表)、维度建模-事实表以及维度建模-汇总表。如何使用该功能？请参考以下步骤：在规范设计左边导航栏中，选择进入配置中心；在顶部标签中选择模型配置；点击"表自定义项"...
- DAYU通过开放架构，联合伙伴，共同帮助客户实现数字化转型。 DAYU的开放性体现在： 支持模型资产沉淀 、 支持通过标准API与伙伴集成。 DAYU 数据开发模块中三种和外部系统对接的方式：提供数据开发API、提供RestClient算子、提供事件驱动调度能力。 DAYU通过开放架构，联合伙伴，共同帮助客户实现数字化转型。 DAYU的开放性体现在： 支持模型资产沉淀 、 支持通过标准API与伙伴集成。 DAYU 数据开发模块中三种和外部系统对接的方式：提供数据开发API、提供RestClient算子、提供事件驱动调度能力。
- 背景经过前面Hive的配置，基本的功能已经准备好。可以通过hive命令直接进入交互式命令行，进行Hive SQL语句的编写、提交、运行等。但还不支持通过JDBC链接。也就无法使用Datagrip一类的SQL IDE。在一些场景下会有开发效率上的影响。为此继续在Windows下配置运行HiveServer2。版本OS：Windows 10 Pro 1903Java：1.8.0_231zooke... 背景经过前面Hive的配置，基本的功能已经准备好。可以通过hive命令直接进入交互式命令行，进行Hive SQL语句的编写、提交、运行等。但还不支持通过JDBC链接。也就无法使用Datagrip一类的SQL IDE。在一些场景下会有开发效率上的影响。为此继续在Windows下配置运行HiveServer2。版本OS：Windows 10 Pro 1903Java：1.8.0_231zooke...
- 问题说明：spring3.0以上版本，若是直接返回字符串（json），所有中文均会变为？？？问题解析：中文字符串乱码是spring3.0以上版本的通用现象，是由于spring mvc默认字符串处理器字符集为ISO_8859_1引起的。如上图所示，spring源码中，mvc注册时，首先加载消息处理器然后如果没有用户自定义的消息处理器，则加载默认消息处理器而默认消息处理器中，字符串处理器 str... 问题说明：spring3.0以上版本，若是直接返回字符串（json），所有中文均会变为？？？问题解析：中文字符串乱码是spring3.0以上版本的通用现象，是由于spring mvc默认字符串处理器字符集为ISO_8859_1引起的。如上图所示，spring源码中，mvc注册时，首先加载消息处理器然后如果没有用户自定义的消息处理器，则加载默认消息处理器而默认消息处理器中，字符串处理器 str...
- 【DAYU数据服务】默认分页与自定义分页的区别https://bbs.huaweicloud.com/blogs/195014 默认分页切换自定义分页[原版示例][基本配置] 入参定义新增两个参数page_size、page_numpage_size:参数位置：query类型：num是否必填：否默认值：100 page_num:参数位置：query类型：num是否必填：否默认值：1[取数逻辑... 【DAYU数据服务】默认分页与自定义分页的区别https://bbs.huaweicloud.com/blogs/195014 默认分页切换自定义分页[原版示例][基本配置] 入参定义新增两个参数page_size、page_numpage_size:参数位置：query类型：num是否必填：否默认值：100 page_num:参数位置：query类型：num是否必填：否默认值：1[取数逻辑...
- Spark on RDMA指在Spark计算的shuffle过程中采用RDMA的技术来加快shuffle数据的传输以加快数据处理的计算性能。而目前常用的RDMA设备由IB及Mellanox，本文中采用的为Mellanox的网卡及SparkRDMA套件。1.SparkRDMA及Hibench套件的下载SparkRDMA的下载地址为 https://github.com/Mellanox/Spa... Spark on RDMA指在Spark计算的shuffle过程中采用RDMA的技术来加快shuffle数据的传输以加快数据处理的计算性能。而目前常用的RDMA设备由IB及Mellanox，本文中采用的为Mellanox的网卡及SparkRDMA套件。1.SparkRDMA及Hibench套件的下载SparkRDMA的下载地址为 https://github.com/Mellanox/Spa...
上滑加载中
推荐直播
-
OpenHarmony应用开发之网络数据请求与数据解析2025/01/16 周四 19:00-20:30
华为开发者布道师、南京师范大学泰州学院副教授，硕士研究生导师，开放原子教育银牌认证讲师
科技浪潮中，鸿蒙生态强势崛起，OpenHarmony开启智能终端无限可能。当下，其原生应用开发适配潜力巨大，终端设备已广泛融入生活各场景，从家居到办公、穿戴至车载。 现在，机会敲门！我们的直播聚焦OpenHarmony关键的网络数据请求与解析，抛开晦涩理论，用真实案例带你掌握数据访问接口，轻松应对复杂网络请求、精准解析Json与Xml数据。参与直播，为开发鸿蒙App夯实基础，抢占科技新高地，别错过！
回顾中 -
Ascend C高层API设计原理与实现系列2025/01/17 周五 15:30-17:00
Ascend C 技术专家
以LayerNorm算子开发为例，讲解开箱即用的Ascend C高层API
回顾中
热门标签