- OBS到DLI迁移介绍操作场景数据湖探索(DLI)提供大数据查询服务,本章节介绍使用CDM将OBS的数据迁移到DLI,使用流程如下:前提条件已经开通了OBS和DLI。已经在DLI服务中创建好资源队列、数据库和表。迁移流程1.创建CDM集群登录CDM管理控制台,根据实际情况选择操作:如果您已拥有CDM集群,则直接单击集群后的“作业管理”,继续创建连接即可。如果没有,则单击“购买云数据迁移服务”... OBS到DLI迁移介绍操作场景数据湖探索(DLI)提供大数据查询服务,本章节介绍使用CDM将OBS的数据迁移到DLI,使用流程如下:前提条件已经开通了OBS和DLI。已经在DLI服务中创建好资源队列、数据库和表。迁移流程1.创建CDM集群登录CDM管理控制台,根据实际情况选择操作:如果您已拥有CDM集群,则直接单击集群后的“作业管理”,继续创建连接即可。如果没有,则单击“购买云数据迁移服务”...
- DLI是支持多模引擎的Serverless大数据计算服务,其很好的实现了Serverless的特性: 1. 弱化了存储和计算之间的联系; 2. 代码的执行不再需要手动分配资源; 3. 按使用量计费。 那么如何才能更好的实现Serverless化的服务,同时又避免成为传统单体分布式的应用?微服务架构无疑是最优的选择。DL... DLI是支持多模引擎的Serverless大数据计算服务,其很好的实现了Serverless的特性: 1. 弱化了存储和计算之间的联系; 2. 代码的执行不再需要手动分配资源; 3. 按使用量计费。 那么如何才能更好的实现Serverless化的服务,同时又避免成为传统单体分布式的应用?微服务架构无疑是最优的选择。DL...
- Kubernets可通过RBAC实现权限控制,RBAC即基于角色的访问控制,使用“rbac.authorization.k8s.io API Group”实现授权,可动态配置。RBAC的授权规则是通过四种资源来进行配置:角色、集群角色、角色绑定和集群角色绑定。 Kubernets可通过RBAC实现权限控制,RBAC即基于角色的访问控制,使用“rbac.authorization.k8s.io API Group”实现授权,可动态配置。RBAC的授权规则是通过四种资源来进行配置:角色、集群角色、角色绑定和集群角色绑定。
- 在ClickHouse运行时,我们需要确保数据库实例正常运行的同时获得最佳的表现性能 在ClickHouse运行时,我们需要确保数据库实例正常运行的同时获得最佳的表现性能
- 由于Tableau已经与阿里MaxCompute的jdbc做了生态对接,但是tableau生态是不支持dli jdbc的,所以我们需要做生态适配,本文通过Apache kyuubi来拉通dli与tableau之间的链接 由于Tableau已经与阿里MaxCompute的jdbc做了生态对接,但是tableau生态是不支持dli jdbc的,所以我们需要做生态适配,本文通过Apache kyuubi来拉通dli与tableau之间的链接
- 企业只有把数据用起来了,才能反向推动数据治理和数据标准类似的工作,而数据治理的推进也会让数据服务化更好,让业务更好的使用数据,这其实也是企业数字化转型的方向和重要目标:让数据用起来。 企业只有把数据用起来了,才能反向推动数据治理和数据标准类似的工作,而数据治理的推进也会让数据服务化更好,让业务更好的使用数据,这其实也是企业数字化转型的方向和重要目标:让数据用起来。
- DLI是数据湖探索(Data Lake Insight)的简称,它是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。用户不需要管理任何服务器,即开即用。支持标准SQL/Spark SQL/Flink SQL,支持多种接入方式,并... DLI是数据湖探索(Data Lake Insight)的简称,它是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。用户不需要管理任何服务器,即开即用。支持标准SQL/Spark SQL/Flink SQL,支持多种接入方式,并...
- 使用moxing 在modelarts训练作业或者notebook中访问dli数据 使用moxing 在modelarts训练作业或者notebook中访问dli数据
- DLI(数据湖探索)作为华为云上的大数据Serverless服务,如果说易用免运维是服务存在的价值基石,客户上来使用后的业务功能连续性则是服务存在的安身立命之本。DLI服务结合华为云的高可用规范要求,以及自身的服务特点,逐步形成了一套端到端的用户可用性保障体系,找到了服务对用户承诺的保障之道。 DLI(数据湖探索)作为华为云上的大数据Serverless服务,如果说易用免运维是服务存在的价值基石,客户上来使用后的业务功能连续性则是服务存在的安身立命之本。DLI服务结合华为云的高可用规范要求,以及自身的服务特点,逐步形成了一套端到端的用户可用性保障体系,找到了服务对用户承诺的保障之道。
- 华为云数据湖探索DLI按需计费单位于2020年1月16日00:00(北京时间)调整通知 华为云数据湖探索DLI按需计费单位于2020年1月16日00:00(北京时间)调整通知
- 快捷部署系列,本期带来的是Flink,快速体验、学习 快捷部署系列,本期带来的是Flink,快速体验、学习
- 华为云数据湖探索服务DLI Flink 边缘作业于2020年12月22日00:00(北京时间)计费通知 华为云数据湖探索服务DLI Flink 边缘作业于2020年12月22日00:00(北京时间)计费通知
- 导读: 湖仓一体是将数据湖和数据仓库的优势相结合的数据管理系统。Apache Doris 结合自身特性,提出了【数据无界】和【湖仓无界】核心理念。上篇文章已介绍了 Apache Doris 湖仓一体完整方案,本文将聚焦典型应用场景,进一步深入,帮助读者更好地理解和应用 Apache Doris 湖仓一体。在数据驱动决策的时代,湖仓一体架构以统一存储、统一计算、统一管理的创新形式,补齐了传统数... 导读: 湖仓一体是将数据湖和数据仓库的优势相结合的数据管理系统。Apache Doris 结合自身特性,提出了【数据无界】和【湖仓无界】核心理念。上篇文章已介绍了 Apache Doris 湖仓一体完整方案,本文将聚焦典型应用场景,进一步深入,帮助读者更好地理解和应用 Apache Doris 湖仓一体。在数据驱动决策的时代,湖仓一体架构以统一存储、统一计算、统一管理的创新形式,补齐了传统数...
- 导读:湖仓一体架构融合了数据湖的低成本、高扩展性,以及数据仓库的高性能、强数据治理能力,高效应对大数据时代的挑战。为助力企业实现湖仓一体的建设,Apache Doris 提出了数据无界和湖仓无界核心理念,并结合自身特性,助力企业加速从 0 到 1 构建湖仓体系,降低转型过程中的风险和成本。本文将对湖仓一体演进及 Apache Doris 湖仓一体方案进行介绍。在过去的数年间,数据分析技术栈经... 导读:湖仓一体架构融合了数据湖的低成本、高扩展性,以及数据仓库的高性能、强数据治理能力,高效应对大数据时代的挑战。为助力企业实现湖仓一体的建设,Apache Doris 提出了数据无界和湖仓无界核心理念,并结合自身特性,助力企业加速从 0 到 1 构建湖仓体系,降低转型过程中的风险和成本。本文将对湖仓一体演进及 Apache Doris 湖仓一体方案进行介绍。在过去的数年间,数据分析技术栈经...
- 导读:浙江霖梓早期使用 CDH 产品套件搭建了大数据系统,面临业务逻辑冗余、查询效率低下等问题,基于 Apache Doris 进行整体架构与表结构的重构,并基于湖仓一体和查询加速展开深度探索与实践,打造了 Doris + Paimon 的实时/离线一体化湖仓架构,实现查询提速 30 倍、资源成本节省 67% 等显著成效。浙江霖梓是一家专注于深度学习和人工智能应用的金融创新企业,为企业提供精... 导读:浙江霖梓早期使用 CDH 产品套件搭建了大数据系统,面临业务逻辑冗余、查询效率低下等问题,基于 Apache Doris 进行整体架构与表结构的重构,并基于湖仓一体和查询加速展开深度探索与实践,打造了 Doris + Paimon 的实时/离线一体化湖仓架构,实现查询提速 30 倍、资源成本节省 67% 等显著成效。浙江霖梓是一家专注于深度学习和人工智能应用的金融创新企业,为企业提供精...
上滑加载中
推荐直播
-
CloudPond上的DeepSeek
2025/03/07 周五 16:30-17:30
George-华为云CloudPond解决方案经理
比一体机能力更丰满;比公有云距离更亲近;比自己搭建更轻松简单;解读在CloudPond 上部署DeepSeek,选型、方案以及部署维护的细节。
即将直播 -
空中宣讲会 2025年华为软件精英挑战赛
2025/03/10 周一 18:00-19:00
宸睿 华为云存储技术专家、ACM-ICPC WorldFinal经验 晖哥
2025华为软挑赛空中宣讲会重磅来袭!完整赛程首曝+命题天团硬核拆题+三轮幸运抽奖赢参赛助力礼包,与全国优秀高校开发者同台竞技,直通顶尖赛事起跑线!
即将直播
热门标签