- 开发者
- 数据湖工厂
#数据湖工厂#
- 对数据湖探索(DLI)服务,用户日常大部分时间会使用SQL对数据进行分析处理,但是在某些时候处理的逻辑特别复杂,无法通过SQL处理,可以写Spark作业进行分析处理。本文描述通过一个例子演示如何在服务湖工厂(DLF)上提交一个Spark作业。 对数据湖探索(DLI)服务,用户日常大部分时间会使用SQL对数据进行分析处理,但是在某些时候处理的逻辑特别复杂,无法通过SQL处理,可以写Spark作业进行分析处理。本文描述通过一个例子演示如何在服务湖工厂(DLF)上提交一个Spark作业。
- 如果你已经申请MRS、DLI、DWS等大数据产品,接下来的时间里,你会希望将在大数据服务上快速运行业务,数据湖工厂(DLF)是一个在线一站式大数据开发平台,协助用户业务快速上云。本文利用数据湖工厂(DLF)、数据湖探索(DLI)对电影评分原始数据进行分析,输出评分最高和最活跃TOP 20电影。通过本文可以学习到DLF脚本编辑、作业编辑、作业调度等功能,以及DLI的SQL基本语法。 如果你已经申请MRS、DLI、DWS等大数据产品,接下来的时间里,你会希望将在大数据服务上快速运行业务,数据湖工厂(DLF)是一个在线一站式大数据开发平台,协助用户业务快速上云。本文利用数据湖工厂(DLF)、数据湖探索(DLI)对电影评分原始数据进行分析,输出评分最高和最活跃TOP 20电影。通过本文可以学习到DLF脚本编辑、作业编辑、作业调度等功能,以及DLI的SQL基本语法。
- 本文利用数据湖工厂(DLF)、数据湖探索(DLI)对电影评分、打标签全量原始数据和每日增量数据进行分析,输出评分最高TOP100电影和TOP 10热门标签。重点介绍DLF脚本编辑、作业编辑、作业调度等功能。 本文利用数据湖工厂(DLF)、数据湖探索(DLI)对电影评分、打标签全量原始数据和每日增量数据进行分析,输出评分最高TOP100电影和TOP 10热门标签。重点介绍DLF脚本编辑、作业编辑、作业调度等功能。
推荐直播
-
华为云入门必修课:技术精髓知识点精讲
2024/11/07 周四 17:40-19:40
Jackie 华为云资深布道师
本期直播旨在帮开发者了解云的基本概念、云的优势、常见存储服务的原理及使用,掌握ECS的概念、功能、场景和使用等,为你的开发之路奠定坚实理论根基,帮助开发者在云计算领域提升技能,增强职业竞争力。
去报名
热门标签