- 1、 默认分页（1） 创建API时，取数方式为配置方式对于配置方式取数的API来说，当用户配置了API之后，DLM服务会在用户调试/调用的时候生成相应的SQL进行取数，其分页方式为默认分页。例如，如果将API的请求参数、返回参数、排序参数按照以下配置的话：DLM服务生成的SQL为: SELECT c,x FROM tableName Where c = {p} AND x = {h} ... 1、 默认分页（1） 创建API时，取数方式为配置方式对于配置方式取数的API来说，当用户配置了API之后，DLM服务会在用户调试/调用的时候生成相应的SQL进行取数，其分页方式为默认分页。例如，如果将API的请求参数、返回参数、排序参数按照以下配置的话：DLM服务生成的SQL为: SELECT c,x FROM tableName Where c = {p} AND x = {h} ...
- 华为云遇到网络不通、权限不够等问题的解决方案。 华为云遇到网络不通、权限不够等问题的解决方案。
- debug原理和调试技巧 debug原理和调试技巧
- 在大数据时代，数据已经被公认为一项重要的资产，对于拥有大量数据的企业而言，如何整合数据，用好数据，让数据本身为我们产生更大的价值，形成数据资产，将是我们不得不面临的一个课题。而这些数据想要“变现”，就要快速的从数据中获取价值，在数据新时代中，在大量晦涩数据中查找数据所花费的时间多于分析数据的时间，为了使发现数据资产变的更加简单，就需要通过数据目录让各个组织内的晦涩数据变的更加明晰，随着企业体... 在大数据时代，数据已经被公认为一项重要的资产，对于拥有大量数据的企业而言，如何整合数据，用好数据，让数据本身为我们产生更大的价值，形成数据资产，将是我们不得不面临的一个课题。而这些数据想要“变现”，就要快速的从数据中获取价值，在数据新时代中，在大量晦涩数据中查找数据所花费的时间多于分析数据的时间，为了使发现数据资产变的更加简单，就需要通过数据目录让各个组织内的晦涩数据变的更加明晰，随着企业体...
- 本文主要介绍的这个组件是actuator。actuator主要是对springboot应用程序进行监控和管理，简单的说就是通过restful api接口请求来进行监管、审计、健康和数据采集你的应用程序运行的情况1. 开启Actuatorspring-boot-actuator模块提供Spring Boot所有的production-ready特性，启用该特性的最简单方式是添加spring-b... 本文主要介绍的这个组件是actuator。actuator主要是对springboot应用程序进行监控和管理，简单的说就是通过restful api接口请求来进行监管、审计、健康和数据采集你的应用程序运行的情况1. 开启Actuatorspring-boot-actuator模块提供Spring Boot所有的production-ready特性，启用该特性的最简单方式是添加spring-b...
- 配置、运行采集任务是构建数据资产的前提，下面举例说明如何通过配置采集任务达到灵活采集元数据的目的 配置、运行采集任务是构建数据资产的前提，下面举例说明如何通过配置采集任务达到灵活采集元数据的目的
- 1. DAYU数据血缘实现方案在DAYU平台中，数据血缘是通过在数据开发模块中配置数据处理迁移类型的算子产生的。当前是采集算子静态配置产生的血缘和部分算子实例上的血缘。2. 数据血缘支持的算子类型2.1 SQL类型算子目前支持对DLISQL，DWSSQL，HIVESQL算子的血缘解析，可以支持多SQL解析及列级血缘解析，当语句中有临时表时，会自动在数据资产中创建相关的临时表实体。2.... 1. DAYU数据血缘实现方案在DAYU平台中，数据血缘是通过在数据开发模块中配置数据处理迁移类型的算子产生的。当前是采集算子静态配置产生的血缘和部分算子实例上的血缘。2. 数据血缘支持的算子类型2.1 SQL类型算子目前支持对DLISQL，DWSSQL，HIVESQL算子的血缘解析，可以支持多SQL解析及列级血缘解析，当语句中有临时表时，会自动在数据资产中创建相关的临时表实体。2....
- DAYU数据开发常见问题解答，持续更新~ DAYU数据开发常见问题解答，持续更新~
- DAYU主机连接管理介绍 主机连接管理用于管理连接linux虚拟机的配置，该配置用于在脚本或者节点中执行shell命令前置条件 首先得准备一台linux主机，配置了ssh server，可以支持密码或者秘钥登陆创建 在大禹首页点击作业开发进入DLF页面，左侧菜单栏进入到主机连接管理 点击创建会跳转到管理中心界面，此时在次点击创建数据连接，弹出弹窗，... DAYU主机连接管理介绍 主机连接管理用于管理连接linux虚拟机的配置，该配置用于在脚本或者节点中执行shell命令前置条件 首先得准备一台linux主机，配置了ssh server，可以支持密码或者秘钥登陆创建 在大禹首页点击作业开发进入DLF页面，左侧菜单栏进入到主机连接管理 点击创建会跳转到管理中心界面，此时在次点击创建数据连接，弹出弹窗，...
- CDM配合DLF补数据功能，根据日期或者递增ID，配置作业自动分片迁移 CDM配合DLF补数据功能，根据日期或者递增ID，配置作业自动分片迁移
- 本文主要分析了友商的SQL编辑器功能优势，包括一些线下的SQL开发工具。阿里DataWorks1. 编辑器提供用户自定义设置，用户可选择不同主题，设置不同的字体大小，代码提示偏好，是否自动换行等。2. 未保存的代码会进行缓存，如果刷新，会提示用户有代码未保存，让用户选择使用缓存的内容还是后端保存的内容。3. 提供结构视图，将sql语句图形化显示，S代表源表，T代表目标表，tmp代表中间表。... 本文主要分析了友商的SQL编辑器功能优势，包括一些线下的SQL开发工具。阿里DataWorks1. 编辑器提供用户自定义设置，用户可选择不同主题，设置不同的字体大小，代码提示偏好，是否自动换行等。2. 未保存的代码会进行缓存，如果刷新，会提示用户有代码未保存，让用户选择使用缓存的内容还是后端保存的内容。3. 提供结构视图，将sql语句图形化显示，S代表源表，T代表目标表，tmp代表中间表。...
- 通知管理用于在作业运行处于不同的结果状态时，发送邮件短信等消息通知用户 当前支持 运行异常/失败、成功两种状态，作业超时，手动停止属于失败场景，也会发送邮件 作业通知可以在多处进行配置，灵活方便，如下图 用户可以定制周期发送作业统计，用于统计作业的失败详情，失败明细，方便用户了解作业的执行情况作业通知支持多个作业配置同一个smn主题，方便统一管理通知管理经过了成千上万个作业的并发测试，... 通知管理用于在作业运行处于不同的结果状态时，发送邮件短信等消息通知用户 当前支持 运行异常/失败、成功两种状态，作业超时，手动停止属于失败场景，也会发送邮件 作业通知可以在多处进行配置，灵活方便，如下图 用户可以定制周期发送作业统计，用于统计作业的失败详情，失败明细，方便用户了解作业的执行情况作业通知支持多个作业配置同一个smn主题，方便统一管理通知管理经过了成千上万个作业的并发测试，...
- 目前DAYU数据开发脚本开发支持DWS，DLI，HIVE, SparkSQL，Shell，Flink SQL，RDS SQL等脚本的编辑和调试。针对不同类型的脚本，DAYU提供不同的关键字语法提示和补全，不同类型脚本的关键字类型放在附件中供查阅。下面来详细介绍相关功能的使用方法：1. 按Tab键弹出自动补全提示框： 如下图所示，提示加上了类型，便于用户区分是关键字，还是函数，或是数据类型。 ... 目前DAYU数据开发脚本开发支持DWS，DLI，HIVE, SparkSQL，Shell，Flink SQL，RDS SQL等脚本的编辑和调试。针对不同类型的脚本，DAYU提供不同的关键字语法提示和补全，不同类型脚本的关键字类型放在附件中供查阅。下面来详细介绍相关功能的使用方法：1. 按Tab键弹出自动补全提示框： 如下图所示，提示加上了类型，便于用户区分是关键字，还是函数，或是数据类型。 ...
- 今年年初这场突如其来的疫情，让我们早晨醒来打开手机的第一件事情，从刷朋友圈变成了刷每日最新的疫情数据。看看国内外新增确诊人数/现存确诊人数，看看国内外疫情分布的地图。丁香医生也因为快速上线疫情实时动态板块，成为了大家了解疫情发展的首选阵地。 今年年初这场突如其来的疫情，让我们早晨醒来打开手机的第一件事情，从刷朋友圈变成了刷每日最新的疫情数据。看看国内外新增确诊人数/现存确诊人数，看看国内外疫情分布的地图。丁香医生也因为快速上线疫情实时动态板块，成为了大家了解疫情发展的首选阵地。
- 1. Atlas介绍Atlas 是一个可伸缩和可扩展的核心基础治理服务集合 ，使企业能够有效地和高效地满足 Hadoop 中的合规性要求，并允许与整个企业数据生态系统的集成。Apache Atlas为组织提供开放式元数据管理和治理功能，用以构建其数据资产目录，对这些资产进行分类和管理，并为数据科学家，数据分析师和数据治理团队提供围绕这些数据资产的协作功能。2. 特性2.1 元数据类型 & 实... 1. Atlas介绍Atlas 是一个可伸缩和可扩展的核心基础治理服务集合 ，使企业能够有效地和高效地满足 Hadoop 中的合规性要求，并允许与整个企业数据生态系统的集成。Apache Atlas为组织提供开放式元数据管理和治理功能，用以构建其数据资产目录，对这些资产进行分类和管理，并为数据科学家，数据分析师和数据治理团队提供围绕这些数据资产的协作功能。2. 特性2.1 元数据类型 & 实...
上滑加载中
推荐直播
-
让你的应用用上GaussDB2024/12/19 周四 16:30-18:00
Jerry 华为云生态技术讲师
GaussDB很受客户关注，伙伴们想知道什么时候该选用，开发者也跃跃欲试想尝鲜。课程会分享适用的场景，并一步步演示如何用上GaussDB。
回顾中 -
2024创原会年度技术峰会2024/12/20 周五 09:00-12:00
华为云讲师团
2024创原会年度技术峰会将于12月20日在海南万宁石梅湾威斯汀酒店举办，本次大会将以“智能・进化”为主题探讨从Cloud Native到AI Native的新阶段企业如何通过AI技术重塑企业应用，围绕AI如何在千行万业落地进行深入交流，探索可以先行先试先成功的创新场景和实现路径。
即将直播 -
华为云开发者日·2024年度创享峰会2024/12/23 周一 14:00-16:00
华为云讲师团
华为云开发者日HDC.Cloud Day是面向全球开发者的旗舰活动，汇聚来自千行百业、高校及科研院所的开发人员。致力于打造开发者专属的技术盛宴，全方位服务与赋能开发者围绕华为云生态“知、学、用、创、商”的成长路径。通过前沿的技术分享、场景化的动手体验、优秀的应用创新推介，为开发者提供沉浸式学习与交流平台。开放创新，与开发者共创、共享、共赢未来。
去报名
热门标签