- 1 目的l 底层或对端故障及劣化时业务0中断。l 容灾不断话。l 业务/APP/服务、平台/OS等软件任意时间升级不中断业务。l 重要数据0丢失。l 数据持久度“13个9”。2 设计方案2.1 设计思路跨AZ双活的设计上，借鉴服务本地可靠性冗余设计的思路，并在此基础上进一步增强。将云服务各层的组件（主备、集群）拉远跨AZ部署（逻辑上一套）或者双AZ部署（逻辑上... 1 目的l 底层或对端故障及劣化时业务0中断。l 容灾不断话。l 业务/APP/服务、平台/OS等软件任意时间升级不中断业务。l 重要数据0丢失。l 数据持久度“13个9”。2 设计方案2.1 设计思路跨AZ双活的设计上，借鉴服务本地可靠性冗余设计的思路，并在此基础上进一步增强。将云服务各层的组件（主备、集群）拉远跨AZ部署（逻辑上一套）或者双AZ部署（逻辑上...
- 数据质量维度目前业界对于数据质量的衡量标准，分为以下六大维度：名称英文描述完整性Completeness衡量所必须的数据的完整程度，如不能缺失的空值检查唯一性Uniqueness针对某个数据项或某组数据，没有重复的数据值。值必须是唯一的如ID类数据及时性Timeliness对于数据更新频率的满足程度，针对用户对信息获取的时间及时性要求，确保数据及时更新有效性Validity对于数据的值、格式... 数据质量维度目前业界对于数据质量的衡量标准，分为以下六大维度：名称英文描述完整性Completeness衡量所必须的数据的完整程度，如不能缺失的空值检查唯一性Uniqueness针对某个数据项或某组数据，没有重复的数据值。值必须是唯一的如ID类数据及时性Timeliness对于数据更新频率的满足程度，针对用户对信息获取的时间及时性要求，确保数据及时更新有效性Validity对于数据的值、格式...
- 访问权限控制是数据安全提供的一项资源访问权限的功能，您可以创建权限策略，并通过这些策略实现资源的访问控制，按需为用户分配最小权限，从而降低企业数据信息安全风险。 访问权限控制是数据安全提供的一项资源访问权限的功能，您可以创建权限策略，并通过这些策略实现资源的访问控制，按需为用户分配最小权限，从而降低企业数据信息安全风险。
- 在DAYU中，基于数据模型可以零代码创建数据开发作业，并进一步完成数据的过滤、转换等操作 在DAYU中，基于数据模型可以零代码创建数据开发作业，并进一步完成数据的过滤、转换等操作
- 使用回调可以抽取公共代码，分离稳定和易变的逻辑，有效提升系统的可维护性，提升代码质量。 使用回调可以抽取公共代码，分离稳定和易变的逻辑，有效提升系统的可维护性，提升代码质量。
- 范式：符合某一种级别的关系模式的集合，一张数据表结构符合某种设计标准的级别第一范式：1NF的定义为：每个属性都不可再分，是所有关系型数据库最基本要求 改进 第二范式：2NF在1NF的基础之上，消除了非主属性对于码的部分函数依赖比如有两个主键，不能存在这样的属性，它只依赖于其中一个主键，则不符合2NF消除非主属性对于码（主键）的部分函数依赖 表中所有的函数依赖关系： 主属性有两个：学号 与... 范式：符合某一种级别的关系模式的集合，一张数据表结构符合某种设计标准的级别第一范式：1NF的定义为：每个属性都不可再分，是所有关系型数据库最基本要求 改进 第二范式：2NF在1NF的基础之上，消除了非主属性对于码的部分函数依赖比如有两个主键，不能存在这样的属性，它只依赖于其中一个主键，则不符合2NF消除非主属性对于码（主键）的部分函数依赖 表中所有的函数依赖关系： 主属性有两个：学号 与...
- DAYU DLCatalog是DAYU下的一个元数据管理服务，提供了对多mrs集群元数据管理的能力。而dlcatalog的鉴权模块提供rest端和thrift端访问hive metastore的鉴权能力。用户通过鉴权结果来被授权可以访问特定资源。在鉴权之前，用户需要自定义授权的策略以便可以完成鉴权。DAYU DLCatalog注册的scope是XA(项目级服务)，顾在获取token，创建自定... DAYU DLCatalog是DAYU下的一个元数据管理服务，提供了对多mrs集群元数据管理的能力。而dlcatalog的鉴权模块提供rest端和thrift端访问hive metastore的鉴权能力。用户通过鉴权结果来被授权可以访问特定资源。在鉴权之前，用户需要自定义授权的策略以便可以完成鉴权。DAYU DLCatalog注册的scope是XA(项目级服务)，顾在获取token，创建自定...
- Git命令行知识总结 Git命令行知识总结
- 典型使用场景 在某公司内部，A和B来自不同部门，A、B都只能看到自己所在部门的数据，这时候需要针对不同用户或者角色增加数据访问权限控制，防止越权使用行为。 从数据可见性来看，我们只需要根据输入参数在上层接口中对返回结果集进行过滤即可。但是对其他数据操作行为而言，需要在数据使用接口上曾加复杂权限规则定义。这不仅增加了数据使用接口开发的难度，而且从数据角色的角度出发，... 典型使用场景 在某公司内部，A和B来自不同部门，A、B都只能看到自己所在部门的数据，这时候需要针对不同用户或者角色增加数据访问权限控制，防止越权使用行为。 从数据可见性来看，我们只需要根据输入参数在上层接口中对返回结果集进行过滤即可。但是对其他数据操作行为而言，需要在数据使用接口上曾加复杂权限规则定义。这不仅增加了数据使用接口开发的难度，而且从数据角色的角度出发，...
- 开发环境，测试环境，正式环境分环境Maven打包部署 开发环境，测试环境，正式环境分环境Maven打包部署
- 敏感数据保护的背景隐私保护管理是数据安全提供的一项用于敏感数据保护的功能。每个企业都拥有敏感数据：商业秘密、知识产权、关键业务信息、业务合作伙伴信息或客户信息，您可以通过配置敏感数据识别规则来自动发现系统中的敏感数据。在隐私保护管理模块，您可以通过数据脱敏、数据水印嵌入等方式来防止敏感数据遭到有意或无意的误用、泄漏或盗窃，从而帮助企业采取合理措施来保护其敏感数据的机密性和完整性。敏感数据保护... 敏感数据保护的背景隐私保护管理是数据安全提供的一项用于敏感数据保护的功能。每个企业都拥有敏感数据：商业秘密、知识产权、关键业务信息、业务合作伙伴信息或客户信息，您可以通过配置敏感数据识别规则来自动发现系统中的敏感数据。在隐私保护管理模块，您可以通过数据脱敏、数据水印嵌入等方式来防止敏感数据遭到有意或无意的误用、泄漏或盗窃，从而帮助企业采取合理措施来保护其敏感数据的机密性和完整性。敏感数据保护...
- 本文介绍了在DAYU中如何通过数据规范的功能，不需要写代码即可实现数据的监控。 本文介绍了在DAYU中如何通过数据规范的功能，不需要写代码即可实现数据的监控。
- 基于MRS的一些DAYU数据服务可能需要自己创建一些数据连接去使用MRS/FI集群的hive ，中间经常会遇到一些问题。该部分总结基于安全模式的FusionInsight平台或者安全模式的MRS集群§ 建立hive数据连接时的认证问题§ driver端进行hive认证首先要知道hive用户的keytab位置、kdc.conf位置和hive用户名（用户是FI的用户）然后使用以下代码，进行认证登... 基于MRS的一些DAYU数据服务可能需要自己创建一些数据连接去使用MRS/FI集群的hive ，中间经常会遇到一些问题。该部分总结基于安全模式的FusionInsight平台或者安全模式的MRS集群§ 建立hive数据连接时的认证问题§ driver端进行hive认证首先要知道hive用户的keytab位置、kdc.conf位置和hive用户名（用户是FI的用户）然后使用以下代码，进行认证登...
- 希望开放数据给他人使用，但是又需要限定数据范围？希望开放数据给他人使用，但是又苦于保障数据安全？希望开放数据给他人使用，但是又希望添加处理逻辑？希望开放数据给他人使用，但是又难以统一管理多源数据？有数据共享的需要，但又不能直接将数据库连接暴露给他人，需要限定数据范围、保障数据安全、确认请求来源、数据脱敏等处理…… 什么是数据服务数据服务旨在为企业搭建统一的数据服务总线，帮助企业统一管理对内对... 希望开放数据给他人使用，但是又需要限定数据范围？希望开放数据给他人使用，但是又苦于保障数据安全？希望开放数据给他人使用，但是又希望添加处理逻辑？希望开放数据给他人使用，但是又难以统一管理多源数据？有数据共享的需要，但又不能直接将数据库连接暴露给他人，需要限定数据范围、保障数据安全、确认请求来源、数据脱敏等处理…… 什么是数据服务数据服务旨在为企业搭建统一的数据服务总线，帮助企业统一管理对内对...
上滑加载中
推荐直播
-
2024年川渝职工软件创新应用技能竞赛 作品开发赋能2024/11/05 周二 16:00-17:00
杰森 华为云AI工程师
直播将涵盖大赛作品提交、作品模板要求讲解，评分规则介绍等，期待大家的参与！
即将直播 -
华为云入门必修课：技术精髓知识点精讲2024/11/07 周四 17:40-19:40
Jackie 华为云资深布道师
本期直播旨在帮开发者了解云的基本概念、云的优势、常见存储服务的原理及使用，掌握ECS的概念、功能、场景和使用等，为你的开发之路奠定坚实理论根基，帮助开发者在云计算领域提升技能，增强职业竞争力。
去报名 -
0代码智能构建AI Agent——华为云AI原生应用引擎的架构与实践2024/11/13 周三 16:30-18:00
苏秦 华为云aPaaS DTSE技术布道师
大模型及生成式AI对应用和软件产业带来了哪些影响？从企业场景及应用开发视角，面向AI原生应用需要什么样的工具及平台能力？企业要如何选好、用好、管好大模型，使能AI原生应用快速创新？本期直播，华为云aPaaS DTSE技术布道师苏秦将基于华为云自身实践出发，深入浅出地介绍华为云AI原生应用引擎，通过分钟级智能生成Agent应用的方式帮助企业完成从传统应用到智能应用的竞争力转型，使能千行万业智能应用创新。
去报名
热门标签