- 0 简介大多数企业依靠可扩展的平台和其服务或产品的数据化来保持市场竞争力。随着来自不同来源的数据的激增，其数量、速度和种类各不相同，企业需要新的数据战略。因此，人们认为需要数据管道将来自所有不同来源的数据整合到一个共同的目的地，以便进行快速分析，或者在连接的应用程序和系统之间处理和流式传输数据。这里简单解释两种经典数据处理架构和一个通用编程模型，并例举他们的组件和使用场景，最后做一个简单的... 0 简介大多数企业依靠可扩展的平台和其服务或产品的数据化来保持市场竞争力。随着来自不同来源的数据的激增，其数量、速度和种类各不相同，企业需要新的数据战略。因此，人们认为需要数据管道将来自所有不同来源的数据整合到一个共同的目的地，以便进行快速分析，或者在连接的应用程序和系统之间处理和流式传输数据。这里简单解释两种经典数据处理架构和一个通用编程模型，并例举他们的组件和使用场景，最后做一个简单的...
- 1 简介韧性从多个维度诠释了软件持续提供业务服务的能力，核心目标是提升软件的平均无故障时间(Mean Time Between Failure,MTBF)。从架构设计上，韧性包括服务异步化能力、重试/限流/降级/熔断/反压、主从模式、集群模式、AZ内的高可用、单元化、跨region容灾、异地多活容灾等。这里介绍保障业务韧性的一个经典方法，主从模式。当业务上线后，最不能接受的就是业务不可用，... 1 简介韧性从多个维度诠释了软件持续提供业务服务的能力，核心目标是提升软件的平均无故障时间(Mean Time Between Failure,MTBF)。从架构设计上，韧性包括服务异步化能力、重试/限流/降级/熔断/反压、主从模式、集群模式、AZ内的高可用、单元化、跨region容灾、异地多活容灾等。这里介绍保障业务韧性的一个经典方法，主从模式。当业务上线后，最不能接受的就是业务不可用，...
- 1 读写分离和主从复制大型应用服务器在写数据的时候，访问主数据库，主数据库通过主从复制机制将数据更新同步到从数据库，这样当应用服务器读数据的时候，就可以通过从数据库获得数据，他们如何实现的？为了便于应用程序访问读写分离后的数据库，通常在应用服务器端使用专门的数据访问模块，使数据库读写分离对应用透明。 2 使用和配置二进制日志MySQL的二进制日志binlog可以说是MySQL最重要的日志... 1 读写分离和主从复制大型应用服务器在写数据的时候，访问主数据库，主数据库通过主从复制机制将数据更新同步到从数据库，这样当应用服务器读数据的时候，就可以通过从数据库获得数据，他们如何实现的？为了便于应用程序访问读写分离后的数据库，通常在应用服务器端使用专门的数据访问模块，使数据库读写分离对应用透明。 2 使用和配置二进制日志MySQL的二进制日志binlog可以说是MySQL最重要的日志...
- 简介这里主要介绍索引的功能，以及为什么，它可帮助使用者优化如何查询已经存储的数据的同时，过多的使用反而导致性能下降？索引通过最大限度地减少完成查询所需的光盘访问次数来提高数据库性能。它是一种数据结构技术，用于查找和快速访问数据库中的数据。多个数据库字段用于生成索引。表的主键或候选键在第一列中重复，即搜索键。为了加快数据检索速度，这些值也按排序顺序保存。应该强调的是，不需要对数据进行排序。第... 简介这里主要介绍索引的功能，以及为什么，它可帮助使用者优化如何查询已经存储的数据的同时，过多的使用反而导致性能下降？索引通过最大限度地减少完成查询所需的光盘访问次数来提高数据库性能。它是一种数据结构技术，用于查找和快速访问数据库中的数据。多个数据库字段用于生成索引。表的主键或候选键在第一列中重复，即搜索键。为了加快数据检索速度，这些值也按排序顺序保存。应该强调的是，不需要对数据进行排序。第...
- 简介：这里介绍如何应对缓存击穿的场景，有哪些？比如： 黑客攻击，用户错误的服务？ 服务启动了，但是缓存没有数据？ 1 使用bloom fliter的场景Bloom 过滤器是由 Burton Howard 于 1970 年构思的一种概率数据结构，它提供了一种有效的方法来验证条目肯定不在集合中。这使得它在尝试在访问成本高昂的资源（例如通过网络或磁盘）上搜索项目时特别理想：如果我有... 简介：这里介绍如何应对缓存击穿的场景，有哪些？比如： 黑客攻击，用户错误的服务？ 服务启动了，但是缓存没有数据？ 1 使用bloom fliter的场景Bloom 过滤器是由 Burton Howard 于 1970 年构思的一种概率数据结构，它提供了一种有效的方法来验证条目肯定不在集合中。这使得它在尝试在访问成本高昂的资源（例如通过网络或磁盘）上搜索项目时特别理想：如果我有...
- 1 简介大型应用，服务器和数据库的压力基本持平，中小型软件，服务器压力没有数据库压力大，他们如何做到的？将一部分推拉数据功能模块转化为通过服务器缓存或计算去完成，从而将数据库压力转移到服务器。以上方案也无法降低数据库压力时，还可以凭借分布式数据库，主从读写分离数据库支持横向扩展能力，提升数据库性能，理论上横向扩展数据库性能可以无上限提高数据库承压能力。因此从代码层，中间层，分布式三个分析分... 1 简介大型应用，服务器和数据库的压力基本持平，中小型软件，服务器压力没有数据库压力大，他们如何做到的？将一部分推拉数据功能模块转化为通过服务器缓存或计算去完成，从而将数据库压力转移到服务器。以上方案也无法降低数据库压力时，还可以凭借分布式数据库，主从读写分离数据库支持横向扩展能力，提升数据库性能，理论上横向扩展数据库性能可以无上限提高数据库承压能力。因此从代码层，中间层，分布式三个分析分...
- 1 编程代码中的sql语句优化数据模型的关系和结构。 1.1 选择多行时，使用 FETCH 或 OFFSETOFFSET 参数用于标识从结果集中返回行的起点。基本上，它排除了第一组记录。注意：OFFSET 只能与 ORDER BY 子句一起使用。它不能单独使用。偏移值必须大于或等于零。它不能为负数，否则返回错误。FETCH 参数用于返回一组行数。FETCH本身不能使用，它与OFFSET一起... 1 编程代码中的sql语句优化数据模型的关系和结构。 1.1 选择多行时，使用 FETCH 或 OFFSETOFFSET 参数用于标识从结果集中返回行的起点。基本上，它排除了第一组记录。注意：OFFSET 只能与 ORDER BY 子句一起使用。它不能单独使用。偏移值必须大于或等于零。它不能为负数，否则返回错误。FETCH 参数用于返回一组行数。FETCH本身不能使用，它与OFFSET一起...
- 1 简介答案很简单，使用数据库日志，那么使用哪一种？mysql自带的mysqlbinlog工具的作用是解析mysql的二进制binlog日志内容，把二进制日志解析成可以在MySQL数据库里执行的SQL语句。binlog日志原始数据是以二进制形式存在的，需要使用mysqlbinlog工具转换成SQL语句形式。mysql的binlog日志作用是用来记录mysql内部增删改等对mysql数据库有... 1 简介答案很简单，使用数据库日志，那么使用哪一种？mysql自带的mysqlbinlog工具的作用是解析mysql的二进制binlog日志内容，把二进制日志解析成可以在MySQL数据库里执行的SQL语句。binlog日志原始数据是以二进制形式存在的，需要使用mysqlbinlog工具转换成SQL语句形式。mysql的binlog日志作用是用来记录mysql内部增删改等对mysql数据库有...
- 1 简介当一个操作可能影响多个数据操作时，事务的作用就出现了。数据库事务是指一个逻辑工作单元中执行的一系列操作,要么完全地执行,要么完全地不执行.它具有如下特征： （原子性、一致性、隔离性、持久性），或称（ACID），由 Andreas Reuter 于 1983 年提出。它是数据库管理系统（DBMS）中的一个概念，它标识了一组用于保证数据库可靠性的标准属性。如Mysql其常见级别为：脏读... 1 简介当一个操作可能影响多个数据操作时，事务的作用就出现了。数据库事务是指一个逻辑工作单元中执行的一系列操作,要么完全地执行,要么完全地不执行.它具有如下特征： （原子性、一致性、隔离性、持久性），或称（ACID），由 Andreas Reuter 于 1983 年提出。它是数据库管理系统（DBMS）中的一个概念，它标识了一组用于保证数据库可靠性的标准属性。如Mysql其常见级别为：脏读...
- 简介这里整理数据存储设计的几个套路。 1 关系数据库规范化函数依赖： 定义：设R(U)是属性U的关系模式，X,Y是U的子集， 对于R(U)的任意一个可能的关系r，r的任意两个元组在X上属性值相等， 那么在Y上的属性值也相等，称“X函数确定Y” 或Y函数依赖X，记为 X->Y. X称为这个函数依赖的决定属性组，也称为决定因素。例如：关... 简介这里整理数据存储设计的几个套路。 1 关系数据库规范化函数依赖： 定义：设R(U)是属性U的关系模式，X,Y是U的子集， 对于R(U)的任意一个可能的关系r，r的任意两个元组在X上属性值相等， 那么在Y上的属性值也相等，称“X函数确定Y” 或Y函数依赖X，记为 X->Y. X称为这个函数依赖的决定属性组，也称为决定因素。例如：关...
- 1 简介这里介绍两种重要的搜索算法类型：线性搜索和二叉搜索。 2 线性搜索和二分查找的实现和复杂性分析这里通过简单示例、代码实现和时间复杂度分析来详细讨论这两个问题。 3 线性或顺序搜索工作原理是从一端按顺序遍历整个数组或列表，直到找到目标元素。如果找到该元素，则返回其索引，否则返回 -1。示例： arr = [6, 12, 15, 11, 9, 19, 49]我们需要找到 9 的索... 1 简介这里介绍两种重要的搜索算法类型：线性搜索和二叉搜索。 2 线性搜索和二分查找的实现和复杂性分析这里通过简单示例、代码实现和时间复杂度分析来详细讨论这两个问题。 3 线性或顺序搜索工作原理是从一端按顺序遍历整个数组或列表，直到找到目标元素。如果找到该元素，则返回其索引，否则返回 -1。示例： arr = [6, 12, 15, 11, 9, 19, 49]我们需要找到 9 的索...
- 1 简介数据驱动设计是一种主要由用户数据告知的网页设计方法。数据驱动设计的目的是通过可观察的测试来了解用户的需求并确定其优先级。这有助于创造令人愉悦的用户体验 UX，同时带来更多的网站流量和在线转化。请记住，作为一名web设计师，你和你设计的用户是不一样的。您的设计首选项以及团队或组织的首选项与目标用户群的首选项不匹配。这是因为： * 您对您的网站以及如何使用它有更好的了解。你花在它上的时... 1 简介数据驱动设计是一种主要由用户数据告知的网页设计方法。数据驱动设计的目的是通过可观察的测试来了解用户的需求并确定其优先级。这有助于创造令人愉悦的用户体验 UX，同时带来更多的网站流量和在线转化。请记住，作为一名web设计师，你和你设计的用户是不一样的。您的设计首选项以及团队或组织的首选项与目标用户群的首选项不匹配。这是因为： * 您对您的网站以及如何使用它有更好的了解。你花在它上的时...
- 1 表维护简介尽管某些应用程序仅包含静态内容，但它们异常时，将不得不一直进行数据修改，如何进行表维护？虽然这似乎是SQL 中最简单的功能，它仍然有改进的空间应用程序。永远记住，磁盘在一个周期内可以执行的写入操作数非常有限。如果你可以减少每秒的操作次数，你的应用程序将是性能更高。数据操作章节将教你根据信息更新行的技巧其他表，删除重复行或通过删除锁使您的应用程序更快争论。你应该仔细研究最后一个... 1 表维护简介尽管某些应用程序仅包含静态内容，但它们异常时，将不得不一直进行数据修改，如何进行表维护？虽然这似乎是SQL 中最简单的功能，它仍然有改进的空间应用程序。永远记住，磁盘在一个周期内可以执行的写入操作数非常有限。如果你可以减少每秒的操作次数，你的应用程序将是性能更高。数据操作章节将教你根据信息更新行的技巧其他表，删除重复行或通过删除锁使您的应用程序更快争论。你应该仔细研究最后一个...
- 1 简介软件工程实施中难免架构设计的过程，无论多大多小，总有设计的影子。 骨架和结构如何设计更合适？比如分层中的三层架构设计，瘦客户端，胖客户端。表示层，功能层，数据层等。这里简单介绍java语言中曾经（现在也很有用）非常经典的架构（框架）的设计方法。 2 Struts 框架Struts 是一个基于 SUN J2EE 平台的 MVC 框架,主要是采用 Servlet和JSP 技术来实现的... 1 简介软件工程实施中难免架构设计的过程，无论多大多小，总有设计的影子。 骨架和结构如何设计更合适？比如分层中的三层架构设计，瘦客户端，胖客户端。表示层，功能层，数据层等。这里简单介绍java语言中曾经（现在也很有用）非常经典的架构（框架）的设计方法。 2 Struts 框架Struts 是一个基于 SUN J2EE 平台的 MVC 框架,主要是采用 Servlet和JSP 技术来实现的...
- 1 数据驱动的三层结构每一种软件组织架构方式通常脱胎于其他架构方式，既有相似性，又具有某些特定场景限定的特征。比如，应用程序的开发分层，大多是逻辑上的分层。 物理上的分层常见于网络设备环境。 1.1 简介三层架构三层架构是一种十分完善的软件应用程序架构，它将应用程序组织成三个逻辑和物理计算层： 表示层（或用户界面） 应用层（负责处理数据） 数据层（负责存储和管理与应用程序... 1 数据驱动的三层结构每一种软件组织架构方式通常脱胎于其他架构方式，既有相似性，又具有某些特定场景限定的特征。比如，应用程序的开发分层，大多是逻辑上的分层。 物理上的分层常见于网络设备环境。 1.1 简介三层架构三层架构是一种十分完善的软件应用程序架构，它将应用程序组织成三个逻辑和物理计算层： 表示层（或用户界面） 应用层（负责处理数据） 数据层（负责存储和管理与应用程序...
上滑加载中
推荐直播
-
Ascend C算子编程之旅：基础入门篇2024/11/22 周五 16:00-17:30
莫老师 昇腾CANN专家
介绍Ascend C算子基本概念、异构计算架构CANN和Ascend C基本概述，以及Ascend C快速入门，夯实Ascend C算子编程基础
回顾中 -
深入解析：华为全栈AI解决方案与云智能开放能力2024/11/22 周五 18:20-20:20
Alex 华为云学堂技术讲师
本期直播我们将重点为大家介绍华为全栈全场景AI解决方案以和华为云企业智能AI开放能力。旨在帮助开发者深入理解华为AI解决方案，并能够更加熟练地运用这些技术。通过洞悉华为解决方案，了解人工智能完整生态链条的构造。
回顾中 -
华为云DataArts+DWS助力企业数据治理一站式解决方案及应用实践2024/11/27 周三 16:30-18:00
Walter.chi 华为云数据治理DTSE技术布道师
想知道数据治理项目中，数据主题域如何合理划分？数据标准及主数据标准如何制定？数仓分层模型如何合理规划？华为云DataArts+DWS助力企业数据治理项目一站式解决方案和应用实践告诉您答案！本期将从数据趋势、数据治理方案、数据治理规划及落地，案例分享四个方面来助力企业数据治理项目合理咨询规划及顺利实施。
去报名
热门标签