- 在数据库查询优化中,GROUP BY和ORDER BY是高频使用但易引发性能瓶颈的操作。当数据量增长时,未合理利用索引可能导致全表扫描、磁盘临时表或文件排序(Using filesort),显著拖慢响应速度。本文从索引设计原理切入,详解如何通过针对性优化提升这两类操作的执行效率。 一、为什么需要索引优化?性能痛点无索引时,GROUP BY需全表扫描创建临时分组表,ORDER BY则需额外排序... 在数据库查询优化中,GROUP BY和ORDER BY是高频使用但易引发性能瓶颈的操作。当数据量增长时,未合理利用索引可能导致全表扫描、磁盘临时表或文件排序(Using filesort),显著拖慢响应速度。本文从索引设计原理切入,详解如何通过针对性优化提升这两类操作的执行效率。 一、为什么需要索引优化?性能痛点无索引时,GROUP BY需全表扫描创建临时分组表,ORDER BY则需额外排序...
- 1. 背景介绍预写日志(WAL:Write-Ahead Logging)是数据库最重要的组件之一,用于保证数据操作的原子性和持久性。WAL(在InnoDB中称为Redo Log)中保存了所有对数据文件的更改记录,所有的修改在提交之前都要先写入 Log 文件中,如此既可以延迟修改后的页面刷新到磁盘的时间,又可以防止数据丢失。当写密集型工作负载写入Redo Log时,性能会因许多用户线程同步操作... 1. 背景介绍预写日志(WAL:Write-Ahead Logging)是数据库最重要的组件之一,用于保证数据操作的原子性和持久性。WAL(在InnoDB中称为Redo Log)中保存了所有对数据文件的更改记录,所有的修改在提交之前都要先写入 Log 文件中,如此既可以延迟修改后的页面刷新到磁盘的时间,又可以防止数据丢失。当写密集型工作负载写入Redo Log时,性能会因许多用户线程同步操作...
- 本文重点讲解如何在将设计好的动态表单信息进行提取,比如进行模板数据导入的时候,可以根据不同的表单类型,比如根据单行文字框的名字来动态设置值,也可以在导数数据时,知道将数据库的性别一列保存的1和2翻译成男和女这两种属性。这都需要我们精准的提取表单中的不同的信息。通过本文,可以了解如何正确的操作动态表单信息,同时了解如何从表单中查找表单元素。 本文重点讲解如何在将设计好的动态表单信息进行提取,比如进行模板数据导入的时候,可以根据不同的表单类型,比如根据单行文字框的名字来动态设置值,也可以在导数数据时,知道将数据库的性别一列保存的1和2翻译成男和女这两种属性。这都需要我们精准的提取表单中的不同的信息。通过本文,可以了解如何正确的操作动态表单信息,同时了解如何从表单中查找表单元素。
- BaikalDB 架构演进实录:打造融合向量化与 MPP 的 HTAP 查询引擎引言在数字化浪潮中,企业数据规模呈指数级增长,传统数据库在实时分析和高并发事务处理上的瓶颈日益凸显。BaikalDB 作为百度自主研发的分布式数据库,历经多年演进,成功融合向量化执行引擎与 MPP(大规模并行处理)架构,打造出新一代 HTAP(混合事务与分析处理)查询引擎。本文将从架构设计、技术实现到场景落地,深... BaikalDB 架构演进实录:打造融合向量化与 MPP 的 HTAP 查询引擎引言在数字化浪潮中,企业数据规模呈指数级增长,传统数据库在实时分析和高并发事务处理上的瓶颈日益凸显。BaikalDB 作为百度自主研发的分布式数据库,历经多年演进,成功融合向量化执行引擎与 MPP(大规模并行处理)架构,打造出新一代 HTAP(混合事务与分析处理)查询引擎。本文将从架构设计、技术实现到场景落地,深...
- 一、理解索引的本质与回表代价在数据库性能优化中,索引设计是决定查询效率的核心要素。当我们谈论覆盖索引时,首先需要理解两个关键概念:索引组织表结构和回表查询代价。 1. 索引的物理存储结构以 MySQL 的 InnoDB 引擎为例,主键索引(聚簇索引)采用 B+Tree 结构,其叶子节点直接存储完整数据行。而普通二级索引的叶子节点仅存储主键值和索引列数据,这种设计带来了显著的性能差异:-- ... 一、理解索引的本质与回表代价在数据库性能优化中,索引设计是决定查询效率的核心要素。当我们谈论覆盖索引时,首先需要理解两个关键概念:索引组织表结构和回表查询代价。 1. 索引的物理存储结构以 MySQL 的 InnoDB 引擎为例,主键索引(聚簇索引)采用 B+Tree 结构,其叶子节点直接存储完整数据行。而普通二级索引的叶子节点仅存储主键值和索引列数据,这种设计带来了显著的性能差异:-- ...
- 1、背景介绍数据库系统与文件系统的核心差异,在于数据库系统能够最大限度地保证ACID特性。在ACID特性中,数据一致性尤为重要。在崩溃恢复场景下,InnoDB引擎是通过Redo Log(重做日志,记录数据页的物理修改)和Undo Log(撤销日志,记录事务中更新前的历史数据)协同来实现数据一致性这一目标的。当数据库异常崩溃后重启,会先触发Roll-forward(前滚),通过重放Redo L... 1、背景介绍数据库系统与文件系统的核心差异,在于数据库系统能够最大限度地保证ACID特性。在ACID特性中,数据一致性尤为重要。在崩溃恢复场景下,InnoDB引擎是通过Redo Log(重做日志,记录数据页的物理修改)和Undo Log(撤销日志,记录事务中更新前的历史数据)协同来实现数据一致性这一目标的。当数据库异常崩溃后重启,会先触发Roll-forward(前滚),通过重放Redo L...
- 分享ICDE‘25的前沿研究洞察;Flexus L实例中已预安装Open WebUI,开箱即用;恒翼能携手华为云与希维云,基于希维云全生命周期质量管理平台,助力推动企业质量管理数字化升级... 分享ICDE‘25的前沿研究洞察;Flexus L实例中已预安装Open WebUI,开箱即用;恒翼能携手华为云与希维云,基于希维云全生命周期质量管理平台,助力推动企业质量管理数字化升级...
- 雷军说:“如果你想干一件事,就先去干,哪怕做得很烂,哪怕一点也不完美。 一个粗糙的开始,就是最好的开始,别等自己准备了万无一失才行动。 因为根本没有完美的准备,只有在行动中不断调整和进化。 真正的成长都是在问题中摸索出来的,潜力也是在实践中被激发的,时间从不会等你,每一天都是你最年轻的一天,错过了当下就是错过了最好的机会。一、前提条件:1、已经安装了Mysql2、将以下目录复制一份到:C:\... 雷军说:“如果你想干一件事,就先去干,哪怕做得很烂,哪怕一点也不完美。 一个粗糙的开始,就是最好的开始,别等自己准备了万无一失才行动。 因为根本没有完美的准备,只有在行动中不断调整和进化。 真正的成长都是在问题中摸索出来的,潜力也是在实践中被激发的,时间从不会等你,每一天都是你最年轻的一天,错过了当下就是错过了最好的机会。一、前提条件:1、已经安装了Mysql2、将以下目录复制一份到:C:\...
- 在数据库管理中,限制和回收删除权限(DELETE)是保障数据安全的重要操作。不同数据库系统(如 MySQL、PostgreSQL、SQL Server 等)的权限管理机制略有差异,但核心逻辑相似:通过精细控制权限授予范围来限制删除操作,并通过权限回收命令撤销已授权限。以下是具体方法和示例:一、限制删除权限的核心思路限制删除权限的关键是仅授予必要的最小权限... 在数据库管理中,限制和回收删除权限(DELETE)是保障数据安全的重要操作。不同数据库系统(如 MySQL、PostgreSQL、SQL Server 等)的权限管理机制略有差异,但核心逻辑相似:通过精细控制权限授予范围来限制删除操作,并通过权限回收命令撤销已授权限。以下是具体方法和示例:一、限制删除权限的核心思路限制删除权限的关键是仅授予必要的最小权限...
- 1、背景介绍在我们刚接触MySQL数据库时,就知道了四个渐进的隔离级别:读未提交(READ UNCOMMITTED,简称RU)、读已提交(READ COMMITTED,简称RC)、可重复读(REPEATABLE READ,简称RR)和可串行化(SERIALIZABLE)。在生产环境中最常用的是RC和RR,二者最主要的区别是同一个事务中间,不同时间点执行的快照读(区别于LOCK IN SHAR... 1、背景介绍在我们刚接触MySQL数据库时,就知道了四个渐进的隔离级别:读未提交(READ UNCOMMITTED,简称RU)、读已提交(READ COMMITTED,简称RC)、可重复读(REPEATABLE READ,简称RR)和可串行化(SERIALIZABLE)。在生产环境中最常用的是RC和RR,二者最主要的区别是同一个事务中间,不同时间点执行的快照读(区别于LOCK IN SHAR...
- 在MySQL中,我们可以通过以下几种方法来查看一个SQL的执行耗时:1. 使用 SHOW PROFILESSHOW PROFILES 是MySQL 5.0.37之后添加的功能,可以用来分析当前会话中语句执行的资源消耗情况,包括执行时间。步骤检查是否支持 SHOW PROFILES:SELECT @@have_profiling;如果结果为 YES,则支持该功能。检查 profiling 是否... 在MySQL中,我们可以通过以下几种方法来查看一个SQL的执行耗时:1. 使用 SHOW PROFILESSHOW PROFILES 是MySQL 5.0.37之后添加的功能,可以用来分析当前会话中语句执行的资源消耗情况,包括执行时间。步骤检查是否支持 SHOW PROFILES:SELECT @@have_profiling;如果结果为 YES,则支持该功能。检查 profiling 是否...
- FlinkCDC Mysql To Starrocks 一、开发实时同步脚本#智慧园区表--开发实时同步脚本mysql-to-starrocks_route_db_evoc9_person_ps_person.yamlsource: type: mysql hostname: 172.16.5.11 port: 3305 username: bigdata_repl pa... FlinkCDC Mysql To Starrocks 一、开发实时同步脚本#智慧园区表--开发实时同步脚本mysql-to-starrocks_route_db_evoc9_person_ps_person.yamlsource: type: mysql hostname: 172.16.5.11 port: 3305 username: bigdata_repl pa...
- 1、关于子查询在 SQL 查询中,一个查询语句可以嵌入到另一个查询语句中,这种嵌入的查询称为子查询,而包含子查询的查询则被称为外层查询。根据子查询与外层查询的关联性,子查询可以分为相关子查询(依赖于外层查询中的某些值)和非相关子查询(可以独立执行)。子查询可以出现在外层查询的任何部分,这极大地简化了数据库操作。然而,如果优化器没有选择合适的执行计划,或者子查询使用不当,可能会显著降低执行效率... 1、关于子查询在 SQL 查询中,一个查询语句可以嵌入到另一个查询语句中,这种嵌入的查询称为子查询,而包含子查询的查询则被称为外层查询。根据子查询与外层查询的关联性,子查询可以分为相关子查询(依赖于外层查询中的某些值)和非相关子查询(可以独立执行)。子查询可以出现在外层查询的任何部分,这极大地简化了数据库操作。然而,如果优化器没有选择合适的执行计划,或者子查询使用不当,可能会显著降低执行效率...
- Mycat多Schema配置前言在分布式数据库架构中,Mycat 作为一个中间件,提供了强大的数据分片和路由能力。它能够帮助我们实现数据库的水平扩展,提高系统的性能和可用性。本文将详细介绍如何在 Mycat 中配置多个 Schema,以满足不同业务模块的数据隔离需求。什么是Schema在数据库中,Schema 是一个逻辑容器,用于组织和分类相关的数据库对象(如表、视图、索引等)。通过使用不同... Mycat多Schema配置前言在分布式数据库架构中,Mycat 作为一个中间件,提供了强大的数据分片和路由能力。它能够帮助我们实现数据库的水平扩展,提高系统的性能和可用性。本文将详细介绍如何在 Mycat 中配置多个 Schema,以满足不同业务模块的数据隔离需求。什么是Schema在数据库中,Schema 是一个逻辑容器,用于组织和分类相关的数据库对象(如表、视图、索引等)。通过使用不同...
- 某天下午,提交了代码的我正在测试环境狠狠地测试刚完成的新功能,把业务流程走了一遍没发现什么问题,美滋滋地准备享受下午茶,但突然发现页面上有的接口打开速度变慢了,要好几秒,刚开始以为是自己的网卡了,刷新后又测试了几下,发现确实有时候接口会变慢,于是开始了漫漫排查之路! 一、问题在页面上表现出来的效果是:测试环境下的接口偶尔出现变慢的情况。经过统计发现一定规律:平均调用十次的情况下,差不多每隔三... 某天下午,提交了代码的我正在测试环境狠狠地测试刚完成的新功能,把业务流程走了一遍没发现什么问题,美滋滋地准备享受下午茶,但突然发现页面上有的接口打开速度变慢了,要好几秒,刚开始以为是自己的网卡了,刷新后又测试了几下,发现确实有时候接口会变慢,于是开始了漫漫排查之路! 一、问题在页面上表现出来的效果是:测试环境下的接口偶尔出现变慢的情况。经过统计发现一定规律:平均调用十次的情况下,差不多每隔三...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签