- 数据仓库服务（Data Warehouse Service，简称DWS）基于华为FusionInsight LibrA企业级数据仓库内核，提供即开即用、可扩展且完全托管的分析型数据库服务。用户开通数据仓库服务后，往往需要从其他关系数据库迁移数据，本人最近使用数据迁移服务在将MYSQL上的数据迁移到华为云数据仓库服务，进行一下总结。我的需求是首先将存储在MYSQL上的部分表历史数据一次性全部迁... 数据仓库服务（Data Warehouse Service，简称DWS）基于华为FusionInsight LibrA企业级数据仓库内核，提供即开即用、可扩展且完全托管的分析型数据库服务。用户开通数据仓库服务后，往往需要从其他关系数据库迁移数据，本人最近使用数据迁移服务在将MYSQL上的数据迁移到华为云数据仓库服务，进行一下总结。我的需求是首先将存储在MYSQL上的部分表历史数据一次性全部迁...
- MySQL is one of the world's most popular open-source relational databases. It works with Linux, Apache, and PHP to establish a LAMP stack, thereby providing efficient web solutions. MySQL is one of the world's most popular open-source relational databases. It works with Linux, Apache, and PHP to establish a LAMP stack, thereby providing efficient web solutions.
- InnoDB为了尽可能的让用户经常读取的数据都放在内存中，以减少磁盘的IO次数，提高读性能，加入了预读特性。这个特性会将用户很有可能使用到的数据预先加载到buffer pool中，当用户使用到这个数据时，就不必再从磁盘上读入，从而提升了数据的读取性能。然而一般数据库存储的数据量都会远远大于内存，innodb不可能全部都加载到内存中，对加载数据的选择，决定了预读是否能够有效提升整体性能。 InnoDB为了尽可能的让用户经常读取的数据都放在内存中，以减少磁盘的IO次数，提高读性能，加入了预读特性。这个特性会将用户很有可能使用到的数据预先加载到buffer pool中，当用户使用到这个数据时，就不必再从磁盘上读入，从而提升了数据的读取性能。然而一般数据库存储的数据量都会远远大于内存，innodb不可能全部都加载到内存中，对加载数据的选择，决定了预读是否能够有效提升整体性能。
- InnoDB通过BTree实现索引，Page(这里主要指Index Page，以下类似)包含了所有数据和索引的信息。原因是：Page为了让BTree索引更加高效，对Page的结构进行针对性的设计，使得Page被加载到内存中后，可以基于Page中的信息快速地构建出BTree，同时尽可能地减少额外的内存占用，提升BTree的修改、重构的性能。本文将通过Page的结构，来看InnoDB是如何做到这些的。 InnoDB通过BTree实现索引，Page(这里主要指Index Page，以下类似)包含了所有数据和索引的信息。原因是：Page为了让BTree索引更加高效，对Page的结构进行针对性的设计，使得Page被加载到内存中后，可以基于Page中的信息快速地构建出BTree，同时尽可能地减少额外的内存占用，提升BTree的修改、重构的性能。本文将通过Page的结构，来看InnoDB是如何做到这些的。
- Btr: B+ Tree，是innodb的核心数据结构，它作为数据的索引，让数据库能够快速找到指定的数据。B+ Tree的相关说明网上已经很多，本文通过insert操作的调用栈，来分析btr的操作过程。· Btr操作在insert的哪个过程中被调用?图1 insert的函数调用栈(btr部分)图1是一次insert操作打印的trace日志。大家可以看到第一行write_record Btr: B+ Tree，是innodb的核心数据结构，它作为数据的索引，让数据库能够快速找到指定的数据。B+ Tree的相关说明网上已经很多，本文通过insert操作的调用栈，来分析btr的操作过程。· Btr操作在insert的哪个过程中被调用?图1 insert的函数调用栈(btr部分)图1是一次insert操作打印的trace日志。大家可以看到第一行write_record
- MySQL源码学习(三) Group Commit承接MySQL源码学习(一) 从一次insert开始，本文会详细展开说明其中流程之一——Group CommitGroup Commit是MySQL 5.6版本加入的特性，目的是为了提高事务的并发度，并以此提高MySQL的性能。Group Commit的原理在多线程并发中，如果必须对资源的操作进行加锁，开发者最先想到的流程就是在资源操作前获取锁，操 MySQL源码学习(三) Group Commit承接MySQL源码学习(一) 从一次insert开始，本文会详细展开说明其中流程之一——Group CommitGroup Commit是MySQL 5.6版本加入的特性，目的是为了提高事务的并发度，并以此提高MySQL的性能。Group Commit的原理在多线程并发中，如果必须对资源的操作进行加锁，开发者最先想到的流程就是在资源操作前获取锁，操
- MySQL源码学习(二) Buffer PoolBuffer Pool是innodb的核心组件之一，所有数据的读取，都会先放到Buffer Pool中，再读取出来，而不是直接读取datafile文件。那么对于类似笔者这样的新手来说，从哪里开始阅读buffer pool的代码呢？在源代码中，几乎搜不到”buffer pool”这样的关键字?1. 从buf_pool_t开始在mysql代码 MySQL源码学习(二) Buffer PoolBuffer Pool是innodb的核心组件之一，所有数据的读取，都会先放到Buffer Pool中，再读取出来，而不是直接读取datafile文件。那么对于类似笔者这样的新手来说，从哪里开始阅读buffer pool的代码呢？在源代码中，几乎搜不到”buffer pool”这样的关键字?1. 从buf_pool_t开始在mysql代码
- 本文主要讲述基于Keepalived的Mysql双主单活故障自动切换方案中，keepalived异常检测，节点切换原理。在此基础上对数据一致性及切换时间进行了分析。 本文主要讲述基于Keepalived的Mysql双主单活故障自动切换方案中，keepalived异常检测，节点切换原理。在此基础上对数据一致性及切换时间进行了分析。
- 随着MySQL越来越流行，Mysql里面的保存的数据也越来越大。在日常的工作中，我们会遇到一张表里面保存了上亿甚至过十亿的记录。这些表里面保存了大量的历史记录。 对于这些历史数据的清理是一个非常头疼事情，由于所有的数据都一个普通的表里。所以只能是启用一个或多个带where条件的delete语句去删除（一般where条件是时间）。这对数据库的造成了很大压力。即使我们把这些删除了， 随着MySQL越来越流行，Mysql里面的保存的数据也越来越大。在日常的工作中，我们会遇到一张表里面保存了上亿甚至过十亿的记录。这些表里面保存了大量的历史记录。 对于这些历史数据的清理是一个非常头疼事情，由于所有的数据都一个普通的表里。所以只能是启用一个或多个带where条件的delete语句去删除（一般where条件是时间）。这对数据库的造成了很大压力。即使我们把这些删除了，
- 当发现自己数据库SQL执行慢的时候，可以排查自己的MYSQL数据库缓冲池是否已经不够。点击自己数据库的监控按钮，来到监控页面，可以看到命中率指标：可以看到两个指标，缓冲池利用率和缓冲池命中率如下：如果缓冲池利用率已经达到100%而该命中率小于95%，就需要扩容innodb_buffer_pool_size参数了，修改参数组中，该参数的值：注意，innodb_buffer_pool_size参数值最 当发现自己数据库SQL执行慢的时候，可以排查自己的MYSQL数据库缓冲池是否已经不够。点击自己数据库的监控按钮，来到监控页面，可以看到命中率指标：可以看到两个指标，缓冲池利用率和缓冲池命中率如下：如果缓冲池利用率已经达到100%而该命中率小于95%，就需要扩容innodb_buffer_pool_size参数了，修改参数组中，该参数的值：注意，innodb_buffer_pool_size参数值最
推荐直播
-
OpenHarmony应用开发之网络数据请求与数据解析2025/01/16 周四 19:00-20:30
华为开发者布道师、南京师范大学泰州学院副教授，硕士研究生导师，开放原子教育银牌认证讲师
科技浪潮中，鸿蒙生态强势崛起，OpenHarmony开启智能终端无限可能。当下，其原生应用开发适配潜力巨大，终端设备已广泛融入生活各场景，从家居到办公、穿戴至车载。 现在，机会敲门！我们的直播聚焦OpenHarmony关键的网络数据请求与解析，抛开晦涩理论，用真实案例带你掌握数据访问接口，轻松应对复杂网络请求、精准解析Json与Xml数据。参与直播，为开发鸿蒙App夯实基础，抢占科技新高地，别错过！
回顾中 -
Ascend C高层API设计原理与实现系列2025/01/17 周五 15:30-17:00
Ascend C 技术专家
以LayerNorm算子开发为例，讲解开箱即用的Ascend C高层API
回顾中
热门标签