-
MySQL 8 数据库主备构建详解一、引言在企业级应用中,数据的安全性和高可用性是至关重要的。MySQL 作为一款广泛使用的开源关系型数据库,为了保证数据的高可用性和容错能力,常常会采用主备复制(Master - Slave Replication)的架构。主备复制允许将一个 MySQL 数据库(主库)的数据自动复制到其他一个或多个 MySQL 数据库(备库)。当主库出现故障时,可以快速切换到备库,从而保证业务的连续性。二、环境准备2.1 服务器信息本次实验使用两台服务器,一台作为主库,一台作为备库,服务器信息如下:角色IP 地址操作系统MySQL 版本主库(Master)192.168.1.100CentOS 7MySQL 8.0备库(Slave)192.168.1.101CentOS 7MySQL 8.02.2 安装 MySQL 8在主库和备库服务器上分别安装 MySQL 8,以下是安装步骤:# 添加 MySQL Yum 仓库 wget https://dev.mysql.com/get/mysql80-community-release-el7-3.noarch.rpm rpm -ivh mysql80-community-release-el7-3.noarch.rpm # 安装 MySQL Server yum install mysql-server -y # 启动 MySQL 服务并设置开机自启 systemctl start mysqld systemctl enable mysqld # 获取初始密码 grep 'temporary password' /var/log/mysqld.log # 登录 MySQL 并修改密码 mysql -u root -p ALTER USER 'root'@'localhost' IDENTIFIED BY 'YourNewPassword'; 三、主库配置3.1 修改 MySQL 配置文件编辑主库的 MySQL 配置文件 /etc/my.cnf,添加或修改以下参数:[mysqld] # 服务器唯一 ID,范围 1 - 2^32 - 1 server-id = 1 # 开启二进制日志 log-bin = mysql-bin # 选择要复制的数据库,可根据实际情况修改 binlog-do-db = your_database_name # 跳过系统数据库的复制 binlog-ignore-db = mysql binlog-ignore-db = information_schema binlog-ignore-db = performance_schema binlog-ignore-db = sys修改完成后,重启 MySQL 服务:systemctl restart mysqld3.2 创建复制用户登录主库的 MySQL 客户端,创建一个用于复制的用户,并授予相应的权限:-- 创建复制用户 CREATE USER 'repl_user'@'192.168.1.101' IDENTIFIED BY 'repl_password'; -- 授予复制权限 GRANT REPLICATION SLAVE ON *.* TO 'repl_user'@'192.168.1.101'; -- 刷新权限 FLUSH PRIVILEGES; 3.3 查看主库状态在主库的 MySQL 客户端中执行以下命令,查看主库的二进制日志信息:SHOW MASTER STATUS; 输出结果如下:+------------------+----------+--------------+------------------+-------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set | +------------------+----------+--------------+------------------+-------------------+ | mysql-bin.000001 | 156 | your_database_name | mysql,information_schema,performance_schema,sys | | +------------------+----------+--------------+------------------+-------------------+记录下 File 和 Position 的值,后续配置备库时会用到。四、备库配置4.1 修改 MySQL 配置文件编辑备库的 MySQL 配置文件 /etc/my.cnf,添加或修改以下参数:[mysqld] # 服务器唯一 ID,范围 1 - 2^32 - 1,不能与主库重复 server-id = 2 # 开启中继日志 relay-log = mysql-relay-bin修改完成后,重启 MySQL 服务:systemctl restart mysqld4.2 配置备库连接主库登录备库的 MySQL 客户端,执行以下命令配置备库连接主库:CHANGE MASTER TO MASTER_HOST = '192.168.1.100', MASTER_USER = 'repl_user', MASTER_PASSWORD = 'repl_password', MASTER_LOG_FILE = 'mysql-bin.000001', MASTER_LOG_POS = 156; 其中,MASTER_HOST 为主库的 IP 地址,MASTER_USER 和 MASTER_PASSWORD 为之前创建的复制用户和密码,MASTER_LOG_FILE 和 MASTER_LOG_POS 为主库执行 SHOW MASTER STATUS 命令得到的 File 和 Position 的值。4.3 启动备库复制进程在备库的 MySQL 客户端中执行以下命令启动备库的复制进程:START SLAVE; 4.4 检查备库状态执行以下命令检查备库的复制状态:SHOW SLAVE STATUS\G输出结果中,Slave_IO_Running 和 Slave_SQL_Running 都应该为 Yes,表示备库的复制进程正常运行:*************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.1.100 Master_User: repl_user Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin.000001 Read_Master_Log_Pos: 156 Relay_Log_File: mysql-relay-bin.000002 Relay_Log_Pos: 320 Relay_Master_Log_File: mysql-bin.000001 Slave_IO_Running: Yes Slave_SQL_Running: Yes ...五、测试主备复制5.1 在主库创建测试数据库和表在主库的 MySQL 客户端中执行以下命令创建测试数据库和表,并插入数据:-- 创建测试数据库 CREATE DATABASE test_db; -- 使用测试数据库 USE test_db; -- 创建测试表 CREATE TABLE test_table ( id INT AUTO_INCREMENT PRIMARY KEY, name VARCHAR(50) ); -- 插入数据 INSERT INTO test_table (name) VALUES ('Test Data'); 5.2 检查备库数据同步情况在备库的 MySQL 客户端中执行以下命令,检查数据是否同步到备库:-- 查看数据库 SHOW DATABASES; -- 使用测试数据库 USE test_db; -- 查看表 SHOW TABLES; -- 查询数据 SELECT * FROM test_table; 如果能看到与主库相同的数据库、表和数据,则说明主备复制配置成功。六、常见问题及解决方法6.1 Slave_IO_Running 为 No原因:可能是主库和备库之间的网络连接问题、复制用户权限不足、主库二进制日志信息配置错误等。解决方法:检查主库和备库之间的网络连接是否正常,可以使用 ping 和 telnet 命令进行测试。检查复制用户的权限是否正确,确保该用户具有 REPLICATION SLAVE 权限。检查 CHANGE MASTER TO 命令中的主库二进制日志信息是否正确。6.2 Slave_SQL_Running 为 No原因:可能是备库执行 SQL 语句时出现错误,如数据冲突、表结构不一致等。解决方法:查看 SHOW SLAVE STATUS 输出结果中的 Last_SQL_Error 字段,获取具体的错误信息。根据错误信息进行相应的处理,如修复数据冲突、调整表结构等。
-
使用存储过程的弊端?
-
为什么mysql8.0中取消了查询缓存?
-
mysql中的组提交有什么用,工作中好像没用过
-
什么是事务的二阶段提交?
-
mysql中的order by+limit为什么会数据重复?
-
数据库乐观锁的过程中,完全没有加任何锁吗?
-
mysql的自增主键用完了怎么办?
-
如何避免InnoDB的页分裂?
-
什么是buffer pool,它的作用是什么?工作中好像没有用到过,它重要吗?
-
内容总结公用表表达式(CTE):通过介绍SQL中的公用表表达式,文章展示了CTE如何简化复杂查询、提升可读性,并在查询中避免重复计算。CTE作为数据查询的新宠儿,已经成为SQL中不可或缺的部分。MySQL表死锁:文章详细讲解了MySQL中的表死锁,帮助开发者理解死锁的产生原因、如何诊断死锁以及如何通过合理的锁定策略避免死锁的发生。MySQL 5.7与8.0的差异:探讨了MySQL 5.7与8.0版本之间的主要差异,包括性能优化、新特性、SQL功能等,并对如何迁移和兼容这两个版本提供了指导。MySQL Binlog实战:深入剖析了MySQL二进制日志(Binlog)的应用,包括在生产环境中的使用案例、备份恢复和主从复制中的重要作用,以及如何配置和优化Binlog。MySQL慢查询日志配置:介绍了如何通过MySQL的慢查询日志识别数据库的性能瓶颈,并提供了优化查询、提高数据库响应速度的实用建议。MySQL触发器实战:讨论了MySQL触发器的使用场景和最佳实践,展示了如何利用触发器自动化执行某些操作,简化数据库管理和维护。Show Master Status:讲解了MySQL中的SHOW MASTER STATUS命令,分析了它的作用,如何通过该命令监控主从复制的状态,并排查复制异常。Spring中的AbstractRoutingDataSource:通过解读Spring框架中的AbstractRoutingDataSource,文章展示了如何在应用程序中实现数据源的动态路由切换,提升数据库访问的灵活性和性能。链接地址标题: 揭秘SQL中的公用表表达式:数据查询的新宠儿链接: https://bbs.huaweicloud.com/forum/thread-0257175683276737037-1-1.html标题: 从新手到高手:彻底掌握MySQL表死锁链接: https://bbs.huaweicloud.com/forum/thread-0218175683374852038-1-1.html标题: 穿越MySQL版本时光:5.7和8.0的差异全揭秘链接: https://bbs.huaweicloud.com/forum/thread-0226175683496073035-1-1.html标题: MySQL Binlog实战:在生产环境中的应用与最佳实践链接: https://bbs.huaweicloud.com/forum/thread-02127175683646926038-1-1.html标题: MySQL慢查询日志配置指南:发现性能瓶颈,提升数据库效率链接: https://bbs.huaweicloud.com/forum/thread-0251175683913606038-1-1.html标题: MySQL触发器实战:自动执行的秘密链接: https://bbs.huaweicloud.com/forum/thread-0226175684173596037-1-1.html标题: 你真的知道Show Master Status吗?链接: https://bbs.huaweicloud.com/forum/thread-0220175684389867039-1-1.html标题: 数据库轻松切换:解读Spring中的AbstractRoutingDataSource链接: https://bbs.huaweicloud.com/forum/thread-0225175684485361043-1-1.html
-
前言在编程的世界里,就像是一场魔法表演,我们可以通过各种神奇的技巧创造出令人惊叹的效果。而在Spring框架中,AbstractRoutingDataSource就像是一把神奇的魔杖,能够让我们轻松地实现数据库的动态切换。它就像是一位智慧的导航员,能够帮助我们在复杂的数据库系统中找到正确的路线。现在,就让我们一起来揭开AbstractRoutingDataSource的神秘面纱,探索它的魅力所在吧!AbstractRoutingDataSource介绍AbstractRoutingDataSource 是 Spring 框架提供的一个抽象基类,专门用于实现数据源的动态路由。这个类继承自 javax.sql.DataSource,允许开发者根据当前的执行环境或者业务逻辑动态地切换到不同的数据源。作用和优势:作用:数据源动态切换:AbstractRoutingDataSource 根据定义的路由规则(如当前的事务是否是只读事务),决定使用哪一个数据源。这在实现多租户系统或读写分离时非常有用,因为它允许同一个应用动态地针对不同的数据库操作,选择不同的数据源。简化配置:它使得配置多个数据源变得简单,可以在一个地方集中管理所有的数据源配置。透明访问:应用代码不需要关心当前使用的是哪个数据源,数据源的选择对业务逻辑是透明的。优势:灵活性:它提供了在运行时根据业务规则选择合适数据源的能力,增加了应用的灵活性。减少代码重复:不需要在每个数据库操作中硬编码数据源选择逻辑,避免了代码重复。易于维护和扩展:中心化的数据源管理使得添加新的数据源或者更改现有数据源配置更加容易。与Spring集成:AbstractRoutingDataSource 与 Spring 框架紧密集成,利用 Spring 的事务管理能力,可以无缝地与 Spring 事务一起工作。使用 AbstractRoutingDataSource 实现多数据源动态切换的理由:一致性:AbstractRoutingDataSource 提供了一种标准的方式来处理多数据源的问题,确保了整个应用的数据源选择逻辑是一致的。事务管理:当与 Spring 的声明式事务管理一起使用时,可以确保数据源在整个事务中保持一致,而不会在事务的中间发生切换。减少配置错误:集中管理多个数据源配置减少了配置错误的可能性,并且使配置更加清晰。性能:在不牺牲性能的情况下实现了数据源的动态切换。解耦和透明性:业务代码不需要关心数据源的切换逻辑,这样可以更专注于业务本身,同时也降低了业务逻辑与数据访问层的耦合度。总的来说,使用 AbstractRoutingDataSource 实现多数据源切换可以让应用保持高度的灵活性和可维护性,同时也能够与 Spring 的其他功能(如事务管理)无缝集成。实现原理解析AbstractRoutingDataSource 的工作原理其实很简单。它维护了一个 Map<Object, DataSource> 类型的数据源映射表,这个映射表用来存储标识符(一般是字符串或者枚举类型)到 DataSource 的映射关系。当需要获取连接时,AbstractRoutingDataSource 会调用 determineCurrentLookupKey() 方法来获取当前的标识符,然后根据这个标识符在映射表中查找对应的 DataSource。以下是 AbstractRoutingDataSource 工作流程的简化示意图:+-----------------+ +---------------------+ | Application | | AbstractRouting | | (Transaction) | | DataSource | +-----------------+ +---------------------+ | | | - determineCurrent | | begin | | LookupKey() | | transaction | | - lookupDataSource | +-----------------+ | (lookupKey) | | | - getConnection | | | () | | +---------------------+ | | +------------------------->| | | | +--------------+ | +-----------------+ | | DataSource | | | DataSource | | | Mapping | | | (Actual) | | +--------------+ | +-----------------+ | | lookupKey | | | - getConnection | | | -> DataSource | | | () | | +--------------+ | +-----------------+ | | | +<-------------------------+ | | | | v | +-----------------+ | | Database | | +-----------------+ | | - execute | | | SQL | +---------------------------> | - return | | | result | +<--------------------------- | | v +-----------------+ +-----------------+ | Application | | (Transaction) | +-----------------+ | handle result | +-----------------+在实际案例中,可以通过在业务代码中设置一个 ThreadLocal 变量来存储当前线程需要使用的数据源标识符,然后在 determineCurrentLookupKey() 方法中返回这个变量的值。例如,在一个多租户系统中,可以在用户登录时根据用户所属的租户设置数据源标识符,这样在后续的数据库操作中就会自动使用对应租户的数据源。这是一个简单的示例:public class TenantAwareRoutingDataSource extends AbstractRoutingDataSource { @Override protected Object determineCurrentLookupKey() { return TenantContext.getCurrentTenant(); } } 在这个例子中,TenantContext.getCurrentTenant() 方法会返回当前线程中存储的租户标识符,然后 AbstractRoutingDataSource 会使用这个标识符来查找对应的 DataSource。这样,不同租户的请求就可以自动路由到对应的数据源,实现了租户级别的数据隔离。总的来说,AbstractRoutingDataSource 的工作原理是通过维护一个数据源映射表并根据当前环境动态选择数据源,这使得它可以很容易地实现多数据源动态切换的需求。与其他数据源管理方式比较使用 AbstractRoutingDataSource 管理多数据源与其他方式相比,有以下优缺点:1. 与手动切换数据源比较:优点:自动化:AbstractRoutingDataSource 能够自动根据指定的规则切换数据源,无需手动设置。透明性:业务代码不需要关心数据源的切换,降低了业务逻辑与数据访问层的耦合度。缺点:配置复杂:相比于手动切换,AbstractRoutingDataSource 的配置相对复杂。适用场景: 当需要根据业务规则自动切换数据源时,推荐使用 AbstractRoutingDataSource。例如,在实现多租户系统或读写分离时。2. 与使用 AOP 切换数据源比较:优点:灵活性:AbstractRoutingDataSource 可以根据业务规则在运行时动态切换数据源,而 AOP 切换数据源通常在编译时就已经确定。性能:AbstractRoutingDataSource 直接在获取连接时切换数据源,性能较好。而 AOP 切换数据源需要在每次数据库操作前后切换数据源,性能较差。缺点:配置复杂:相比于 AOP 切换数据源,AbstractRoutingDataSource 的配置相对复杂。适用场景: 当需要在运行时根据业务规则动态切换数据源,且对性能有要求时,推荐使用 AbstractRoutingDataSource。例如,在实现多租户系统或读写分离时。总的来说,AbstractRoutingDataSource 提供了一种灵活且高效的方式来管理和切换多个数据源。虽然它的配置相对复杂,但是其自动化、透明性和性能优势使得它在很多场景下都是一个不错的选择。注意事项与扩展功能使用 AbstractRoutingDataSource 时,需要注意以下几点:数据源切换的时机:数据源的切换应在当前事务开始之前进行,否则可能无法获取到正确的数据库连接。如果在事务中需要切换数据源,那么你可能需要将事务拆分为多个子事务。线程安全:在多线程环境中,需要确保数据源键的存储方式是线程安全的。一种常见的做法是使用 ThreadLocal 来存储数据源键。数据源的清理:在数据源使用完毕后,应当及时清理数据源键,以防止数据源键在其他地方被错误地重用。事务管理器:在配置事务管理器时,应该使用 AbstractRoutingDataSource 作为数据源,而不是具体的数据源实例。至于扩展功能,AbstractRoutingDataSource 可以用来实现许多高级的数据源管理需求,例如:多租户支持:在多租户系统中,每个租户可能需要使用自己的数据库。此时,可以通过 AbstractRoutingDataSource 的子类来动态切换到正确的数据源。读写分离:在读写分离的系统中,可以使用 AbstractRoutingDataSource 来根据当前的数据库操作(读或写)来选择据源。数据库路由:在分布式数据库系统中,可以通过 AbstractRoutingDataSource 来根据某种路由算法(例如哈希或范围)来选择数据源。总的来说,AbstractRoutingDataSource 提供了一种非常灵活的方式来管理和切换数据源,其可能的用途远不止这些。只要理解了其工作原理,你就可以根据自己的需求来定制和扩展它的功能。
-
前言在数据库的世界里,每一个字段都像是一个谜团,它们隐藏着无数的故事和秘密。而今天,就让我们一起来揭开MySQL中SHOW MASTER STATUS命令返回的字段所代表的秘密,探索这些字段背后的故事吧!从此,让我们更加深入地了解数据库的神秘世界!file详解File: 这一列显示了当前正在写入的二进制日志文件的文件名。二进制日志文件包含了MySQL服务器接收到的所有更改操作,这些操作将被用于数据复制和恢复。文件名通常是一个基于数字的字符串,例如mysql-bin.000001,其中mysql-bin是二进制日志文件的前缀,而.000001是文件的序列号。MySQL会自动创建新的二进制日志文件,并在文件大小达到一定阈值或者MySQL服务器重启时自动切换到新文件。Position详解在MySQL中,二进制日志(Binary Log)是用于记录数据库中发生的更改操作的一种日志文件。Position(位置)是SHOW MASTER STATUS命令输出中的一列,它表示当前二进制日志文件中正在写入的位置。下面是对Position(位置)的解释:Position(位置):这一列显示了当前正在写入的二进制日志文件中的位置。位置表示了二进制日志文件中的一个特定点,即MySQL服务器已经写入的字节数。在进行数据复制或者恢复操作时,从指定位置开始读取二进制日志文件,以确保在从主服务器到从服务器的数据传输中不会丢失任何更改操作。位置的值是一个非负整数,通常表示从二进制日志文件的开头到指定位置之间的字节数。举个例子,如果SHOW MASTER STATUS命令的输出如下所示:+------------------+-----------+--------------+------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | +------------------+-----------+--------------+------------------+ | mysql-bin.000003 | 337 | test | | +------------------+-----------+--------------+------------------+ 在这个例子中,Position列显示的位置值为337。这表示当前正在写入的二进制日志文件(文件名为mysql-bin.000003)已经写入了337个字节的数据。如果需要从这个位置开始进行数据复制或者恢复操作,可以将这个位置作为起始点。Binlog_Do_DBBinlog_Do_DB 是 MySQL 中用于配置二进制日志(Binary Log)的一个选项之一。它用于指定哪些数据库的更改操作会被记录在二进制日志中。当设置了 Binlog_Do_DB 选项时,只有被列出的数据库的更改操作才会被写入二进制日志。其他数据库的更改操作则会被忽略,不会记录在二进制日志中。这个选项通常在主从复制(Replication)和数据恢复的场景中使用。通过限制二进制日志中记录的数据库,可以减少生成的二进制日志文件的大小,从而减少磁盘空间的使用量和网络传输的数据量。举例来说,如果设置了 Binlog_Do_DB = mydatabase,那么只有名为 mydatabase 的数据库中的更改操作才会被记录在二进制日志中。其他数据库的更改操作会被忽略,不会记录在二进制日志中。这个选项的设置通常通过在 MySQL 配置文件中进行配置,也可以通过动态修改系统变量来实现。Binlog_Ignore_DBBinlog_Ignore_DB 是 MySQL 中用于配置二进制日志(Binary Log)的另一个选项。与 Binlog_Do_DB 相反,Binlog_Ignore_DB 用于指定哪些数据库的更改操作不会被记录在二进制日志中。当设置了 Binlog_Ignore_DB 选项时,被列出的数据库的更改操作将被忽略,不会被写入二进制日志。其他数据库的更改操作仍然会被记录在二进制日志中。这个选项也通常用于主从复制(Replication)和数据恢复的场景中。通过忽略指定的数据库,可以确保不会记录这些数据库的更改操作,从而避免在复制过程中传输这些数据,减少网络传输的数据量和从服务器上的磁盘空间占用。举例来说,如果设置了 Binlog_Ignore_DB = temp_database,那么名为 temp_database 的数据库中的更改操作将不会被记录在二进制日志中。其他数据库的更改操作仍会被记录在二进制日志中。这个选项的设置同样可以通过在 MySQL 配置文件中进行配置,也可以通过动态修改系统变量来实现。Executed_Gtid_SetExecuted_Gtid_Set 是 MySQL 中的一个属性,用于记录已经在当前服务器上执行的全局事务标识(GTID)。GTID 是全局事务标识符的缩写,它是一个唯一的标识符,用于标识数据库中的每个事务。MySQL 5.6 引入了 GTID 来简化复制拓扑和管理。在具有 GTID 复制的环境中,每个事务都有一个唯一的 GTID,该 GTID 标识了事务在整个复制拓扑中的位置。当一个事务在主服务器上被提交时,它会生成一个 GTID,并且在从服务器上执行相同的事务时,也会使用相同的 GTID。Executed_Gtid_Set 记录了当前服务器上已经执行的所有事务的 GTID。这个属性对于确保主从服务器之间的数据一致性非常重要。当从服务器需要与主服务器同步时,它可以使用 Executed_Gtid_Set 来确定从哪个 GTID 开始应用日志。在 MySQL 中,您可以使用 SHOW MASTER STATUS 或 SHOW SLAVE STATUS 命令来查看当前服务器上的 Executed_Gtid_Set。这个值通常以一串形如 b7fa4ae2-3aa4-11ec-8eb9-0242ac110002:1-4 的格式表示,其中包含了一个或多个 GTID 范围。
上滑加载中
推荐直播
-
华为云码道Agent集成与鸿蒙实战2026/08/11 周二 19:00-21:00
王一男-华为云码道产品规划专家;李炎-华为云码道产品专家;彭江敏-华为云鸿蒙端云一体化开发专家
本次直播带你解读华为云码道7月份产品新特性、新功能。更有专家演示码道Agent Space × 钉钉机器集成实战,从0到1打通消息通道;码道鸿蒙端云一体化实战,快速搭建员工签到系统。
回顾中 -
华为云开发者AI素养直播课·第五期2026/09/04 周五 16:00-18:00
林华鼎-华为云AI开发者运营负责人;蒋春阳-华为云AI开发者案例开发专家
本期直播内容: AI工具体验营 · 第5-8课连讲。Agent-Team 多智能体协作完成毕业设计实践
回顾中 -
华为云开发者AI素养ClassRoom·第六期2026/09/08 周二 19:00-20:00
樊渊-2026华为软件挑战赛冠军
高手来了:看软挑高手解析二维排样问题—从工业难题到算法突破
回顾中
热门标签