数据库主从分离和读写分离
迪丽瓦拉
2024-06-03 16:13:29
0
问题:
读和写所有压力都由一台数据库承担,压力大(没有实现扩容)
数据库服务器磁盘损坏则数据丢失,单点故障(没有实现高可用)
解决:
      使用集群做高可用

1.MySQL主从复制

MySQL主从复制是一个异步的复制过程,底层是基于MySQL数据库自带的二进制日志功能。就是一台或多台MySQL数据库(slave,即从库)从另一台MySQL数据库(master,即主库)进行日志复制然后再解析日志并应用到自身,最终实现从库和主库的数据保持一致。MySQL主从复制是MySQL数据库自带功能,无需借助第三方工具。

MySQL复制过程分为三步:

1.master将改变记录到二进制日志(binary log)。

 2.slave将master的binary log拷贝到它的中继日志(relay log)。

(从节点【IO线程】会不断地监听主节点的binlog)

 3.slave重做中继日志中的事件,将改变应用到自己的数据库中。

(从节点还有一个【sql线程】会读取中继日志的内容指令然后进行【重做】,保证从库和主库数据的一致)


2.实现数据库主从复制的配置过程

1.准备两台装好mysql的服务器

2.对主库进行配置

1.修改mysql配置文件:

1.vim /etc/my.cnf

在末尾加入两行:

log-bin=mysql-bin      #[必须]启用二进制日志

 server-id=123 #[必须]服务器唯一ID(唯一即可)

2.重启mysql服务让配置生效:

systemctl restart mysqld

3.登录mysql授予从节点主从复制账号访问权限:

GRANT REPLICATION SLAVE ON . to 'thrjy'@'%' identified by 'Root@123456';

4.刷新权限配置:

flush privileges;

5.查看主节点状态:(每有一次修改就会有偏移量,状态就会改变)

show master status;

(需要记录下结果等会做从库时要用。)


3.对从库进行配置

1.修改配置文件:

vim /etc/my.cnf

在末尾加上两行配置:

server-id=456             #[必须] 服务器唯一ID

      slave_skip_errors=all  #一定要加上这个,需要配置跳过错误,否则遇到错误时,主从复制则会停止

2.重启MySQL让配置生效:

systemctl restart mysqld

3.登录mysql

1.先停止slave:

stop slave;

2.配置主从复制连接信息:

change master to master_host='IP地址',

master_user='thrjy',

master_password='Root@123456',

master_log_file='mysql-bin.000001',

master_log_pos=590;

3.启动slave:

start slave;

4.查看从节点状态:如果有两个yes就代表配置成功了:

show slave status\G


4.进行主从复制测试

创建两个连接,连接到对应的mysql,在主库修改即可看到效果。


3.读写分离

面对日益增加的系统访问量,数据库的吞吐量面临着巨大瓶颈。对于同一时刻有大量并发读操作和较少写操作类型的应用系统来说,将数据库拆分为主库和从库,主库负责处理事务性的增删改操作,从库负责处理查询操作,能够有效的避免数据更新导致的行锁,使得整个系统的查询性能得到极大的改善。

4.Shard-JDBC实现读写分离

Sharding-JDBC定位为轻量级Java框架,在Java的JDBC层提供的额外服务。它使用客户端直连数据库,以jar包形式提供服务,无需额外部署和依赖,可理解为增强版的JDBC驱动,完全兼容JDBC和各种ORM框架。
使用Sharding-JDBC可以在程序中轻松的实现数据库读写分离和分库,分表。
1.适用于任何基于JDBC的ORM框架:JPA,Hibernate,Mybatis,Spring JDBC Template或直接使用JDBC。
2.支持任何第三方的数据库连接池:DBCP,C3P0,BoneCP,Druid,HikariCP等。
3.支持任何实现JDBC规范的数据库:目前支持MySQL,Oracle,SQLServer,PostgreSQL以及任何遵循SQL92标准的数据库。

使用Shard-JDBC步骤:

1.导入maven坐标:


org.apache.shardingspheresharding-jdbc-spring-boot-starter4.0.0-RC1

2.在配置文件中配置读写分离规则

spring:shardingsphere:datasource:names: master,slave#主数据源master:type: com.alibaba.druid.pool.DruidDataSourcedriver-class-name: com.mysql.cj.jdbc.Driverurl: jdbc:mysql://ip地址:3306/reggie-take-out?serverTimezone=Asia/Shanghai&useUnicode=true&characterEncoding=utf-8&zeroDateTimeBehavior=convertToNull&useSSL=false&allowPublicKeyRetrieval=trueusername: rootpassword: 3569717299Asd!#从数据源slave:type: com.alibaba.druid.pool.DruidDataSourcedriver-class-name: com.mysql.cj.jdbc.Driverurl: jdbc:mysql://192.168.122.128:3306/reggie-take-out?serverTimezone=Asia/Shanghai&useUnicode=true&characterEncoding=utf-8&zeroDateTimeBehavior=convertToNull&useSSL=false&allowPublicKeyRetrieval=trueusername: rootpassword: rootmasterslave:#读写分离配置load-balance-algorithm-type: round_robin#最终的数据源名称name: dataSource#主库数据源名称master-data-source-name: master#从库数据源名称列表,多个用逗号隔开。slave-data-source-names: slaveprops:sql:show: true #开启SQL显示,默认false

注意:如果此时直接启动会报错

3.在配置文件中配置允许bean定义覆盖配置项

#允许bean被覆盖(允许shardingJDBC的数据源覆盖原有的数据源)
main:allow-bean-definition-overriding: true

相关内容