文章目录
- 前言
- 发现宝藏
- 一、问题分析
- 二、Mysql主从复制
- 1. 介绍
- 2. 配置
- 3. 测试
- 三、读写分离案例
- 1. 背景
- 2. shardingDBC介绍
- 3. 入门案例
- 4. 功能测试
- 总结
前言
为了巩固所学的知识,作者尝试着开始发布一些学习笔记类的博客,方便日后回顾。当然,如果能帮到一些萌新进行新技术的学习那也是极好的。作者菜菜一枚,文章中如果有记录错误,欢迎读者朋友们批评指正。
(博客的参考源码可以在我主页的资源里找到,如果在学习的过程中有什么疑问欢迎大家在评论区向我提出)
发现宝藏
前些天发现了一个巨牛的人工智能学习网站,通俗易懂,风趣幽默,忍不住分享一下给大家。【宝藏入口】。
一、问题分析
读和写所有压力都由一台数据库承担,压力大数据库服务器磁盘损坏则数据丢失,单点故障
读写分离优化程序后
二、Mysql主从复制
1. 介绍
1. 什么是Mysql主从复制
- MySOL主从复制是一个异步的复制过程,底层是基于Mysgl数据库自带的二进制日志功能。
- 就是一台或多台MySOL数据库(slave,即从库)从另一台MySL数据库(master,即主库)进行日志的复制然后再解析日志并应用到自身,最终实现从库的数据和主库的数据保持一致。
- MySOL主从复制是MySOL数据库自带功能,无需借助第三方工具。
2. MySQL复制过程分成三步
- master将改变记录到二进制日志 (binary log)
- slave将master的binary log拷贝到它的中继日志 (relay log)
- slave重做中继日志中的事件,将改变应用到自己的数据库中
2. 配置
1. 配置-前置条件
提前准备好两台服务器,分别安装Mysq1并启动服务成功
- 主库Master 192.168.154.129
- 从库slave 192.168.154.130
2. 配置-主库master
- 第一步:修改Mysq1数据库的配置文件 /etc/my.cnf
[mysqld]
log-bin=mysql-bin #[必须]启用二进制日志
server-id=100 #[必须]服务器唯一ID
- 第二步:重启Mysq1服务
systemctl restart mysqld
- 第三步:登录Mysql数据库,执行下面SQL
- GRANT REPLICATION SLAVE ON * .* to ‘xiaoming’@‘%’ identified by ‘Root@123456’;
- 上面SOL的作用是创建一个用户xiaoming,密码为Root@123456,并且给xiaoming用户授予REPLICATION SLAVE权限。常用于建立复制时所需要用到的用户权限,也就是slave必须被master授权具有该权限的用户,才能通过该用户复制。
注1: ON * .* 中 * 和 . 之间是没有空格的,此处由于MD语法格式空一格
- 第四步: 登录Mysql数据库,执行下面SQL,记录下结果中File和Position的值
show master status;
注:上面SOL的作用是查看Master的状态,执行完此SQL后不要再执行任何操作
3. 配置-从库slave
- 第一步: 修改Mysg1数据库的配置文件 /etc/my.cnf
[mysqld]
server-id=101 #[必须]服务器唯一ID
- 第二步:重启Mysq1服务
systemctl restart mysqld
- 第三步:登录Mysq1数据库,执行下面SOL
- change master to
master_host=‘192.168.154.129’,master_user=‘xiaoming’,master_password=‘Root@123456’,master_log_file=‘mysql-bin.000001’,master_log_pos=441;- start slave;
000001 和 441 是根据 master 库决定的
- 第四步:登录Mysql数据库,执行下面SQL,查看从数据库的状态
show slave status;
3. 测试
三、读写分离案例
1. 背景
面对日益增加的系统访问量,数据库的吞吐量面临着巨大瓶颈。对于同一时刻有大量并发读操作和较少写操作类型的应用系统来说,将数据库拆分为主库和从库,主库负责处理事务性的增删改操作,从库负责处理查询操作,能够有效的避免由数据更新导致的行锁,使得整个系统的查询性能得到极大的改善。
2. shardingDBC介绍
1. shardingDBC简介
Sharding-IDBC定位为轻量级lava框架,在ava的]DBC层提供的额外服务。它使用客户端直连数据库,以jar包形式提供服务,无需额外部署和依赖,可理解为增强版的JDBC驱动,完全兼容]DBC和各种ORM框架。使用sharding-JDBC可以在程序中轻松的实现数据库读写分离。
2. shardingDBC特点
- 适用于任何基于]DB的ORM框架,如: JPA,Hibernate,Mybatis,SpringJDBCTemplate或直接使用DBC。
- 支持任何第三方的数据库连接池,如: DBCP,C3PO,BoneCp,Druid,HikariCP等。
- 支持任意实现]DBC规范的数据库。目前支持MySQL,Oracle,SQLServer,PostgresQL以及任何遵循SQL92标准的数据库。
3. 入门案例
- 导入maven坐标
<dependency>
<groupId>org.apache.shardingsphere</groupId>
<artifactId>sharding-jdbc-spring-boot-starter</artifactId>
<version>4.0.0-RC1</version>
</dependency>
- 在配置文件中配置读写分离规则
server:
port: 8080
mybatis-plus:
configuration:
#在映射实体或者属性时,将数据库中表名和字段名中的下划线去掉,按照驼峰命名法映射
map-underscore-to-camel-case: true
log-impl: org.apache.ibatis.logging.stdout.StdOutImpl
global-config:
db-config:
id-type: ASSIGN_ID
spring:
shardingsphere:
datasource:
names:
master,slave
# 主数据源
master:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.cj.jdbc.Driver
url: jdbc:mysql://192.168.138.100:3306/rw?characterEncoding=utf-8
username: root
password: root
# 从数据源
slave:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.cj.jdbc.Driver
url: jdbc:mysql://192.168.138.101:3306/rw?characterEncoding=utf-8
username: root
password: root
masterslave:
# 读写分离配置
load-balance-algorithm-type: round_robin #轮询
# 最终的数据源名称
name: dataSource
# 主库数据源名称
master-data-source-name: master
# 从库数据源名称列表,多个逗号分隔
slave-data-source-names: slave
props:
sql:
show: true #开启SQL显示,默认false
3. 在配置文件中配置允许bean定义覆盖配置项
//和spring同级
main:
allow-bean-definition-overriding: true
4. 功能测试
总结
欢迎各位留言交流以及批评指正,如果文章对您有帮助或者觉得作者写的还不错可以点一下关注,点赞,收藏支持一下。
(博客的参考源码可以在我主页的资源里找到,如果在学习的过程中有什么疑问欢迎大家在评论区向我提出)