主从 分库 MySQL

    科技2022-09-06  106

    数据库热备份

    说明: 可以实现数据库实时的备份,保证数据尽可能不丢失. 备份原理: 数据库备份原理: 1.当数据库主库执行更新操作时,会将更新的内容写入到二进制日志文件中. 并且写入二进制文件的过程是一个异步的过程. 2.从库会开启IO线程去读取主库的二进制日志文件,之后写入中继(临时存储)日志中. 3.从库会开启SQL线程去读取中继日志中的信息.之后将数据同步到从库中. 上述的操作是由从库向主库获取数据, 所以从库理论上可以配置无数个(一般2-3台即可);

    安装从库mysql

    根据安装主库的顺序安装从库,之后将主库信息备份到从库

    1.数据库主从配置

    1.1 数据库挂载原理

    1.1.1 检查主库的状态

    1.1.2 开启数据库二进制文件

    修改主库核心配置文件 my.cnf

    vim /etc/my.cnf

    1.1.3 重启mysql数据库

    说明:当修改好my.cnf文件之后,需要重启数据库,检查二进制日志文件是否存在.

    1.1.4 检查主库状态

    1.1.5 修改从库二进制文件

    修改之后重启mysql数据库 命令: 检查从库状态:

    1.2 实现主从的挂载

    1.2.1 挂载分析

    说明: 从库挂载主库 主库IP地址/主库端口号/登录用户名/登录的密码/二进制日志文件/读取位置.

    1.2.2 实现主从挂载

    /*我是从库信息 130*/ SHOW MASTER STATUS; /*实现主从的挂载*/ CHANGE MASTER TO MASTER_HOST="192.168.126.129", MASTER_PORT=3306, MASTER_USER="root", MASTER_PASSWORD="root", MASTER_LOG_FILE="mysql-bin.000001", MASTER_LOG_POS=245 /*启动主从服务*/ START SLAVE /*检查主从的状态*/ SHOW SLAVE STATUS /*如果报错 则重新配置*/ STOP SLAVE /*重新搭建主从将上述命令重新执行一遍*/

    1.2.3 主从同步测试

    修改主库中的数据,检查从库数据是否同步即可

    1.3 Mycat介绍

    mycat2005版本的压缩包

    链接:https://pan.baidu.com/s/1p-xY8vsgw4Dno-BIWpnaHA 提取码:fvbe

    1.4 实现数据库读写分离机制

    1.4.1 实现原理图

    1.4.2上传 mycat服务

    (下面配置视频在4阶段11)

    1.4.3 编辑配置文件-server.xml

    说明: 用户与代理数据库的链接通过server.xml文件进行配置. IP/PORT/USER/PASSWORD 端口号配置:

    <property name="serverPort">8066</property> <!--用户标签--> <user name="root"> <property name="password">root</property> <!--与schema.xml中的配置相同 注意数据库的大小写--> <property name="schemas">jtdb</property> </user> <user name="user"> <property name="password">user</property> <property name="schemas">jtdb</property> <property name="readOnly">true</property> </user>

    1.4.4 编辑schema配置文件

    <?xml version="1.0"?> <!DOCTYPE mycat:schema SYSTEM "schema.dtd"> <mycat:schema xmlns:mycat="http://io.mycat/"> <!--name属性是自定义的 dataNode表示数据库的节点信息 jtdb表示逻辑库--> <schema name="jtdb" checkSQLschema="false" sqlMaxLimit="100" dataNode="jtdb"/> <!--定义节点名称/节点主机/数据名称--> <dataNode name="jtdb" dataHost="localhost1" database="jtdb" /> <!--参数介绍 UTF-8 中文报错--> <!--balance 0表示所有的读操作都会发往writeHost主机 --> <!--1表示所有的读操作发往readHost和闲置的主节点中--> <!--writeType=0 所有的写操作都发往第一个writeHost主机--> <!--writeType=1 所有的写操作随机发往writeHost中--> <!--dbType 表示数据库类型 mysql/oracle--> <!--dbDriver="native" 固定参数 不变--> <!--switchType=-1 表示不自动切换, 主机宕机后不会自动切换从节点--> <!--switchType=1 表示会自动切换(默认值)如果第一个主节点宕机后,Mycat会进行3次心跳检测,如果3次都没有响应,则会自动切换到第二个主节点--> <!--并且会更新/conf/dnindex.properties文件的主节点信息 localhost1=0 表示第一个节点.该文件不要随意修改否则会出现大问题--> <dataHost name="localhost1" maxCon="1000" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100"> <heartbeat>select 1</heartbeat> <!--配置第一台主机主要进行写库操作,在默认的条件下Mycat主要操作第一台主机在第一台主机中已经实现了读写分离.因为默认写操作会发往137的数据库.读的操作默认发往141.如果从节点比较忙,则主节点分担部分压力. --> <writeHost host="hostM1" url="192.168.126.129:3306" user="root" password="root"> <!--读数据库1--> <readHost host="hostS1" url="192.168.126.130:3306" user="root" password="root" /> <!--读数据库2--> <readHost host="hostS2" url="192.168.126.129:3306" user="root" password="root" /> </writeHost> <!--定义第二台主机 由于数据库内部已经实现了双机热备.--> <!--Mycat实现高可用.当第一个主机137宕机后.mycat会自动发出心跳检测.检测3次.--> <!--如果主机137没有给Mycat响应则判断主机死亡.则回启东第二台主机继续为用户提供服务.--> <!--如果137主机恢复之后则处于等待状态.如果141宕机则137再次持续为用户提供服务.--> <!--前提:实现双机热备.--> <!--<writeHost host="hostM2" url="192.168.126.130:3306" user="root" password="root"> <readHost host="hostS1" url="192.168.126.130:3306" user="root" password="root" /> <readHost host="hostS2" url="192.168.126.129:3306" user="root" password="root" /> </writeHost>--> </dataHost> </mycat:schema>

    1.4.5 替换配置文件

    1.5 启动mycat服务

    1).先启动mycat服务器.之后检查状态信息. 2).通过程序测试是否正确

    1.6 Mysql实现高可用

    1.6.1 高可用说明(HA)

    说明:根据规则 当服务器发生宕机现象时,可以自动的实现程度的故障的迁移称之为高可用.

    1.6.2数据库双主模式说明

    说明:在工作中一般采用双主模式来实现数据库高可用. 本质上来讲2台数据库都是主机.只是人为的进行了主从的划分.

    1.6.3 实现数据库双向绑定.

    上午配置: 由主库129 将数据同步给从库130 下午配置: 由从库130 将数据同步给主库129 1).检查主库的状态 2).实现主从的搭建

    /*实现主从的挂载 */ CHANGE MASTER TO MASTER_HOST="192.168.126.130", MASTER_PORT=3306, MASTER_USER="root", MASTER_PASSWORD="root", MASTER_LOG_FILE="mysql-bin.000001", MASTER_LOG_POS=477 /*启动主从服务 */ START SLAVE SHOW SLAVE STATUS;

    1.6.4 Mycat实现数据库高可用配置

    <?xml version="1.0"?> <!DOCTYPE mycat:schema SYSTEM "schema.dtd"> <mycat:schema xmlns:mycat="http://io.mycat/"> <!--name属性是自定义的 dataNode表示数据库的节点信息 jtdb表示逻辑库--> <schema name="jtdb" checkSQLschema="false" sqlMaxLimit="100" dataNode="jtdb"/> <!--定义节点名称/节点主机/数据名称--> <dataNode name="jtdb" dataHost="localhost1" database="jtdb" /> <!--参数介绍 UTF-8 中文报错--> <!--balance 0表示所有的读操作都会发往writeHost主机 --> <!--1表示所有的读操作发往readHost和闲置的主节点中--> <!--writeType=0 所有的写操作都发往第一个writeHost主机--> <!--writeType=1 所有的写操作随机发往writeHost中--> <!--dbType 表示数据库类型 mysql/oracle--> <!--dbDriver="native" 固定参数 不变--> <!--switchType=-1 表示不自动切换, 主机宕机后不会自动切换从节点--> <!--switchType=1 表示会自动切换(默认值)如果第一个主节点宕机后,Mycat会进行3次心跳检测,如果3次都没有响应,则会自动切换到第二个主节点--> <!--并且会更新/conf/dnindex.properties文件的主节点信息 localhost1=0 表示第一个节点.该文件不要随意修改否则会出现大问题--> <dataHost name="localhost1" maxCon="1000" minCon="10" balance="1" writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100"> <heartbeat>select 1</heartbeat> <!--配置第一台主机主要进行写库操作,在默认的条件下Mycat主要操作第一台主机在第一台主机中已经实现了读写分离.因为默认写操作会发往137的数据库.读的操作默认发往141.如果从节点比较忙,则主节点分担部分压力. --> <writeHost host="hostM1" url="192.168.126.129:3306" user="root" password="root"> <!--读数据库1--> <readHost host="hostS1" url="192.168.126.130:3306" user="root" password="root" /> <!--读数据库2--> <readHost host="hostS2" url="192.168.126.129:3306" user="root" password="root" /> </writeHost> <!--定义第二台主机 由于数据库内部已经实现了双机热备.--> <!--Mycat实现高可用.当第一个主机137宕机后.mycat会自动发出心跳检测.检测3次.--> <!--如果主机137没有给Mycat响应则判断主机死亡.则回启东第二台主机继续为用户提供服务.--> <!--如果137主机恢复之后则处于等待状态.如果141宕机则137再次持续为用户提供服务.--> <!--前提:实现双机热备.--> <writeHost host="hostM2" url="192.168.126.130:3306" user="root" password="root"> <readHost host="hostS1" url="192.168.126.130:3306" user="root" password="root" /> <readHost host="hostS2" url="192.168.126.129:3306" user="root" password="root" /> </writeHost> </dataHost> </mycat:schema>

    1.6.5 配置Mycat

    1).关闭mycat服务 2).上传配置文件 3).重启mycat配置

    1.6.6 数据库高可用测试

    1.启动window中的服务器测试mycat服务是否正确. 2.将数据库主库关闭,检查服务是否正确. 3.将数据库主库启动,检查数据是否同步.

    Processed: 0.010, SQL: 9