Atlas中间件实现Mysql读写分离

article/2025/9/25 4:31:29

目录

一、Atlas介绍

二、实现Mysql读写分离

1、实验环境

2、搭建一主一从配置

3、安装Atlas

一、Atlas介绍

[ˈætləs]

Atlas 是由 Qihoo 360公司Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它在MySQL官方推出的MySQL-Proxy 0.8.2版本的基础上，修改了大量bug，添加了很多功能特性。目前该项目在360公司内部得到了广泛应用，很多MySQL业务已经接入了Atlas平台，每天承载的读写请求数达几十亿条。

1、github 源码

https://github.com/Qihoo360/Atlas

2、主要功能

1、读写分离 2、从库负载均衡 3、自动分表 4、IP过滤 5、SQL语句黑白名单 6、DBA可平滑上下线DB 7、自动摘除宕机的DB

3、使用场景：

       Atlas是一个位于前端应用与后端MySQL数据库之间的中间件，它使得应用程序员无需再关心读写分离、分表等与MySQL相关的细节，可以专注于编写业务逻辑，同时使得DBA的运维工作对前端应用透明，上下线DB前端应用无感知。

4、安装Atlas之前注意的事项

  • Atlas只能安装运行在64位的系统上
  • Centos 5.X安装 Atlas-XX.el5.x86_64.rpm，Centos 6.X安装Atlas-XX.el6.x86_64.rpm。
  • 后端mysql版本应大于5.1，建议使用Mysql 5.6

二、实现Mysql读写分离

 

1、实验环境

192.168.50.110

Mysql  master

192.168.50.111

Mysql slave

192.168.50.112

Proxy:Atlas

2、搭建一主一从配置

master配置：

 

vim /etc/my.cnf
# 需要同步的日志的数据库
binlog-do-db= ty 
#不同步的二进制数据库，如果不设置可以将其注释掉
binlog-ignore-db=information_schema
binlog-ignore-db=mysql
binlog-ignore-db=personalsite
binlog-ignore-db=test#以下参数可选：
#binlog 格式 
binlog-format=ROW 
log-bin=mysql-master-bin 
#slave更新时是否记录到日志中；
log-slave-updates=true
#开启半同步，需要另外安装插来支持pl_semi_sync_master_enabled=ON

master授权：

grant replication slave,super,reload on *.* to slave1@192.168.50.111 identified by '123456';
flush privileges;

查看master状态：

mysql> show master status 
#在主库上查看已连接的slave主机
mysql> show slave hosts;
#查看所有binlog日志 
mysql> show binary logs;
#查看所有binlog 事件
mysql> show binlog events in 'mysql-bin.000003' from 145 \G;

slave配置：

vim /etc/my.cnfserver-id = 2log-bin=mysql-slave-binreplicate-do-db=tyreplicate-ignore-db=information_schemareplicate-ignore-db=mysqlreplicate-ignore-db=personalsitereplicate-ignore-db=test

设置slave指向

mysql>change master to master_host='192.168.50.110',master_user='slave1',master_password='123456',MASTER_AUTO_POSITION = 2887;

slave相关操作：

#启动slave
mysql>start slave;
mysql>stop slave;
#查看 slave 状态
show slave status\G;
#跳过指定数量错误
SET GLOBAL SQL_SLAVE_SKIP_COUNTER = 1;
#查看 relaylog 事件
show relaylog events in 'localhost-relay-bin.000019'

3、安装Atlas

下载地址：

https://github.com/Qihoo360/Atlas/releases/download/2.2.1/Atlas-2.2.1.el6.x86_64.rpm 或者
https://download.csdn.net/download/fd2025/10375544

安装Atlas

rpm -i  Atlas-2.2.1.el6.x86_64.rpm默认安装目录为：/usr/local/mysql-proxy

编辑Atlas配置文件：

vim /usr/local/mysql-proxy/test.cnf
[mysql-proxy]#带#号的为非必需的配置项目#管理接口的用户名
admin-username = root#管理接口的密码
admin-password = root#设置主库和从库的地址，其中主库为写库，从库为读库
#主库地址：Atlas后端连接的MySQL主库的IP和端口，可设置多项，用逗号分隔
proxy-backend-addresses = 192.168.50.110:3306
#设置从库的地址和端口
proxy-read-only-backend-addresses= 192.168.50.111#若配置为主库也分担读请求，并且设置权重为(主：从)=（1:3）
#proxy-read-only-backend-addresses = 192.168.50.110:3306@1,,192.168.50.111@3#用户名与其对应的加密过的MySQL密码，密码使用PREFIX/bin目录下的加密程序encrypt加密，下行的user1和user2为示例，将其替换为你的MySQL的
#用户名和加密密码！
pwds = root:/iZxz+0GRoA=#设置Atlas的运行方式，设为true时为守护进程方式，设为false时为前台方式，一般开发调试时设为false，线上运行时设为true,true后面不能有空格。
daemon = true#设置Atlas的运行方式，设为true时Atlas会启动两个进程，一个为monitor，一个为worker，monitor在worker意外退出后会自动将其重启，
#设为false时只有worker，没有monitor，一般开发调试时设为false，线上运行时设为true,true后面不能有空格。
keepalive = true#工作线程数，对Atlas的性能有很大影响，可根据情况适当设置
event-threads = 8#日志级别，分为message、warning、critical、error、debug五个级别
log-level = message#日志存放的路径
log-path = /usr/local/mysql-proxy/log#SQL日志的开关，可设置为OFF、ON、REALTIME，OFF代表不记录SQL日志，ON代表记录SQL日志，REALTIME代表记录SQL日志且实时写入磁盘，默认为OFF
sql-log = ON#慢日志输出设置。当设置了该参数时，则日志只输出执行时间超过sql-log-slow（单位：ms)的日志记录。不设置该参数则输出全部日志。
#sql-log-slow = 10#实例名称，用于同一台机器上多个Atlas实例间的区分
#instance = test#Atlas监听的工作接口IP和端口,应用程序将连接这个地址，把Atlasd当做mysql-server,此处携程3306端口
proxy-address = 192.168.50.113:1234#Atlas监听的管理接口IP和端口
admin-address = 192.168.50.113:2345#分表设置，此例中person为库名，mt为表名，id为分表字段，3为子表数量，可设置多项，以逗号分隔，若不分表则不需要设置该项
#tables = person.mt.id.3#默认字符集，设置该项后客户端不再需要执行SET NAMES语句
#charset = utf8#允许连接Atlas的客户端的IP，可以是精确IP，也可以是IP段，以逗号分隔，若不设置该项则允许所有IP连接，否则只允许列表中的IP连接
#client-ips = 127.0.0.1, 192.168.1#Atlas前面挂接的LVS的物理网卡的IP(注意不是虚IP)，若有LVS且设置了client-ips则此项必须设置，否则可以不设置
#lvs-ips = 192.168.1.1

启动和关闭Atlas:

/usr/local/mysql-proxy/bin/mysql-proxyd test start
/usr/local/mysql-proxy/bin/mysql-proxyd test stop

检查是否启动成功：

/usr/local/mysql-proxy/bin/mysql-proxyd test status

连接Atlas后台：

mysql -h127.0.0.1 -P2345 -uroot -proot

强制路由：

注释的方式强制走主库：
Alatas: /*master*/ #业务需要


http://chatgpt.dhexx.cn/article/2Hf6yOOQ.shtml

相关文章

mysql 读写分离_详解MySQL读写分离

mysql 读写分离_详解MySQL读写分离

主从复制的原理 MySQL的主从复制和读写分离两者有着紧密的联系，首先要部署主从复制，只有主从复制完成了才能在此基础上进行数据的读写分离。 读写分离的原理 简单来说，读写分离就是只在主服务器上写，只在从服务器上读。基本原理是…
阅读更多...
mysql-读写分离

mysql-读写分离

1.什么是读写分离 在数据库集群架构中，让主库负责处理写入操作，而从库只负责处理select查询，让两者分工明确达到提高数据库整体读写性能。当然，主数据库另外一个功能就是负责将数据变更同步到从库中，也就是写操作。 2…
阅读更多...
MySQL数据库：读写分离

MySQL数据库：读写分离

一、读写分离的原理： 1、实现原理： 读写分离解决的是，数据库的写操作，影响了查询的效率，适用于读远大于写的场景。读写分离的实现基础是主从复制，主数据库利用主从复制将自身数据的改变同步到从数据库集群…
阅读更多...
Mysql 读写分离

Mysql 读写分离

一、介绍 1.什么是读写分离 读写分离的基本原理是将数据库读和写操作分散到不同的节点上。Mysql 的读写分离需要建立在主从复制基础之上，Master 数据库处理事务性增、改、删操作（INSERT、UPDATE、DELETE），而 Slave 数据库处理SE…
阅读更多...
MySQL读写分离

MySQL读写分离

目录 一、读写分离 1. 工作原理 2.为什么要读写分离 3.什么时候要读写分离 4.主从复制与读写分离 5.mysql支持的复制类型 二、MySQL 读写分离方式 1.基于程序代码内部实现 2.基于中间代理层实现 三、实验：读写分离（主从复制基础上&…
阅读更多...
Mysql读写分离的四种方案

Mysql读写分离的四种方案

一、读写分离介绍 1、做读写分离的原因 数据库写入效率要低于读取效率，一般系统中数据读取频率高于写入频率，单个数据库实例在写入的时候会影响读取性能，这是做读写分离的原因。 2、MySQL读写分离的基础 实现方式主要基于mysql的主从复制&…
阅读更多...
JMETER接口测试_用户登录（MD5加密）

JMETER接口测试_用户登录（MD5加密）

JMETER接口测试—— 用户登录（密码MD5加密) 1)给整个线程组，添加全局变量 TestPlan–>线程组–>右键–>ADD Config Element -->User Defined Variables。 全局变量的意思：整个线程中，该变量设定的值，所有…
阅读更多...
Jmeter接口测试之常用断言

Jmeter接口测试之常用断言

在接口测试中，我们需要检查请求处理结果是否正确。当请求的响应状态码为200，是否表时接口功能正常呢？显然是不正确的。 响应状态为200，只能表明服务处理了你的请求，同时进行了结果返回；但并不能代表处理的…
阅读更多...
jmeter接口测试传参问题汇总

jmeter接口测试传参问题汇总

1、 在Jmeter接口测试json传参时，number类型的参数不能为空，例如： {title: "测试标题"，languageTypeId: ,content: "测试内容"}当这样数字类型传参为空时，jmeter就会报错如下： {&quo…
阅读更多...
Jmeter接口测试之响应断言

Jmeter接口测试之响应断言

一、断言是什么 1. 断言的作用 断言用于对采样器执行结果的检查，并在同一范围内的每个采样器之后进行处理。如果要对某个采样器进行断言，直接将断言添加到采样器的子集即可。 2. 为什么要用断言？ JMeter以及Postman等接口测试工具&#xff…
阅读更多...
用户认证授权---Jmeter接口测试

用户认证授权---Jmeter接口测试

用户根据用户名，密码，验证码登录系统。要测试系统登录接口及查看用户所受权限，首先测试获取验证码接口，获取验证码，再测试登录接口，最后进行权限接口测试。 一、获取验证码 将返回信息中img通过data:image…
阅读更多...
jmeter 接口测试快速入门

jmeter 接口测试快速入门

jmeter是一款小巧，轻便、开源的性能测试工具，它也可以很方便的进行接口测试。 下面我就带大家学习下jmeter接口测试。 目录 1.准备工作： 2.第一个接口测试走起！ 3.再来一个稍微复杂一点的接口——获取短信验证码接口&#xf…
阅读更多...
JMeter接口测试___参数化方法

JMeter接口测试___参数化方法

一、JMeter添加参数的常用方法 1.Get请求 2.Post请求二、JMeter常用参数化的方式 1.用户参数（User Parameter） 2.用户自定的变量（User Defined Variables） 3.CSV数据文件设置（CSV Data Set C…
阅读更多...
Jmeter 接口测试中的签名处理

Jmeter 接口测试中的签名处理

签名机制：服务端接口为了防止非法请求，要求接口的入参需要传入一个签名字段sign，签名字段是按照一定的规则对接口的业务参数进行加密后得到的。在测试此类接口时，必须传入业务数据，和对应的签名数据，才能正…
阅读更多...
jmeter接口测试教程以及接口测试流程详解

jmeter接口测试教程以及接口测试流程详解

一、Jmeter简介 Jmeter是由Apache公司开发的一个纯Java的开源项目，即可以用于做接口测试也可以用于做性能测试。 Jmeter具备高移植性，可以实现跨平台运行。 Jmeter可以实现分布式负载。 Jmeter采用多线程，允许通过多个线程并发取样或通过独…
阅读更多...
jmeter接口测试教程

jmeter接口测试教程

在日常工作中，尤其是做接口测试时，我们最经常用到的两个工具，就是Jmeter和postman。今天，我们主要是讲一讲Jmeter在接口测试这一块的一些方式方法。内容比较多，大家可以收藏一下，以后慢慢学。 1&#xff0…
阅读更多...
JMeter接口测试及接口登陆压力测试

JMeter接口测试及接口登陆压力测试

脚本： https://mp.csdn.net/mp_download/manage/download/UpDetailed 1.JMeter接口测试 查看别的博主内容时发现了个开放的API，可以作为练习使用 https://wanandroid.com/blog/show/2 jmeter基本操作 操作步骤 1.启动jmeter 2.在"测试计划&…
阅读更多...
Jmeter接口测试-获取token

Jmeter接口测试-获取token

相信大家都知道在开展接口测试或者是接口面试的过程中，我们会发现很多接口需要依赖前面的接口，需要我们动态从前面的接口返回中提取数据，也就是我们通常说的关联。关联通俗来讲就是把上一次请求的返回内容中的部分截取出来保存为参数&#xf…
阅读更多...
8、jmeter接口测试教程（简单案例）

8、jmeter接口测试教程（简单案例）

以登录、查询接口为案例 注意： 1、如果找不到接口，可以通过F12进行抓包， 具体步骤如下： （1）选择任意浏览器（模式选择谷歌内核即可）； （2）按F12键&a…
阅读更多...
Jmeter接口测试流程详解

Jmeter接口测试流程详解

1、jmeter简介 Jmeter是由Apache公司开发的java开源项目，所以想要使用它必须基于java环境才可以； Jmeter采用多线程，允许通过多个线程并发取样或通过独立的线程对不同的功能同时取样。 2、jmeter安装 首先需要安装jdk（最好是最…
阅读更多...
推荐文章

Copyright @ 2022~2023