教你怎么在Amobe实现MySQL读写分离
本篇文章主要是结合我之前面试的各种经历和实战开发中遇到的问题解决经验整理的,希望这篇《教你怎么在Amobe实现MySQL读写分离》对你有很大帮助!欢迎收藏,分享给更多的需要的朋友学习~
Amobe介绍
Amoeba(变形虫)项目,该开源框架于2008年 开始发布一款 Amoeba for Mysql软件。
这个软件基于Java致力于MySQL的分布式数据库前端代理层,处于在应用和数据库之间,对客户端透明,它主要在应用层访问MySQL的时候充当SQL路由功能,解析应用传递过来的SQL语句,专注于分布式数据库代理层(Database Proxy)开发。具有负载均衡、高可用性、SQL 过滤、读写分离、可路由相关的到目标数据库、可并发请求多台数据库合并结果。 通过Amoeba能够完成多数据源的高可用、负载均衡、数据切片的功能,目前Amoeba已在很多企业的生产线上面使用。
优点:Amoeba已经具有Query路由,Query过滤,读写分离,负载均衡以及HA机制等相关内容。
缺点:Amoeba暂不支持事务;amoeba不支持跨库join和排序;amoeba不支持分库分表等;
Amoeba 主要解决的以下几个问题:
数据切分后复杂数据源整合;
提供数据切分规则并降低数据切分规则给数据库带来的影响;
降低数据库与客户端的连接数;
读写分离路由;
Amobe实现读写分离配置
安装环境如下
master 192.168.1.5 rac1-node.tp-link.net
slave 192.168.1.6 rac2-node.tp-link.net
amobe 192.168.1.2 poprodbak.tp-link.net
安装amoeba前要安装jdk,因为amoeba是由java开发的。同时设置JAVA_HOME
下载ameba软件
使用amoeba稳定版
# mkdir amoeba # cd amoeba # tar -zxvf amoeba-mysql-binary-2.2.0.tar.gz
配置amobe
解压完以后,下面进行配置。在conf目录下可以看到很多.xml后缀的文件。其中
amoeba.xml是对amoeba代理的配置,定义读写分离的节点管理信息;
dbServers.xml是对后端service的配置,定义数据库的信息;
rule.xml可以定义高级设置比如数据的水平、垂直切分等;
log4j.xml定义日志等。
配置dbServers.xml
\下面的配置是定义一个主节点和一个从节点。 ${defaultManager} 64 128 3306 \这个是后端数据的端口test \这个是后端默认的数据库root \定义一个主节点 192.168.1.5 root \连接数据库的用户名root \连接数据库的密码,此处如果写库跟读库密码一致,可以写在上面公共段,这里会继承上面的设置\定义一个从节点 \定义池,把master和slave加入192.168.1.6 root root \server1是要把master节点加入 1 master 1 slave,slave,slave,master
配置amobe.xml
8066 \定义amoeba读写分离proxy对外代理的端口${clientConnectioneManager} root \定义通过amoeba登录的用户名root \相应的这个就是密码了。定义proxy的管理帐号密码,客户端和程序只需要连接proxy的帐号密码即可,相当于中间件封装1500 master \定义默认的池,一些除了SELECTUPDATEINSERTDELETE的语句都会在defaultPool执行master \定义写的池,这里的master就是在dbServer.xml中的masterreadPool \定义读的池,这里的readPool就是在dbserver.xml中的readPooltrue
启动amobe
# ./amoeba start & [1] 2381 # netstat -tlnp | grep 8066 tcp 0 0 :::8066 :::* LISTEN 2381/java
以上说明amoeb已经正常启动了。
# mysql -h 192.168.1.2 -ulibai --port 8066 –p
连接报错
java.util.NoSuchElementException: Could not create a validated object, cause: ValidateObject failed
修改dbServers.xml配置,factoryConfig中 password默认是被注释掉的,取消注释
还是报错,后来发现原来是schema设置不对,这个是要设置为数据库名。修改后通过amoeba连接数据库正常。
至此,amoeba正常启动,客户端可以通过amoeba正常连接MySQL数据库。
验证测试
使用tcpdump抓包工具分析,读写是否分离到master和slave上。
在master和slave上分别执行
# tcpdump -i eth2 -s 0 -A -n -p port 3306 and src 192.168.1.2 | grep -i 'SELECT|INSERT'
其中192.168.1.2是amoeba服务器
在amoeba服务器上执行select操作
slave上可以抓取到如下信息,查询三次以后,可以从master抓取到查询信息(因为此时master和slave节点数据刚好不一致,可以非常清晰地确实是在master上执行的)。因此可以大概验证amoeba设置的读操作slave和master 3比1的比例。
...p(Y.......select * from t 13:59:36.355619 IP 192.168.1.2.24489 > 192.168.1.6.mysql: Flags [.], ack 869, win 96, options [nop,nop,TS val 85451120 ecr 676978448], length 0
在amoeba服务器上执行insert操作
master抓包如下信息,slave上没有任何变化。因此可以验证写操作完全在master节点上完成。
14:06:47.578469 IP 192.168.1.2.58575 > 192.168.1.5.mysql: Flags [P.], seq 68:90, ack 94, win 46, options [nop,nop,TS val 85882307 ecr 677373872], length 22 E..JF.@.@.p|............>K....AM........... ..u.(_.......set names latin1. 14:06:47.578830 IP 192.168.1.2.58575 > 192.168.1.5.mysql: Flags [.], ack 105, win 46, options [nop,nop,TS val 85882308 ecr 677413229], length 0 E..4F.@.@.p.............>K.+..AX.....d..... ..u.(`.m 14:06:47.579712 IP 192.168.1.2.58575 > 192.168.1.5.mysql: Flags [P.], seq 90:135, ack 105, win 46, options [nop,nop,TS val 85882309 ecr 677413229], length 45 E..aF.@.@.pc............>K.+..AX........... ..u.(`.m)....insert into t values(5,'this_is_amoeba') 14:06:47.622539 IP 192.168.1.2.58575 > 192.168.1.5.mysql: Flags [.], ack 116, win 46, options [nop,nop,TS val 85882352 ecr 677413233], length 0 E..4F.@.@.p.............>K.X..Ac........... ..u.(`.q
性能对比
针对MySQL Proxy和Amoeba进行了简单的性能对比测试
分别查询14W条数据,proxy和amoeba表现几无差别。
第一次(s) 第二次 3 4 5 平均(s)
Mysql-proxy 0.27 0.27 0.28 0.29 0.26 0.274
Amoeba 0.23 0.26 0.33 0.25 0.34 0.282
分别插入14W条数据,proxy平均为1.8S,amoeba平均为1.95S。
可以看出mysqlproxy和amobe几无差别,可能是因为数据量比较小。
以上就是本文的全部内容了,是否有顺利帮助你解决问题?若是能给你带来学习上的帮助,请大家多多支持golang学习网!更多关于数据库的相关知识,也可关注golang学习网公众号。
聊聊怎么用命令方式操作mysql
- 上一篇
- 聊聊怎么用命令方式操作mysql
- 下一篇
- 读写分离是什么?在MySQL中怎么搭建和配置
-
- 秀丽的荔枝
- 这篇文章真及时,好细啊,很好,已加入收藏夹了,关注up主了!希望up主能多写数据库相关的文章。
- 2023-02-25 22:54:27
-
- 单身的高跟鞋
- 真优秀,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢up主分享技术文章!
- 2023-02-25 05:08:00
-
- 甜美的美女
- 这篇博文出现的刚刚好,up主加油!
- 2023-02-23 14:30:05
-
- 柔弱的凉面
- 很详细,码起来,感谢博主的这篇博文,我会继续支持!
- 2023-02-20 03:03:29
-
- 数据库 · MySQL | 1星期前 | MySQL · 慢查询 · 索引优化 · COUNT查询 · 汇总表 · 联合索引 覆盖索引 汇总表 MySQL COUNT慢 COUNT(*)优化
- MySQL COUNT(*) 总数查询变慢怎么办:从扫描行数到汇总表的完整治理流程
- 329浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- ljg-skills
- ljg-skills 是李继刚开源的 AI 技能与提示词集合,面向大模型使用者整理了一批可复用的 prompt、角色设定和任务技能模板,适合用于学习提示词设计、搭建个人 AI 工作流和沉淀团队常用智能体能力。
- 2219次使用
-
- MELO音乐
- MELO音乐是一站式AI视频与音乐制作助手,对标suno, udio的高品质体验。提供伴奏生成、原创写词、无损导出、哼唱识曲、混音变声等全套音频与短视频编辑工具。无论是流行Kpop、电音说唱、民谣古风、摇滚儿歌还是商用轻音乐,MELO为你免费谱曲,轻松做同款!
- 2031次使用
-
- UniScribe
- UniScribe 是一款 AI 音视频转文字与内容整理工具,支持上传音频、视频文件或粘贴 YouTube 链接,自动生成转写文本、摘要、思维导图和关键问题,并支持多格式导出,适合会议记录、课程学习、访谈整理和内容创作复盘。
- 1986次使用
-
- 剧云
- 剧云是专业中文剧本创作平台,安全稳定运行十余年,集成AI编剧、剧本医生审核、人物小传、剧情关系图、大纲编写、多人协作、Word导入导出、版权管控功能,数据安全防护,轻松高效创作剧本。
- 2199次使用
-
- 万象有声
- 万象有声,一个专为有声创作者打造的新一代智能有声内容创作平台。平台提供专业的智能拆章、智能画本编辑、AI配音、AI生成音效、后期制作、智能对轨、智能审听等有声创作全流程工具,可以帮助创作者高效、低成本创作出引人入胜的有声作品。立即体验,让有声书制作更简单!
- 2161次使用
-
- Linux系统下如何安装Mysql(centOS7以上不支持Mysql)
- 2023-01-16 100浏览
-
- 在windows上用docker desktop安装StoneDB
- 2023-01-20 100浏览
-
- 总结 mysql 一些小技巧
- 2023-01-21 100浏览
-
- MySQL如何给大表加索引
- 2023-01-26 100浏览
-
- 积分商城简要设计
- 2023-02-17 100浏览

