otter安装

article/2025/10/20 14:07:54

译意：水獭，数据搬运工

语言：纯java开发

定位：基于数据库增量日志解析，准实时同步到本机房或异地机房的mysql/oracle数据库. 一个分布式数据库同步系统

otter的环境需要：mysql，jdk，zookeeper，node，aria2，manager

otter安装需要三台机器，我实现的是两台机器之间的Mysql数据库同步，即双写同步，zookeeper集群。

在master机器上安装manager，在slave1和slave2上面安装node

1 、在slave1和slave2上安装JDK并配置JDK的环境变量

本文使用的jdk：jdk-7u79-linux-x64.tar.gz

直接解压，配置环境变量就OK了。

2、在slave1和slave2上安装mysql

# yum install -y mysql-server mysql mysql-devel

# service mysqld start //启动mysql服务

# mysqladmin -u root password 'root'　　// 给root账号设置密码为 root

安装完后，修改mysql的配置文件：
# vim /etc/my.cnf
在[mysqld]下面添加：
log-bin=mysql-bin
binlog-format=ROW #修改成ROW
server-id = 1 #两个机房的serverid设置为不一样的值

然后重启数据库，分别在slave1和slave2库上创建otter的数据库账号和密码，例如canal/canal

CREATE USER canal IDENTIFIED BY 'canal';
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
FLUSH PRIVILEGES;

show grants for 'canal'; #查看权限

3、安装zookeeper

zookeeper可以只单机安装，也可以以集群形式安装，安装完成后启动。本文是安装的集群，三台机器。

本文使用的是：zookeeper-3.4.6.tar.gz

解压，进入conf下面进行配置

# cp zoo_sample.cfg zoo.cfg

# vim zoo.cfg

dataDir=/root/cloud/zookeeper-3.4.6/data #进行修改

添加下面的内容：

server.1=master:2888:3888
server.2=slave1:2888:3888
server.3=slave2:2888:3888

在zookeeper-3.4.6 下面创建data，然后进入data

# vim myid

里面添加1。

scp -rq zookeeper-3.4.6 slave1:/root/cloud/

把slave1里面的myid里面的内容改为2

scp -rq zookeeper-3.4.6 slave2:/root/cloud/

把slave2里面的myid里面的内容改为3

都修改完后，启动zookeeper

进入zookeeper-3.4.6/bin下面执行

./zkServer.sh start 启动

./zkServer.sh status 查看状态

4、安装manager，在master机器上面安装

manager依赖于mysql进行配置信息的存储，所以需要预先安装mysql

# yum install -y mysql-server mysql mysql-devel

# service mysqld start //启动mysql服务

# mysqladmin -u root password 'root'　　// 给root账号设置密码为 root

初始化otter manager系统表：
下载：

# wget https://raw.github.com/alibaba/otter/master/manager/deployer/src/main/resources/sql/otter-manager-schema.sql

载入sql：
# mysql -uroot -proot

mysql> source /root/cloud/otter-manager-schema.sql

# mkdir manager
# tar -zxvf manager.deployer-4.2.13.tar.gz -C manager

配置修改

进入conf下面修改

# vim otter.properties

otter.domainName = 192.168.10.1 修改为manager的ip，用户web访问

## otter manager database config manager上面的mysql信息
otter.database.driver.class.name = com.mysql.jdbc.Driver
otter.database.driver.url = jdbc:mysql://127.0.0.1:3306/otter
otter.database.driver.username = root
otter.database.driver.password = root

## default zookeeper address 选择一个就近的zookeeper集群地址
otter.zookeeper.cluster.default = 192.168.10.1:2181

准备启动
# bin/startup.sh

查看日志
vim logs/manager.log

2016-12-08 15:28:14.844 [] INFO com.alibaba.otter.manager.deployer.OtterManagerLauncher - ## start the manager server.
2016-12-08 15:28:37.179 [] INFO com.alibaba.otter.manager.deployer.JettyEmbedServer - ##Jetty Embed Server is startup!
2016-12-08 15:28:37.179 [] INFO com.alibaba.otter.manager.deployer.OtterManagerLauncher - ## the manager server is running now ......

出现类似日志，代表启动成功

验证
访问： http://192.168.10.1:8080/，出现otter的页面，即代表启动成功

初始密码为：admin/admin，即可完成登录。目前：匿名用户只有只读查看的权限，登录为管理员才可以有操作权限

manager安装完成。

5、安装node

node会受到otter manager进行管理，需要在manager页面为node定义配置信息，并生成一个唯一id。

a. 首先访问manager页面的机器管理，添加zookeeper管理，点击添加

b. 访问manager页面的机器管理，点击node管理，点击添加

几点说明：
机器名称：可以随意定义，方便自己记忆即可
机器ip：对应node节点将要部署的机器ip，如果有多ip时，可选择其中一个ip进行暴露. (此ip是整个集群通讯的入口，实际情况千万别使用127.0.0.1，否则多个机器的node节点会无法识别)
机器端口：对应node节点将要部署时启动的数据通讯端口，建议值：2088
下载端口：对应node节点将要部署时启动的数据下载端口，建议值：9090
外部ip ：对应node节点将要部署的机器ip，存在的一个外部ip，允许通讯的时候走公网处理。
zookeeper集群：为提升通讯效率，不同机房的机器可选择就近的zookeeper集群.
node这种设计，是为解决单机部署多实例而设计的，允许单机多node指定不同的端口

机器添加完成后，跳转到机器列表页面，获取对应的机器序号nid