223我安装的时候docker只支持canal1.1.6版本1.1.7无法使用docker安装.还有一点要补充就是1.1.6好像不支持es8.0以上版本官网说的是1.7版本才有es8.0以上.。

server_id1

ROW#查看开启命令拓展这个用于和instance配置的数据库进行使用安装canal-admin的数据库可以不开启blog但是同步到数据库需要开启

show

https://github.com/alibaba/canal/releases/download/canal-1.1.6/canal.admin-1.1.6.tar.gz

mkdir

#把cat的回显记录下来拿到自己准备的mysql上去创建需要的数据表。

因为容器部署不支持source命令所以手动记录下来进行执行

cat

/root/canal/conf/canal_manager.sql#去到安装mysql的主机登录mysql

mysql

.admin-1.1.6.tar.gz安装包太慢的话1.1.7本部也适用的因为我后续需要安装1.7版本所以提供1.7版本可以通过我百度云进行下载

链接https://pan.baidu.com/s/1FDAcyTiFEZEITX0gAXOnmw

提取码70j9

/opt/canal-admin/conf:/root/canal/conf

/opt/canal-admin/logs:/root/canal/logs

--name

spring.datasource.address数据库的ip:端口/canal_manager?allowMultiQueriestrueuseUnicodtruecharac

terEncodinutf-8serverTimezoneCTTallowPublicKeyRetrievaltrueuseSSL

false

spring.datasource.usernamecanal

spring.datasource.passwordcanal

#登录canal-adminip为安装主机ip,端口为8089,用户为admin密码为123456

#注canal_manager.sql

canal密码为6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9也就是

SELECT

canal.admin.register.namecanal-server01

canal.admin.manager192.168.2.223:8089

canal.admin.passwd6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9

canal/canal-server:v1.1.6部署完成就可以看到server了,这里的serverip是容器的ip我们不需要进行修改修改会导致异常的。

当我们需要使用的时候直接填写宿主机ip即可。

管理里点击新建输入名称和选择server

mysql集群配置中的serverId概念需要保证和当前mysql集群中id唯⼀

(v1.1.x版本之后c

canal.instance.master.addressmysql地址:port端口

canal.instance.master.journal.name

canal.instance.master.timestamp

这⼀步

canal.instance.dbPassword123456

mysql

canal.instance.connectionCharsetUTF-8

mysql

数据解析关注的表Perl正则表达式即我们需要关注那些库和那些表的binlog数据

client

canal.instance.filter.regex.*\\..*

table

canal.instance.filter.black.regexmysql\\.slave_.*,.*BASE

TABLE7、新建sringboot项目idea默认创建的是高版本我调整了配置如下然后下一步下一步进行添加搜索和添加一些必要的依赖。

熟悉的也可以通过pom文件自定义添加

https://start.aliyun.com/8、创建和启动验证具体业务需要自己去自定义

在pom文件中添加依赖

dependencygroupIdcom.alibaba.otter/groupIdartifactIdcanal.client/artifactIdversion1.1.0/version/dependency创建测试类SimpleCanalClientExample

package

com.alibaba.otter.canal.client.CanalConnectors;

import

com.alibaba.otter.canal.client.CanalConnector;

import

com.alibaba.otter.canal.common.utils.AddressUtils;

import

com.alibaba.otter.canal.protocol.Message;

import

com.alibaba.otter.canal.protocol.CanalEntry.Column;

import

com.alibaba.otter.canal.protocol.CanalEntry.Entry;

import

com.alibaba.otter.canal.protocol.CanalEntry.EntryType;

import

com.alibaba.otter.canal.protocol.CanalEntry.EventType;

import

com.alibaba.otter.canal.protocol.CanalEntry.RowChange;

import

com.alibaba.otter.canal.protocol.CanalEntry.RowData;public

class

CanalConnectors.newSingleConnector(new

InetSocketAddress(192.168.2.223,11111),

test,

{connector.connect();connector.subscribe(.*\\..*);connector.rollback();int

totalEmptyCount

connector.getWithoutAck(batchSize);

batchId

{emptyCount;System.out.println(empty

count

System.out.printf(message[batchId%s,size%s]

\n,

size);printEntry(message.getEntries());}connector.ack(batchId);

提交确认//

{connector.disconnect();}}private

static

RowChange.parseFrom(entry.getStoreValue());}

catch

rowChage.getEventType();System.out.println(String.format(gt;

binlog[%s:%s]

%s,entry.getHeader().getLogfileName(),

entry.getHeader().getLogfileOffset(),entry.getHeader().getSchemaName(),

entry.getHeader().getTableName(),eventType));for

(RowData

{printColumn(rowData.getBeforeColumnsList());}

else

{printColumn(rowData.getAfterColumnsList());}

else

before);printColumn(rowData.getBeforeColumnsList());System.out.println(-------gt;

after);printColumn(rowData.getAfterColumnsList());}}}}private

static

{System.out.println(column.getName()

column.getValue()

https://github.com/alibaba/canal/issues