zookeeper清理快照

zookeeper长时间运行#xff0c;快照逐渐增多可能造成服务器磁盘被占满的情况#xff0c;但我们不能贸然用rm命令删除快照文件#xff0c;如果直接删完会导致丢失好多数据#x…本文将分享一些zookeeper在日常使用中一些维护经验。

zookeeper清理快照

zookeeper长时间运行快照逐渐增多可能造成服务器磁盘被占满的情况但我们不能贸然用rm命令删除快照文件如果直接删完会导致丢失好多数据所以我们需要设置相关参数并使用一些优雅的命令来删除文件zookeeper自带的脚本zkCleanup.sh。

[rootk8s-m1

20使用自带的这个脚本可以较好的删除当然我们也可以使用一些linux命令删除n天前的数据注意自己实际环境中的目录设置。

[rootk8s-m1

/opt/apache-zookeeper-3.7.1-bin/logs

-name

配置autopurge.snapRetainCount和autopurge.purgeInterval参数。

autopurge.purgeInterval13.4.0之前的版本可以通过zookeeper的配置自行对snap进行管理。

如下这三个参数分别表示一个小时清理一次log的大小单位是kb和快照的数量。

另外要注意的是zookeeper重启会自动清除zookeeper.out日志所以如果出错要注意先备份这个文件。

dubbo对于每个结点都会watch导致watch数很多随便都几千个。

用wchswchcwchp这些命令可以查看watches的信息包括总数每条路径上的watch的数量每个client的。

[rootk8s-m1

zookeeper会有很多原因启动不成功可以通过以下命令来查看启动时报的是什么异常同时也可以查看运行过程中的异常。

[rootk8s-m1

start-foreground还可以通过下面命令查看zookeeper启动的各个参数包括java路径等也可以便于查找问题。

[rootk8s-m1

print-cmd配置zookeeper.out的位置及log4j滚动日志输出

有时候zookeeper.out这个文件很大。

根据zkServer.sh的代码这个zookeeper.out实际上是nohup的输出。

而nohup的输出实际上是stdout和stderr的输出所以还是zookeepe本身的日志配置的问题而这样输出路径和大小没法控制因为日志文件没有轮转。

所以需要修改日志输出方式。

查看bin/zkServer.sh和conf/log4j.properties这两个文件发现zookeeper其实是有日志相关的输出的配置只要定义相关的变量就可以了。

主要是ZOO_LOG_DIR和ZOO_LOG4J_PROP这两个环境变量

$ZOO_LOG_DIR

fiZOO_LOG_FILEzookeeper-$USER-server-$HOSTNAME.log

_ZOO_DAEMON_OUT$ZOO_LOG_DIR/zookeeper-$USER-server-$HOSTNAME.outcase

start)echo

-Dzookeeper.log.dir${ZOO_LOG_DIR}

\-Dzookeeper.log.file${ZOO_LOG_FILE}

-Dzookeeper.root.logger${ZOO_LOG4J_PROP}

\-XX:HeapDumpOnOutOfMemoryError

\-cp

而zkServer.sh会加载zkEnv.sh。

因此其实修改下bin/zkEnv.sh里面的ZOO_LOG_DIR变量就可以了。

而ZOO_LOG4J_PROP指定INFOROLLINGFILE日志的APPENDER。

x${ZOO_LOG_DIR}

***nZOO_LOG_DIR$ZOOKEEPER_PREFIX/logs

fiif

***n#ZOO_LOG4J_PROPINFO,CONSOLE#ZOO_LOG4J_PROPINFO,DailyROLLINGFILEZOO_LOG4J_PROPINFO,ROLLINGFILE

#需要将CONSOLE改成ROLLINGFILElog4j.properties里的zookeeper.root.logger的值与前一个文件的ZOO_LOG4J_PROP

保持一致注意保持一致非常重要否则zookeeper不能正常启动该日志配置是以日志文件大小轮转的如果想要按照天轮转可以修改为DaliyRollingFileAppender。

[rootk8s-m1

/opt/apache-zookeeper-3.7.1-bin/conf/log4j.properties

ROLLINGFILE

log4j.appender.ROLLINGFILEorg.apache.log4j.RollingFileAppender

#log4j.appender.ROLLINGFILEorg.apache.log4j.DailyRollingFileAppender

log4j.appender.ROLLINGFILE.Threshold${zookeeper.log.threshold}

log4j.appender.ROLLINGFILE.File${zookeeper.log.dir}/${zookeeper.log.file}

log4j.appender.ROLLINGFILE.MaxFileSize${zookeeper.log.maxfilesize}

log4j.appender.ROLLINGFILE.MaxBackupIndex${zookeeper.log.maxbackupindex}

log4j.appender.ROLLINGFILE.layoutorg.apache.log4j.PatternLayout

log4j.appender.ROLLINGFILE.layout.ConversionPattern%d{ISO8601}

[myid:%X{myid}]

%m%n还可以修改下conf/log4j.properties设置滚动日志最多为10个

Max

log4j.appender.RFAAUDIT.MaxFileSize10MB

log4j.appender.RFAAUDIT.MaxBackupIndex10Too

many

部分操作可以参考https://blog.csdn.net/margu_168/article/details/132606402

zktop

PrettyZoo是一款Java写的高颜值ZooKeeper客户端桌面应用,颜值非常高支持Mac

Windows

https://github.com/vran-dev/PrettyZoo/releases

具备如下功能

JSON、XML支持节点数据高亮JSON、XML、Properties

更多关于zookeeper的知识分享请前往博客主页。

编写过程中能力有限难免出现差错敬请指正