Zookeeper数据迁移及恢复操作_Maybebb的博客-CSDN博客_clickhouse 重新部署 zookeeper旧数据怎么处理
Zookeeper数据迁移及恢复操作
Maybebb
于 2018-12-19 20:11:51 发布
6977
收藏
分类专栏：
zookeeper
文章标签：
Zookeeper
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hy245120020/article/details/85107317
版权
zookeeper
专栏收录该内容
3 篇文章
0 订阅
订阅专栏
部署zookeep集群
可以参考：zookeeper-3.4.6安装，正常部署后关闭zookeeper集群
迁移数据
找到原先配置中的数据保存地址，可以在zoo.cfg配置文件中查看，例如：dataDir=/data/zookeeper/data 进入数据保存地址
[root@localhost version-2]# cd /data/zookeeper/data/version-2
[root@localhost version-2]# ls -alh
-rw-r--r--. 1 root root 65M 7月 23 11:31 log.ab0002b261
-rw-r--r--. 1 root root 65M 9月 22 21:45 log.ab0002b827
-rw-r--r--. 1 root root 65M 12月 13 11:13 log.ab0002cfd1
-rw-r--r--. 1 root root 29K 12月 30 2014 snapshot.1900000665
-rw-r--r--. 1 root root 35K 2月 4 2015 snapshot.7f0000017f
-rw-r--r--. 1 root root 39K 2月 12 2015 snapshot.8200015437
-rw-r--r--. 1 root root 37K 4月 5 2015 snapshot.880001408b
-rw-r--r--. 1 root root 37K 4月 8 2015 snapshot.88000209c5
找到最新的日志文件和快照文件，如上就是log.ab0002cfd1和snapshot.88000209c5，日志文件存放zookeeper 全部数据记录 ，快照文件则是内存增量文件。 拷贝数据到新的zookeeper集群节点下，重启zookeeper服务，查看节点数据是否正常
[root@localhost version-2]# scp log.ab0002cfd1 snapshot.88000209c5 root@192.168.97.212:/data/zookeeper2
Maybebb
关注
关注
点赞
收藏
打赏
评论
Zookeeper数据迁移及恢复操作
部署zookeep集群可以参考：zookeeper-3.4.6安装，正常部署后关闭zookeeper集群迁移数据找到原先配置中的数据保存地址，可以在zoo.cfg配置文件中查看，例如：dataDir=/data/zookeeper/data进入数据保存地址[root@localhost version-2]# cd /data/zookeeper/data/version-2...
复制链接
扫一扫
专栏目录
zookeeper数据迁移从单例到集群linux命令过程
04-08
zookeeper数据迁移从单例到集群linux命令过程
zookeeper数据迁移、导入导出
祥哥
11-03
2337
有一个好用的开源zkcopy，直接搞定。
git clone https://github.com/kshchepanovskyi/zkcopy.git
使用maven 构建jar包
mvn clean install
在原始服务器上执行如下命令向目标机server:port上拷贝数据，如果这个目标机是本地电脑显然很难实现拷贝（可以做外网映射）
java -jar target/zkcopy.jar --source server:port/path --target serve
评论 2
您还未登录，请先
登录
后发表或查看评论
zookeeper数据迁移及恢复
xiao_7_syf的博客
09-24
1583
在应用系统上云迁移的时候经常会遇到中间件的数据迁移，今天就和大家介绍一下zookeeper的数据如何迁移与恢复。
第一步：从原系统环境zookeeper服务器的数据目录下复制最新的日志和快照文件。
先去zookeeper的配置文件中找到data目录存放路径：
cd /usr/local/zookeeper/conf
cat zoo.cfg
打开zoo.cfg文件找到具体配置的zookeeper的data目录，例如：
# the directory where the snapshot is sto
zookeeper集群迁移(扩容)详解
最新发布
张伟的专栏
10-17
144
(1)以前应用服务的zk配置可以不改(只要配置里有一个zk节点的地址,如果全部节点都迁移了，可能也不需要改，但是要验证)，下次应用服务要重新配置新的集群zk链接串。(2)dubbo-admin和monitor可以不重新启动(只要配置里有一个zk节点的地址,如果全部节点都迁移了，可能也不需要改，但是要验证)，但是改配置文件，下次启动更健壮。
5 分钟完成 ZooKeeper 数据迁移
java_beautiful的博客
09-14
867
前言MSE 提供了托管版的 ZooKeeper，包含比开源 ZooKeeper 更强大更稳定的功能，能帮助您免去运维 ZooKeeper 集群的烦恼，当我们需要从自建 ZooKeeper 迁移到 MSE ZooKeeper 上面时，往往依赖旧集群的数据，MSE 提供了多种数据迁移的方案，其中主流的方案可以通过 MSE Sync 进行实时同步，这样能够达到平滑不停机的目的，本文将介绍另外一种数据迁移的方式，主要针对业务支持停机的场景，进行一个补充，操作相比更加简单快速。实现原理。
ZooKeeper运维——集群动态迁移与扩缩容（不停机+不丢失）
你学废了吗？
09-27
3949
zk集群的动态迁移与扩缩容需要做到两个不：不停机！不丢失！
zookeeper数据迁移
qq_26423647的博客
11-07
527
zookeeper数据迁移
zookeeper目录下的data文件夹中的version-2 包含了log snop acceptedEpoch currentEpoch
log是全量日志 snop是增量快照 其余两个文件和选举次数有关
1.数据迁移的时候要把log和snop最新的文件迁移过去，acceptedEpoch currentEpoch 按照原宿主机修改次数
2.迁...
zookeeper集群节点扩容数据迁移，3节点扩容至7节点
ligaoman521的博客
09-10
761
集群扩容说明
扩容过程中要保证原zookeeper集群还是能提供服务，新zookeeper集群同步老集群的数据，后续将zookeeper域名指向新曾集群的4个节点IP。
扩容步骤
原有集群zookeeper的配置：
# cat zoo.cfg
zoo.cfg
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/data/zookeeper
dataLogDir=/data/zookeeper/log
clientPort=2181
ma
Zookeeper数据迁移
qq_19648309的博客
07-16
345
package zookeeper;
import org.apache.zookeeper.CreateMode;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.ZooKeeper;
import org.apache.zookeeper.KeeperException;
import org.apache.zookeeper.data.ACL;
import org.apache.zookeeper.data.St.
Zookeeper集群无状态平滑升级、迁移
长沙老码农
02-25
1370
目录
1、 前言
2、升级迁移拓扑图
2.1 zookeeper集群升级
2.2 zookeeper集群迁移
3、zookeeper应用
3.1 客户端开启DNS域名解析
3.2 dubbo-admin管理控制台
3.3 启动dubbo-admin
4、升级部署
4.1 版本升级
4.2 容量升级
5、迁移部署
5.1 局部迁移
5.2 整体迁移
6、写到最后
1、 前言
前面我们学习的了Zookeeper的集群搭建和管理，也学习和探讨了它的选举原理，我们这一章节来学.
新版zookeeper迁移数据简单方法（在拿不到zookeeper快照情况下的方法）
小书生
09-15
525
刚刚在研究怎么把一台Centos服务器上的zookeeper数据迁移到另外一台机上，在网上找了很多方法和工具，都不实用，以及网上最多迁移zookeeper数据的方法是最新快照加最新的事务日志，但是在新版zookeeper中找不到快照数据，据说zookeeper会自动清理快照数据，然后我就猜想直接迁移事务日志可以吗，经过实验，成功通过迁移事务日志迁移了zookeeper的数据，具体操作流程如下：
声明：文中“源机”代表的是需要被迁移zookeeper数据的主机。
文中“目标机”代表的...
记录下 zookeeper 集群迁移和易错点
Nicksxs的专栏
05-31
128
前阵子做了zk 的集群升级迁移，大概情况是原来是一个三节点的 zk 集群（最小可用
大概是
zk1 192.168.2.1
zk2 192.168.2.2
zk3 192.168.2.3
在 zoo.cfg 中的配置就是如下
server.1=192.168.2.1:2888:3888
server.2=192.168.2.2:2888:3888
server.3=192.168.2.3:2888:3888
zookeeper数据迁移方法
dengji8846的博客
12-22
810
有一个好用的开源zkcopy，直接搞定。
git clone https://github.com/kshchepanovskyi/zkcopy.git
介绍：
zkcopy
Tool for fast copying ZooKeeper data between different clusters.
Optimized for copying big ...
数据迁移.ZooKeeper
qq_27787581的博客
12-05
153
ZooKeeper的数据迁移
方式：1)原生命令行
2)zkcopy
原生命令行
步骤：1)找到服务器上的ZooKeeper安装路径
vi /usr/local/zookeeper-3.4.9/conf/zoo.cfg
datadir=/usr/local/zookeeper-3.4.9/data
2)查看最新的log和快照数据
cd /usr/local/zookeeper-3.4.9/data/version-2/
3)把最新的两个文件拷贝到另外的ZooKeeper服务目录下
sz log.f32bb
Zookeeper节点数据备份与恢复
qq_53086187的博客
11-23
2681
zookeeper数据备份分为热备份和冷备份
冷备份：
准备一套安装了zk集群部署的环境和一台zk单节点部署的环境，保证zk单节点部署的环境没有数据
zk集群部署环境规划
hadoop01：192.168.76.111 网关：192.168.76.2 子网掩码：255.255.255.0
hadoop02：192.168.76.112网关：192.168.76.2子网掩码：255.255.255.0
hadoop03：192.168.7...
docker安装和启动zookeeper，数据导入及导出
wejack的专栏
05-27
547
由于工作需要做一个项目测试，需要本地安装指定一个版本的zookeeper，然后将另一个zookeeper项目的数据全部都导入到本地的项目中。
1.在dockerhub中搜索指定的版本
访问https://hub.docker.com/ 搜索zookeeper，点击Tags页签，可以看到相应的版本。
在对应的版本的右侧有下载拉取镜像的命令。
2.docker安装指定版本的zookeeper及启动
先执行命令拉取镜像
~% docker pull zookeeper:3.4.14
~% docker.
zk数据迁移&删除过多zk node
zpsimon的博客
12-28
897
一.前提知识概要
生产环境最近遇到zookeeper 巡检发现znode很多的问题，撸代码发现写zk的逻辑几乎不怎么会进去，而且代码删除znode的逻辑有bug。巡检正好发现，于是研究了下zk。
zk,即zookeeper，ZooKeeper是一个集中的服务，主要用于配置信息的维护、命名、分布式同步和组服务。所有这些类型的服务都以某种形式被分布式应用程序使用。其中分布式同步、分布式锁控制等用的比较多。本文背景就是在分布式锁应用场景下。作为redis 分布式锁获取失败时的兜底方案。
由于涉及大量的znode数
zookeeper集群节点热扩容和迁移详解
杂货铺子
09-16
391
推荐阅读
Helm3（K8S 资源对象管理工具）视频教程：https://edu.csdn.net/course/detail/32506
Helm3（K8S 资源对象管理工具）博客专栏：https://blog.csdn.net/xzk9381/category_10895812.html
本文原文链接：https://blog.csdn.net/xzk9381/article/details/120332702，转载请注明出处。如有发现文章中的任何问题，欢迎评论区留言。
Zookeeper 集群.
Kafka的灵魂伴侣Logi-KafkaManger(4)之运维管控–集群运维(数据迁移和集群在线升级)
热门推荐
石臻臻的杂货铺(szzdzhp001)
04-26
2万+
详细介绍 应用管理 用户管理 平台配置等模块
还有kafka的分区迁移任务;
“相关推荐”对你有帮助么？
非常没帮助
没帮助
一般
有帮助
非常有帮助
提交
©️2022 CSDN
皮肤主题：大白
设计师：CSDN官方博客
返回首页
Maybebb
CSDN认证博客专家
CSDN认证企业博客
码龄11年
暂无认证
131
原创
6万+
周排名
36万+
总排名
37万+
访问
等级
4172
积分
54
粉丝
43
获赞
90
评论
200
收藏
私信
关注
热门文章
windows下使用pycharm配置python的virtualenv环境
49795
sharding-jdbc分库分表
44755
mysql数据库死锁：Deadlock found when trying to get lock; try restarting transaction
27823
解决“网易邮箱提醒：一次被阻止的收信行为”
17349
guava和caffeine性能测试
10713
分类专栏
CDH5.16.2
2篇
代码分享
3篇
Spring
1篇
Flink
1篇
前端
Oracle
9篇
Java
33篇
MyBatis
1篇
微信开发
2篇
MySQL
8篇
Ajax
4篇
插件安装
1篇
EasyUI
3篇
Android
4篇
Python
16篇
MongoDB
1篇
工具
8篇
Netty
1篇
Ant
Markdown
1篇
Maven
5篇
eclipse
1篇
Blog
1篇
Linux
9篇
SpringBoot
12篇
Web
1篇
zookeeper
3篇
Hadoop
4篇
缓存
4篇
Tomcat
1篇
JMeter
Docker
2篇
Redis
Confluence
Nginx
1篇
Sping Cloud
3篇
Storm
2篇
BigData
1篇
Kafka
2篇
sharding-jdbc
1篇
Nacos
2篇
大数据
2篇
Github
1篇
最新评论
springboot2.x版本多个redis实例配置学习
小码农叔叔:
清晰明了，简单易学
Zookeeper数据迁移及恢复操作
Java的咖啡:
新的数据放到哪里
sharding-jdbc分库分表
java_新手上路:
如果主键生成策略用的是sharding给的雪花算法的话，主键长度有18位，18长度的主键范围循环嵌套表数量循环，这样会不会是影响性能的一个比较大的因素
springboot+feign+ribbon+hystrix构建高可用的客户端api访问
程千骞:
感谢分享，终于匹配了！
springboot+feign+ribbon+hystrix构建高可用的客户端api访问
Coffey强:
好文 收藏了
您愿意向朋友推荐“博客详情页”吗？
强烈不推荐
不推荐
一般般
推荐
强烈推荐
提交
最新文章
cdh5.16.2配置flume读取kafka文件到hdfs
java中统计代码块耗时
Java8 时间函数使用
2021年1篇
2020年7篇
2019年15篇
2018年22篇
2017年26篇
2016年30篇
2015年36篇
2014年1篇
目录
目录
分类专栏
CDH5.16.2
2篇
代码分享
3篇
Spring
1篇
Flink
1篇
前端
Oracle
9篇
Java
33篇
MyBatis
1篇
微信开发
2篇
MySQL
8篇
Ajax
4篇
插件安装
1篇
EasyUI
3篇
Android
4篇
Python
16篇
MongoDB
1篇
工具
8篇
Netty
1篇
Ant
Markdown
1篇
Maven
5篇
eclipse
1篇
Blog
1篇
Linux
9篇
SpringBoot
12篇
Web
1篇
zookeeper
3篇
Hadoop
4篇
缓存
4篇
Tomcat
1篇
JMeter
Docker
2篇
Redis
Confluence
Nginx
1篇
Sping Cloud
3篇
Storm
2篇
BigData
1篇
Kafka
2篇
sharding-jdbc
1篇
Nacos
2篇
大数据
2篇
Github
1篇
目录
评论 2
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
打赏作者
Maybebb
你的鼓励将是我创作的最大动力
¥2
¥4
¥6
¥10
¥20
输入1-500的整数
余额支付
(余额：-- )
扫码支付
扫码支付：¥2
获取中
扫码支付
您的余额不足，请更换扫码支付或充值
打赏作者
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额
抵扣说明：
1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。 2.余额无法直接购买下载，可以购买VIP、C币套餐、付费专栏及课程。
余额充值