如何重新格式化Hadoop搭建的hbase环境

最新推荐文章于 2025-01-29 13:45:49 发布
原创 最新推荐文章于 2025-01-29 13:45:49 发布 · 2.6k 阅读 · 2
当Hbase环境中数据块丢失时，需要重新格式化集群。步骤包括删除Hadoop/tmp目录，启动Zookeeper和JournalNode，格式化NameNode，删除并同步slave节点的hadoop/tmp，最后启动DFS和HBase服务。

背景：其实我之前已经搭建好hbase环境了，但是后来发现我的数据块丢失了，所以我不得不重新格式化整个集群

【1】删除各个集群的Hadoop/tmp

rm -r /home/michael/soft/hadoop/hadoop/tmp

【2】先用zkServer.sh start 启动各个zookeeper，再用hadoop-daemon.sh start journalnode启动各个NodeName上的 JournalNode进程。然后再进行格式化即可

zkServer.sh start    (ps:各个机器上都得启动)

hadoop-daemon.sh start journalnode  (ps:各个机器上都得启动)

hdfs   namenode  -format 

【3】然后把slave1上的hadoop/tmp删了，再把master上的hadoop/tmp拷贝到slave1上的hadoop/tmp

标签
#如何重新格式化Hadoop搭建的hbase环境 #重新格式化
最低0.47元/天 解锁文章
Hbase 面试题（九）
闲依农圃邻，偶似山林客。
06-05 1178
1. 简述HBase 安装部署基本流程（ 概述 ） ？ 2. 简述Hbase 中如何统计一张表的行数最快？ 3. HBase 与 Cassandra 相比如何？ 4. 简述当先前填充的数据库中列族的块大小发生变化时会发生什么？ 5. 简述什么是Hbase单机模式？ 6. 阐述HBase集群中HMaster 作用 ？
强制格式化hadoop，清除HBase数据
ljz2173的博客
10-09 7813
自己配置的Hadoop+Hbase集群，之前正常运作，向集群中导入了120G的数据；隔了一段时间在此往里面导入数据，各种出错，最明显的就是某个节点的regionserver自动关闭，随之而来的就是其他节点也相继自动关闭，但HMaster运作正常。作为新手，日志看不懂，百度google不到问题所在，无奈之下，只能强制格式化hadoop，清除HBase数据，从零开始： 1、删除各个节点中hdfs目录
基于hadoop的Hbase集群丢失块信息后，清除Hbase数据，格式化hdfs文件系统
lll0101的博客
07-25 2527
可以看到在hdfs文件系统中Hbase的元数据块丢失，这是非常严重的，因本人初学，所以采用格式化的方式来重建。 启动Hbase集群后显示如下错误： 1.清除数据之前先把Hbase和Hadoop及zookeeper(Hbase 依赖于zookeeper)的相关的进程都停掉 stop-hbase.sh(停Hbase进程) stop-all.sh（停Hadoop进程） zkServer.sh s...
Hadoop原理与技术——Hbase的基本操作
FGGIT的博客
12-03 1289
Hadoop原理与技术——Hbase的基本操作
hadoop格式化带来的后遗症
top_OMZ的博客
12-16 860
hadoop格式化
hbase集群搭建参考资料
diejia1113的博客
01-19 370
hadoop分布式集群搭建 http://www.ityouknow.com/hadoop/2017/07/24/hadoop-cluster-setup.html hbase分布式集群搭建： http://www.ityouknow.com/hbase/2017/07/25/hbase-cluster-setup.html Hadoop集群之 ZooKeeper和Hbase环境...
Hadoop之HMaster会自动停掉,怎么回事?
Android开发
07-01 2626
问题: 搭建hadoop的测试环境完后, 发现HMaster会自动停掉, 启动后, 刚开始能jps看到HMaster的进程, 几秒后再jps就不见了. 怎么回事? Log中是: [root@master2 bin]# more /data/hbase-0.96.0-hadoop2/logs/hbase-root-master-master2.out SLF4J: Class path cont
关于Hadoop重新格式化之后集群的崩溃问题
CSDN2022博客之星Top39；华为云博主7&，CSDN、稀土掘金、微信公众号、阿里云开发者社区、腾讯云社区、博客园、知乎、51CTO同名博主WHYBIGDATA；
09-09 1256
关于Hadoop重新格式化之后集群的崩溃问题
【Hadoop和Hbase集群配置】3台虚拟机、jdk+hadoop+hbase下载和安装、环境配置和集群测试
2201_75539359的博客
11-06 3918
VMware+CentOS7，3台虚拟机配置hadoop集群，jdk+hadoop+hbase的下载和安装、环境配置，Hadoop和HBase集群测试
大数据环境搭建 Hadoop + Hbase
LZW15082682930的博客
02-08 755
搭建前准备： 1.虚拟机下载地址： 链接：https://pan.baidu.com/s/1pql5PT88Zd7-5vd0cPm_3Q 提取码：i9py 2.环境搭建教程： 链接：https://pan.baidu.com/s/1wtw9FNSm3oYQKsDllsa86Q 提取码：vupp Hadoop搭建： 1.环境及工具：链接：https://pan.baidu....
HBase基础环境搭建之Hadoop搭建
Hadoop环境搭建教程
01-09 441
先安装工具：yum install -y net-tools 上传工具包 解压文件 tar -zxvf hadoop-2.7.3.tar.gz -C /opt/bigdata/ 修改hadoop/etc/hadoop/hadoop-env.sh文件 修改hadoop/etc/hadoop/mapred-env.sh文件 修改hadoop/etc/hadoo...
虚拟机安装hadoop+hbase+spark+kafka
weixin_50529973的博客
06-14 2368
** 一、虚拟机的安装 1.1安装虚拟机-Linux 1.创建新的虚拟机，选择自定义–>下一步 2.默认选项，直接单击下一步 3.选择稍后安装操作系统–>下一步 4.操作系统选择Linux,版本这里选了Red Hat Enterprise Linux 6 64位，单击下一步 5.更改虚拟机的名称为hadoop01,先在G盘创建hadoop_linux文件，再在其下新建一个文件夹hadoop01，更改安装路径，点击浏览（选择刚刚创建的文件夹）–>下一步 6.每个处理器的内核数量选择2
关于在hadoop中搭建HBase时创建表一直显示“Master is initializing”的问题
zqii07的博客
12-13 2750
今天帮室友解决了这个问题，对于我个人来说感触还是蛮深刻的，毕竟这个东西真的弄得要崩溃了，本想着去找老师问问，但是又想自己再挣扎一下下，果然成功了，这简直就像是中了彩票一样哈哈哈哈~（ps：在写这个value时注意与之前在hadoop当中的core-site.xml中的那个hdfs地址对应，同时将这个节点上的hbase进行分发一下，就是传给其他节点！（这个命令根据自己的情况，看有没有配置环境变量，或者有没有写脚本，灵活变通一下，只要能把这个服务关了就行，可以通过jps查看一下！
单机伪分布Hadoop、HBase配置
最新发布
qq_51180928的博客
01-29 2556
单机伪分布Hadoop、hbase配置
Hbase遇到的问题Unable to move table from temp重新格式化hbase
young_so_nice的博客
05-14 3692
一，问题：Unable to move table from temp=hdfs://master:9000/hbase/.tmp/data/default/scores2 to hbase root=hdfs://master:9000/hbase/data/default/scores2 at sun.reflect.NativeConstructorAccessorImpl.newInstan
java连接Hbase操作数据库的全过程---搭建伪分布式hadoop环境
小小的人儿的博客
05-09 1511
1.环境准备 1.centos7+jdk8.0 安装环境前先来了解下hbase与jdk和hadoop的版本兼容性问题：http://hbase.apache.org/book.html#basic.prerequisites，http://hbase.apache.org/book.html#hadoop 本文选择hadoop-2.6.5.tar.gz和hbase-2.0.5-bin.tar...
解决问题：在格式化Hadoop之后无法使用HBase和Kafka
蔡政洁的博客
09-25 587
目录抛出问题：查找问题：解决问题：测试结果： 抛出问题： 在初学Hadoop的时候，由于自己手残，把Hadoop格式化了，结果导致很多数据丢失，hbase和kafka不能正常使用，如图所示： 查找问题： 于是我将hbase全部重新安装，结果还是不能解决。后来经过高人指点，找出了出现这种问题的原因： 因为zookeeper上存储了hbase和kafka的元数据，hdfs存储了hbase数据本身，所以重新安装和格式化Hadoop没有作用 解决问题： 解决方案是，通过zookeeper的客户端命令，将hbase
解决org.apache.hadoop.hbase.client.RetriesExhaustedException:Can't get the locations的问题
weixin_42209572的博客
07-16 7156
如果配置hbase伪分布式集群时用hbase自带的zookeeper，先启动Hadoop上的守护进程，然后启动HBase. 启动Hadoop—>启动HBase—>关闭HBase—>关闭Hadoop. cd /usr/local/hadoop ./sbin/start-all.sh #启动Hadoop所有守护进程 cd /usr/local/hbase /bin...
多台服务器搭建 Hadoop HA + Hbase HA 完全分布式
mqy224512的博客
03-05 1780
Hadoop HA 完全分布式搭建 说明: 多个服务器搭建集群   常见问题:  端口是否开放,ip是否禁止,jdk版本,JAVA_HOME 环境是否正确…   问题排查可以查看日志信息   如果服务器不够，也可以用三台的,也可以用VMware 模拟集群搭建   华为云 1核1G 服务器, 使用jdk-8u211-linux-x64.tar.gz, 启动集群,可能会出现版本不合的问题 ...
Hadoop-Hbase搭建过程中遇到的问题总结
weixin_42241438的博客
12-07 853
1、多次格式化NameNode，导致DataNode不能启动 多次将namenode格式化，导致namenode和datanode的clusterID不一致 从而无法启动datanode 解决方案 方法1、打开core-site.xml中设置的hadoop.tmp.dir的位置，手动将该位置中dfs/data/current/VERSION的文件中的clusterID均改为主节点的clusterID； 方法2、手动将所有服务器中该位置中的文件均删除，然后重新格式化NameNode，hadoop n
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值