hbase常见错误整理3年运维经验整理_hbasesehll错误:找不到或无法加载主类sehll资源-CSDN文库

hbase

2星需积分: 50 180 浏览量 2018-11-28 21:19:09 上传评论 4 收藏 713KB DOCX 举报

资源推荐

资源详情

资源评论

配置第三方依赖包 HADOOP_CLASSPATH 和 HBase 问题

关于这个环境变量。存放在  里面。

这个环境变量是  执行程序时会查询  的路径。以前遇到过在本地开发

 程序，本地编译通过本地开发有在  里面导入  包，打包  包并未包含

开发时的  的  中的  包因为考虑到运行  环境中有这些  包然后在

 环境下  运行报错不能够找到类。原因是环境中的 的  路

径没有包含在  !""# 里面

解决方法在  里面添加一行

/*(*一定要不然报错)

包含  包即可解决问题

报错：

记一次  集群修复过程

hbase master 启动报错

报错信息：

java.io.IOException: Received error when attempting to archive files

([class org.apache.hadoop.hbase.backup.HFileArchiver$FileablePath,

file:hdfs://nameservice1/hbase/data/default/RASTER/92ceb2d86662ad6d959

f4cc384229e0f/f, class

org.apache.hadoop.hbase.backup.HFileArchiver$FileablePath,

file:hdfs://nameservice1/hbase/data/default/RASTER/92ceb2d86662ad6d959

f4cc384229e0f/i, class

org.apache.hadoop.hbase.backup.HFileArchiver$FileablePath,

file:hdfs://nameservice1/hbase/data/default/RASTER/92ceb2d86662ad6d959

f4cc384229e0f/recovered.edits]), cannot delete region directory. at

org.apache.hadoop.hbase.backup.HFileArchiver.archiveRegion(HFileArchiv

er.java:148) at

org.apache.hadoop.hbase.backup.HFileArchiver.archiveRegion(HFileArchiv

er.java:75) at

org.apache.hadoop.hbase.master.CatalogJanitor.cleanParent(CatalogJanit

or.java:333) at

org.apache.hadoop.hbase.master.CatalogJanitor.scan(CatalogJanitor.java

:254) at

org.apache.hadoop.hbase.master.CatalogJanitor.chore(CatalogJanitor.jav

a:101) at org.apache.hadoop.hbase.Chore.run(Chore.java:87)

解决方案：

直接删除报错表 RASTER 对应的 hdfs 中 Hbase.tmp 中的目录

hadoop fs -rm -r -f

hdfs://mycluster/apps/hbase/data/.tmp/data/default/RASTER

在高并发写时，HBase 的 HDFS DFSClient 端报 SocketTimeoutException 的问题分析和解决

报错信息：

 ! "#$!%&'()*)+)+,)-.-//0

&.**1.,*2

23!#3#$45666#5$$6478).)*20/9*1.6#010/::1.(

,*..+;,+)*78).)*..)*2..<*..*+*+:53$$#

0+:6=

()*)+).)*2>%0/)+>?*2>%0/)7863@

()*)+).)*2>./0)+?*2>./0)785@

()*)+).)*2>./0)+?*2>./0)78!@

78))>./0)+-/;?>./0)784$@

78))>./0)+.(?>./0)78!##@



解决方案：

在 +, 端和  端，配置同样的 +,)*2)10/ 值。在云梯环境下配置的是

$（$ 秒）

老版本参数：+,)*2)10/

新版本参数：dfs.client.socket-timeout

dfs.socket.timeout

dfs.datanode.socket.write.timeout

$%&'

(((($)'*%+%,%%)%$-)'

(((($'.//////$-'

(($-%&'

(($%&'

(((($)'*+%%)%$-)'

(((($'.//////$-'

(($-%&'

($-01%'

参考链接：

https://blog.csdn.net/zhaokunwu/article/details/7336892

山东省厅 AB 参数设置：

(.8报错然后造成(. 下线，最终所有 (. 都下线后，这个 (.8 就挂掉

了

报错信息

3  5"#39&&&()*)+))(.8)&(.8.+

+,+

()*)+)+,)8).0.+)9+9*1.

()*)+)+,)8).0.+)9+9*1.'.

)(+!"6"!##3$6$+!C6C!##3$6$)!#!3#$#3

-+.)+-.+!"6"!##3$6$+.8.;.

D)

解决方案：

结果发现两个日志有几乎相同的记录，可以确认 hbase 的问题是由 hadoop 引起，修改如下：

解决办法，调整  参数

默认是 2/34，改为 5637

*%)

$%&'

$)'dfs.datanode.max.transfer.threads$-)'

$'5637$-'

$-%&'

*%)参数说明

一个8"%有一个同时处理文件的上限这个参数叫 的

作者把这个单词拼错了在你加载之前，先确认下你有没有配置这个文件 *-*%) 里面

的  参数，至少要有 2/349

剩余10页未读，继续阅读

评论收藏

内容反馈

阿星777

2021-07-09

没啥用，没解决我遇到的问题。

陆继森

粉丝: 33
资源: 5

hbase常见错误整理3年运维经验整理

10大HBase常见运维工具整理小结

Hbase资源整理集合

hbase运维手册

Linux运维入门Hbase与Hive的安装参照手册

Hbase运维手册.pdf

《HBASE系统运维实践》淘宝资深数据库工程师许飞飞

HBase官方文档中文版-HBase手册中文版

Hbase运维碎碎念.pptx

深入学习hbase原理资料整理

Hbase运维手册范本.doc

Hbase 知识整理 xmind

HBase常见热点问题及几种解决方案.docx

大数据运维技术第7章 HBase组件安装与配置课件.pptx

HBase学习笔记(个人整理)

HbaseTemplate 操作hbase

18-HBase整理

java大数据作业_3HBase

20190417某大数据中心项目建设设计方案

实验四：NoSQL和关系数据库的操作比较

hbase-2.0.2.3.1.4.0-315-bin.tar.gz

hbase导入测试数据集

高铁铁路数据.zip

ECharts Web数据可视化教案-售货机大数据分析平台.rar

中国1-5级河流，全国水系矢量图，行政区界（包含国界，省界，县界），主要交通道路（公路、铁路），居民地分布.rar

SPSS 24 64bit 安装包 exe

Presto技术内幕

phoenix-5.0.0-HBase-2.0-client.jar

最新资源