griffin集成Livy kerberos.docx
EBay开源出来的apache griffin是一款数据质量检测工具,结合Livy、spark、hive、hdfs去使用的。但是开源的代码质量有些差,而且报错日志不友好,楼主踩了很多坑才部署好,实测可用,特将文档记录下来分享给大家。这个文档中包含了操作系统+Livy+HDFS的配置与集成
EBay开源出来的apache griffin是一款数据质量检测工具,结合Livy、spark、hive、hdfs去使用的。但是开源的代码质量有些差,而且报错日志不友好,楼主踩了很多坑才部署好,实测可用,特将文档记录下来分享给大家。这个文档中包含了操作系统+Livy+HDFS的配置与集成
测试orc、rcfile、sequence、parquet、textfile的压缩对比、查询时间、cpu耗时对比等
hbase监控工具hbtop CDH6.3.2版本,用于监控表、namespace的访问情况,可快速定位问题
cdh5和cdh6,Hive版本之间不兼容的特性。要做升级的朋友可以看看,主要是union和union all
hbase hbck2修复工具hbase-operator-tools-1.0.0.1.0.0.0-618-bin.tar.gz,hbase1版本的hbck已经不支持修复命令,hbase2.1版本需要用这个新版的工具